借助浪潮信息元脑企智EPAI高效创建大模型RAG
面对大量不断迭代的新知识，大模型必须“终身学习”才能满足实际应用的需求。RAG（Retrieval-augmented Generation，检索增强生成）让生成式大模型能够利用外部的知识源来增强生成能力，提高生成质量和可靠性。但企业构建知识检索系统并非易事，通常面临开发门槛高、生成内容差等难题。而借助浪潮信息元脑企智EPAI企业大模型开发平台，企业仅需三步即可高效创建大模型RAG，让企业内部积累的大量数据得到有效利用，唤醒企业沉睡的知识，显著提升大模型回答的准确性。
RAG：生成式大模型落地的最佳实践方案
在AIGC大模型落地企业应用过程中，必然会碰到的一个问题是，大模型从训练到完成部署，并不意味着抵达了开发工作的“终点”。在真实场景中，每时每刻都在产生大量数据，知识会迭代得飞快，如新学说的出现、领域知识的更新、某个定义的延展、某个指标的调整等，“终身学习”不仅适用于人类本身，对AI来说同样是必须具备的能力。一旦丧失这种能力，大模型会很快表现出能力的“天花板”，包括产生幻觉、缺乏对生成文本的可解释性、专业领域知识理解差，以及对最新知识的了解有限等等。
针对这一问题，业界主要有两种解决途径：一种是微调（Fine Tune）来更新模型，另一种是让AI能够与外部世界互动，以不同的形式和方式获取知识，即大模型+RAG。
微调固然效果好，可以让模型真正的“学会”一些私域知识。但是微调也会带来几个问题：首先，由于生成模型依赖于内在知识（权重），因此模型还是无法摆脱幻觉的产生，在对理解门槛高且准确性要求严格的场景下，这是完全无法接受的。其次，模型微调并不是一个简单的工作，无论是从数据准备、算力消耗、微调效果、训练时间等各个角度来看，随时用新产生的数据来进行微调都是不现实的，且最终微调的效果也无法保证，能够做到每月更新一次都已经是很理想的状态。
相比之下，RAG让生成式大模型能够利用外部的知识源（非模型本身的知识库）来增强模型的生成能力，减少生成内容的偏差和错误，提高生成质量和可靠性，在有效缓解模型幻觉的同时，也能够“唤醒沉睡的知识”，让企业内部积累的大量数据得到有效利用。由于接入外部实时动态数据，RAG在理论上没有知识边界的限制，且无需频繁进行模型训练，故已经成为生成式大模型行业落地最佳实践方案。
RAG很好，但好的RAG不好开发
RAG虽好，但在实际开发应用的场景中，企业构建知识检索系统并非易事，通常面临较高的开发门槛和较差的生成内容等难题。
■ 技术门槛高，开发效率低
首先，即便技术人员编程能力扎实、深悟大模型架构原理，从海量开源方案里挑选出最合适的大模型+ RAG组合，也需要不断的试错，定制化开发的时间成本高昂。其次，RAG的构建包含知识文档的准备、嵌入模型（embedding model）、向量数据库、查询检索和生成回答五个基本环节，各个环节均有着极大的优化空间。如在处理企业数据时，仍需设计流程，清洗、分类、标注各类数据，保其质量达模型训练标准；检索参数配置同样如此，向量模型选取与优化若有差池，也易使模型训练失败、检索不准。而遵循效果相乘叠加的定律，90%×90%×90%×90%×90%=59%，这意味着任何一个环节优化效果不佳，将会导致最终的生成效果与最初设想相距甚远。
■ 复杂文档解析能力不足，生成效果差
企业数据文档种类繁杂，高质量的文档解析能力会极大影响最终的知识检索成效。以金融机构为例，合同、报告、Excel 财务数据表及 PPT 产品介绍等文档多格式并行，开源RAG方案对此的解析能力较差，如在合同关键条款的提取方面失准，条款解读发生偏差；进行产品比对推荐时，易导致检索参数及大模型抉择失当，推荐金融产品难以满足个性化需求，使客户对企业信任与满意度滑坡。
元脑企智EPAI：构建大模型RAG仅需三步，唤醒企业沉睡的知识
针对当前企业在构建RAG上普遍面临的难题，浪潮信息元脑企智EPAI（Enterprise Platform of AI）为企业发掘数据资产、“唤醒沉睡的知识”提供了强大的开发平台，文档解析、知识库构建、检索增强生成等特色功能，不仅极大提升了企业知识管理系统的构建效率，还显著增强了大模型回答的准确性。
■ 高效的文档解析与知识库构建
元脑企智EPAI适配PDF、TXT、DOCX等多类文档格式上传解析，可深度处理文档内容，通过强大数据清洗和灵活的知识分块，帮助企业建立高质量私域知识库，并支持复杂问题、大型数据集或跨多个文档查询。
■ 更优的检索增强生成效果
元脑企智EPAI囊括关键词检索、语义检索、混合检索等多元检索模式，精准适配各类场景检索诉求。用户可依自身特定需求，选择最合适的检索方法。借由自动化 RAG pipeline技术，能敏捷抓取最新知识融入大模型，实现检索库的定期更新，从而确保生成的文本内容基于最新的信息，提升生成内容的准确性和效率，切实满足企业多样化的使用需求。
经过浪潮信息在大模型+RAG开发上的反复实践与验证，元脑企智EPAI封装了浪潮信息深度优化的RAG环境，开发者仅需三步即可快速完成检索增强生成系统的构建。
Step1创建知识库，奠定知识基石
首先，用户需要在元脑企智EPAI上创建一个知识库并上传企业文档。元脑企智EPAI支持多种文档格式，包括PDF、TXT、DOCX等。然后选配解析参数，如编码模型、文本分块长度等。开始文档解析。文档解析是将文档的内容进行抽取并对其进行分块，元脑企智EPAI在解析中支持文档版式识别，对表格、图片的文字都能做到精准提取。
文档解析成功后，内容将被存储在知识库中，形成结构化的知识块。
Step2配置检索参数，优化检索效能
在文档解析完成后，用户需要配置大模型和检索参数，以优化检索效果。元脑企智EPAI提供了多种检索参数，包括粗排引用数量、引用数量、检索类型等。在检索策略上，支持混合检索、关键词检索、向量检索等。
配置好检索参数后，用户可以进行检索测试，以验证文档分块和检索效果。在检索测试界面，用户可以输入测试文本，查看检索结果。
Step3对话交互，实现智能应用
测试完成后，元脑企智EPAI可以将知识库发布为知识助手，并且提供在线交互和API两种使用方式。
在线交互中，用户输入问题，元脑企智EPAI将结合知识库内容，通过大模型生成准确的回答，并展示引用源。下图展示，元脑企智EPAI作为营养问答助手，通过检索增强生成，提供营养方面的回答。
如果选择用API的方式，用户可以通过元脑企智EPAI创建自定义助手，将配置好的模型和知识库保存为助手，并通过API接口调用。这一功能使得用户可以轻松地将元脑企智EPAI的RAG能力集成到现有的信息系统中，提升系统的智能化水平。
元脑企智EPAI让某领先IT企业智能生产力激增
业界领先的某IT企业积极利用元脑企智EPAI平台推动内部的智能化转型，目前已“零代码”开发出IT售前助手“元小智”和撰稿助手“元小墨”。
在“元小智”开发过程中，该企业售前团队（非专业开发人员）利用元脑企智EPAI内置的数据处理工具，自动化解析结构及非结构化数据，从超 1500份涵盖 PDF、DOCX、DOC、XLS等多样格式的数据资源里，成功构筑8大业务线所有在售产品知识库，整个开发时间仅耗时1人1月，有力驱动知识集成与业务精进。
在“元小墨”开发过程中，该企业市场部团队（非专业开发人员）按照不同业务线、稿件类型收集了1300+篇成文稿件、背景资料、速记、白皮书，一键打包上传，不用任何代码即构建起专用知识库。同时通过自动化的RAG pipeline 技术将最新的知识融入大模型，通过选择关键词检索、语义检索、混合检索等不同的检索策略，有效提升检索生成内容的准确性。
在“元小墨”的加持下，该企业市场部团队资料搜索时间缩减80%，同时内容生成质量跃升，紧密贴合多元需求，驱动市场传播创新。如在内容策划时，关键词检索锁定产品亮点与市场趋势报告；定制文案阶段，语义检索精准捕捉品牌意图，推送契合风格文案；官微运营中，利用混合检索融合优势，从海量素材中精准定位热点关联素材助力推文。
元脑企智EPAI(Enterprise Platform of AI)是浪潮信息的大模型应用落地解决之道，能够为企业AI大模型落地应用提供高效、易用、安全的端到端开发平台，提供数据准备、模型训练、知识检索、应用框架等系列工具，支持调度多元算力和多模算法，帮助企业高效开发部署生成式AI应用、打造智能生产力。在大模型技术持续演进的进程中，元脑企智EPAI 将以持续创新，助力企业智能应用创新与效率提升。
-
浪潮
+关注
关注
1文章
458浏览量
23850 -
AI
+关注
关注
87文章
30726浏览量
268870 -
大模型
+关注
关注
2文章
2423浏览量
2637
原文标题：唤醒企业沉睡的知识，元脑企智EPAI三步高效创建大模型RAG
文章出处：【微信号：浪潮AIHPC，微信公众号：浪潮AIHPC】欢迎添加关注！文章转载请注明出处。
发布评论请先 登录
相关推荐
浪潮信息发布“源”Yuan-EB助力RAG检索精度新高
浪潮信息：元脑企智EPAI助力金融大模型快速落地
33家元脑区域伙伴与浪潮信息签署战略合作协议
33家区域ISP伙伴与浪潮信息签署战略合作协议
毕昇大模型应用开发平台+浪潮信息AIStation，让大模型定制更简单
整数智能与浪潮信息签署元脑生态战略合作协议
9家元脑生态伙伴与浪潮信息签署亿级分销协议
浪潮信息“元脑”品牌全面升级，全力进击人工智能！
浪潮信息发布企业大模型开发平台"元脑企智"EPAI，加速AI创新落地
浪潮信息发布企业大模型开发平台“元脑企智”EPAI
天壤加入元脑生态，携手浪潮信息让企业大模型开发普适化
工商网监
评论