基于 RAGOps 和智能代理实现检索增强生成的规模化应用

7个月前 科技 35观看
摘要 检索增强生成 (RAG) 已成为帮助企业利用企业数据优化大语言模型 (LLM) 输出的黄金标准。虽然 LLM 通常使用公开信息进行训练,但 RAG 使企业能够利用产品、流程或政策等企业文档中的上下文或领

检索增强生成 (RAG) 已成为帮助企业利用企业数据优化大语言模型 (LLM) 输出的黄金标准。tcl喜好网-记录每日喜好的科技时尚娱乐生活

虽然 LLM 通常使用公开信息进行训练,但 RAG 使企业能够利用产品、流程或政策等企业文档中的上下文或领域特定知识来增强其 LLM。tcl喜好网-记录每日喜好的科技时尚娱乐生活

根据 McKinsey 的研究,RAG 在企业生成式 AI 服务中展现出的增强效果可以提升员工和客户满意度,从而改善整体性能。tcl喜好网-记录每日喜好的科技时尚娱乐生活

然而,如何在企业范围内扩展 RAG 的应用并不明确,这本可以帮助组织加速其生成式 AI 用例的发展。早期为帮助快速开发新的基于 RAG 的生成式 AI 产品和服务而制定的可重复流程,遇到了影响性能和相关性的限制。tcl喜好网-记录每日喜好的科技时尚娱乐生活

幸运的是,短期和中期解决方案为确保 RAG 在 2025 年及以后实现规模化提供了可能的路径。tcl喜好网-记录每日喜好的科技时尚娱乐生活

RAGOps 的崛起tcl喜好网-记录每日喜好的科技时尚娱乐生活

使用 RAG 的 LLM 需要访问高质量的训练数据。然而,由于数据分散在不同部门、系统和格式中,确保数据的质量和可用性往往具有挑战性。tcl喜好网-记录每日喜好的科技时尚娱乐生活

为了最大限度地发挥效果,使用 RAG 的 LLM 还需要连接到部门希望提取数据的来源 - 如客户服务平台、内容管理系统和人力资源系统等。这种集成需要丰富的技术专业知识,包括数据映射和 API 管理经验。tcl喜好网-记录每日喜好的科技时尚娱乐生活

此外,随着 RAG 模型的大规模部署,它们可能消耗大量计算资源并生成大量数据。这需要合适的基础设施和部署经验,以及管理大型组织中数据的能力。tcl喜好网-记录每日喜好的科技时尚娱乐生活

RAGOps 是一种引起 AI 专家关注的主流化 RAG 方法,它是一种能够以确保一致性同时降低复杂性的方式自动化 RAG 工作流、模型和接口的方法。tcl喜好网-记录每日喜好的科技时尚娱乐生活

RAGOps 使数据科学家和工程师能够自动化数据摄入和模型训练以及推理过程。它还通过提供基础设施堆栈中的负载均衡和分布式计算机制来解决可扩展性瓶颈。在 RAG 管道的每个阶段都执行监控和分析,以帮助持续优化和改进模型和操作。tcl喜好网-记录每日喜好的科技时尚娱乐生活

例如,McKinsey 使用 RAGOps 帮助其 Lilli 生成式 AI 平台筛选 100,000 份精选文档。Lilli 已回答了超过 800 万个提示,约四分之三的 McKinsey 员工使用它来搜索有关运营的定制见解。tcl喜好网-记录每日喜好的科技时尚娱乐生活

智能代理 RAG 的时代即将到来tcl喜好网-记录每日喜好的科技时尚娱乐生活

作为组织寻求从生成式 AI 实施中获取更多价值的运营模型,RAGOps 有望在已经实践其他运营框架(如 DevOps 或 MLOps)的组织中得到良好应用。tcl喜好网-记录每日喜好的科技时尚娱乐生活

然而,一些组织可能采用更新颖的方法,即跟随生成式 AI 行业的发展方向:将 RAG 与智能代理 AI 结合,使 LLM 能够适应不断变化的上下文和业务需求。tcl喜好网-记录每日喜好的科技时尚娱乐生活

根据 Deloitte 的研究,到 2025 年,25% 的组织将实施企业代理,到 2027 年将增长到 50%。这些旨在以最少人工干预执行数字任务的代理正引起希望将更多数字运营委托给软件的企业的兴趣。tcl喜好网-记录每日喜好的科技时尚娱乐生活

具有 RAG 功能的智能代理 AI 将包括许多方法和解决方案,但许多场景可能会共享一些共同特征。tcl喜好网-记录每日喜好的科技时尚娱乐生活

例如,个别代理将评估和总结来自单个文档的提示答案,甚至比较多个文档之间的答案。元代理将协调这个过程,管理个别代理并整合输出以提供连贯的响应。tcl喜好网-记录每日喜好的科技时尚娱乐生活

最终,代理将在 RAG 框架内进行多步骤的分析、规划和推理,在执行任务时学习并根据新输入调整策略。这将帮助 LLM 随着时间的推移更好地响应更细微的提示。tcl喜好网-记录每日喜好的科技时尚娱乐生活

至少在理论上是这样。tcl喜好网-记录每日喜好的科技时尚娱乐生活

结论tcl喜好网-记录每日喜好的科技时尚娱乐生活

生成式 AI 技术的未来一片光明,它将从研究实验室流向企业 AI 工厂,成为蓬勃发展的企业 AI 领域的一部分。tcl喜好网-记录每日喜好的科技时尚娱乐生活

例如,模型的占用空间将缩小,同时变得更加优化,以便在本地和边缘的 AI PC 及其他设备上高效运行。RAG 标准化,包括软件库和现成工具,将不断发展。tcl喜好网-记录每日喜好的科技时尚娱乐生活

无论您的组织是采用 RAGOps 还是采用智能代理 AI,都有解决方案正在出现,帮助组织扩展 RAG 实施。tcl喜好网-记录每日喜好的科技时尚娱乐生活

以医疗保健为例,在 Dell AI Factory 和 NVIDIA 上应用的智能代理 RAG,有助于协调利用结构化数据(如患者日程和档案)以及非结构化数据(如医疗记录和影像文件)的挑战,同时保持对 HIPAA 和其他要求的合规性。tcl喜好网-记录每日喜好的科技时尚娱乐生活

这只是众多光明选择中的一个。更多解决方案正在涌现,为正在进行生成式 AI 之旅的组织照亮前进的道路。tcl喜好网-记录每日喜好的科技时尚娱乐生活

展开全文
猜你感兴趣
黄金价格高歌猛进,正在“逼死”金店?

黄金价格高歌猛进,正在“逼死”金

今年以来,国际黄金价格已经超过30

11-19 119阅读
疑遭猎杀 泰海域发现无头“美人鱼”:只因毫无科学依据的传说

疑遭猎杀 泰海域发现无头“美人

11月19日

11-19 130阅读
华为Mate 70已经到店:数量有限 抢到赚到

华为Mate 70已经到店:数量有限 抢

11月19日

11-19 134阅读
李子柒归来,牵扯许多人情世故?

李子柒归来,牵扯许多人情世故?

“这

11-19 105阅读
东方树叶们的「备胎上位史」

东方树叶们的「备胎上位史」

中国

11-19 132阅读
余凯宁个人资料, 余凯宁原名余天翊

余凯宁个人资料, 余凯宁原

余凯宁,原名余天翊,演员。1994年9月

11-19 126阅读
《号手就位》主角为什么都选择入伍,最后他们如何了?

《号手就位》主角为什么都

《号手就位》是中国首部火箭军题

11-19 118阅读
《山水间的家》:围屋承古韵,老区展新颜!

《山水间的家》:围屋承古韵

  从赣南大地到沂蒙山区,乡土文化在

11-19 109阅读
天生戏剧人!小演员田芯语乌镇首秀,领衔戏剧节唯一入围儿童剧《乐园》

天生戏剧人!小演员田芯语乌

  深秋,一场淅淅沥沥的小雨为江南带

11-19 111阅读
浪胃仙IP创始人“游絮”犯职务侵占罪被判8年:罚100万 归还账号

浪胃仙IP创始人“游絮”犯

11月13日消息,据

11-19 104阅读
万代魂系高端钢普拉大展 解体匠机第三弹高达Mk-II再参展

万代魂系高端钢普拉大展

万代高端模玩魂系列展会《TAMASHII NA

11-19 125阅读
《战神:诸神黄昏》6.001补丁发布 优化手柄和显卡支持

《战神:诸神黄昏》6.001补

《战神:诸神黄昏》6.001更新版本着重解

11-19 114阅读
《严阵以待》DLC“深水”Steam页面开放 发售日待定

《严阵以待》DLC“深水”S

今日(11月16日),《严阵以待》DLC「Dark W

11-19 129阅读
小小突击队礼包码,小小突击队周年礼包码2023.9

小小突击队礼包码,小小突击

小小突击队礼包码来啦!这次为大家带来的

11-19 108阅读
原神漫长的重逢任务攻略|隐藏成就漫长的重逢任务解析

原神漫长的重逢任务攻略|

漫长的重逢是原神须弥地区的隐藏任务之

11-19 114阅读