简介
最新更新:2023-11-02
简介
GPTBots 将 LLM 与企业数据、服务能力无缝连接,高效构建 AI Bot 服务。可轻松将 AI Bot 能力深度融合到企业实际业务中,让 AI 驱动业务增长和效率提升。
GPTBots 产品特点
GPTBots 产品具有以下优势与特点:
LLMs
- 支持开箱即用主流商业大模型、开源大模型、专业领域模型和微调定制模型;
- 无需再购入巨大精力在 LLM 部署、微调等工作,让开发者更专注企业核心业务;
- 无论商业或开源模型,都可以基于知识库数据、用户对话数据快速生成模型微调所需数据用于模型微调。
知识库
- 支持 doc/docx、pdf、txt、markdown、csv、xls/xlsx、网页爬取、Q&A 等各类型知识数据;
- 针对不同类型数据,使用不同的数据解析与切分方案,提升数据质量和完整性;
- 支持稀疏向量+ 稠密向量混合搜索方案,以提升知识召回准确率。
- 支持知识文档进行切片维度的管理、编辑和更新
Plugins
- 面对特定领域的需求,开发者可以通过 Plugin 得到非常好解决方案(如:投资分析、输出文件、商品推荐、服务预定等);
- 开发者通过插件可以实现与企业数据、服务能力无缝连接,同时保障企业数据安全;
- GPTBots 不仅提供了官方插件,也支持三方开发者基于自身服务能力公开发布插件。
Flow Bot
- 面对复杂需求和问题时,开发者可以通过 Flow 实现多个 LLM 的可视化编排工作流程;
- 定义职能单一、输出明确的「专职 LLM」以提升质量和稳定性;
- 多个「专职 LLM」 和「功能组件」通过 Flow 串行或并行的工作以解决复杂问题。
训练 Bot
- 聊天记录支持质量评分、关键词、主题总结等,让开发者更容易洞察用户关注所在;
- 支持对用户问题进行总结、归纳和分类,帮助开发者了解用户的高频问题,以针对性的优化和补充相关知识;
- Bot 训练模式支持对「对话内容」进行实时修正,可持续训练 Bot 以实现更佳响应。
GPTBots 产品是如何解决 LLM 在企业落地难题?
LLM幻觉问题
LLM 产生幻觉主要跟模型底层架构和训练数据有关。幻觉会让企业的LLM应用变得不可靠、不可信,甚至可能有害。
- 准确的知识补充上下文;
- Bot训练和LLM微调来修正模型;
- 为LLM设计反思机制和验证工具;
- 优化Prompt限定回答范围。
通用 LLM 缺少垂域知识
通用LLM由于缺乏垂域知识,无法给出正确响应。导致企业无法将 LLM 用于解决企业业务问题。另外单独针对各垂直场景训练模型成本过高。
- 知识库支持精准知识召回;
- 轻松导入非结构化知识数据;
- 支持连接和识别结构化数据;
- 插件打通企业内部垂域知识。
单个LLM无法解决企业业务场景的复杂任务
LLM 的复杂推理能力仍然薄弱,无法有效解决企业的复杂任务。而单点单线程的任务,无法满足企业实际业务场景所需。
- 把复杂问题拆解为多个分支;
- Flow支持多个多版本LLM协同;
- LLM具备长短记忆/插件/知识库等能力;
- 将外部反馈和信息融入LLM响应流程。
AI 应用在企业落地难
LLM 落地涉及合规、数据、算力、工程和算法。任一环节出现质量问题,LLM在应用场景上都大打折扣。尤其是涉及开源模型上的使用,硬件和人力均会导致成本急剧上升。
- 提供简单、高效的LLMOps平台;
- 解决知识数据载入和召回难题;
- 提供开箱即用的AI Bot构建能力;
- 丰富完善的API和SDK。
企业在 AI 领域人才储备不足
需要企业在 AI 领域的人才具备数据、算法、工程和业务等方面的能力。对于企业而言,AI 人才储备不足、培养慢和成本高。
- 近乎零门槛的使用GPTBots;
- 为产品运营人员Bot训练和微调LLM能力;
- 无需过多的 AI 专业领域知识,企业业务人员也可以训练和优化Bot;
- 开发人员通过API接口完成接入。