当前通讯!LangChain:为你定制一个专属的GPT
【资料图】
(原标题:LangChain:为你定制一个专属的GPT)
导语:用户可以利用LangChain的模块来改善大语言模型的使用,通过输入自己的知识库来“定制化”自己的大语言模型。 LLM(大语言模型) 是一项变革性的技术,它将人类的各类知识和逻辑能力打包进入了一个体积庞大的模型当中。 但是通常来说,包括当前公认效果最好的LLM GPT-4都会有一个问题——事实问题错误,也常被称之为幻觉。幻觉(Hallucination),或者说人工智能幻觉是人工智能的自信反应。 当模型输出欺骗性数据的倾向时,其使用的的训练数据并不能证明输出的合理性。人工智能幻觉的危险之处之一是模型的输出看起来是正确的,其实它本质上是错误的。 基于这种前提条件下,若是直接将LLM利用于生产环境中(例如客服答疑,新形式文档等)时,那么事实幻觉就可能会造成极其严重的影响。 但是通过LangChain,我们可以通过将其它计算资源和自有的知识库结合。依托于当前的各类产品,在整合了当前的语料资源库后,各类LLM都会进入到一个新的实用化发展阶段。 LangChain介绍LangChain是一个用于开发基于语言模型的应用程序开发框架。总的来说,LangChain是一个链接面向用户程序和LLM之间的一个中间层。 它在 2023 年 3 月获得了 Benchmark Capital 的 1000 万美元种子轮融资,在近期又拿到了红杉2000-2500万美金的融资,估值已经提升到了2亿美金左右。 LangChain 可以轻松管理与语言模型的交互,将多个组件链接在一起,并集成额外的资源,例如 API 和数据库。其组件包括了模型(各类LLM),提示模板(Prompts),索引,代理(Agent),记忆等等。 当前GitHub上的热门项目Auto-GPT和Babyagi所使用的链式思考能力都是由LangChain启发而来。 LangChain项目主页图 LangChain工作流程本次重点介绍LangChain搭配自有的知识库让LLM发挥更大功能的流程。
在缺少了上下文的情况下,即使是目前公认最顶级的LLM GPT-4也无法回答部分需要特定领域的知识。
而要是想仅用自有知识库来训练出LLMs又是不可能的,这个时候最好的方法就是利用LangChain的模块来改善LLM的使用,通过输入自己的知识库来“定制化”自己的LLM。
Question Answering over specific documents是一个写在LangChain主页的主推功能。翻译过来就是 基于特定文档的问答 。 1.准备自定义数据 准备好需要LLM学习的内容,它可以是一个纯文本文件或者其他类型的文本(不同类型的文本需要不同的文档加载器)。 2.拆分文档 一般来讲,每个文档都是由复杂长短句、多种语法结合写作而成的。在进行输入之前,就必须对这些文字进行解构处理。 对于英文LangChain一般会使用RecursiveCharacterTextSplitter处理。由于中文的复杂性,会使用到jieba等处理工具预处理中文语句。 3.文本嵌入(Embeddings) 处理完文本之后,就可以对文本进行嵌入(Embeddings)了。通过调用OpenAI的Embeddings API将文本向量化。在这步处理之后,文本就已经不再是文字,而是以向量化存储的信息。 再使用一个开源的Embeddings数据库ChromaDB保存Embeddings数据,就可以达到使用数据长期存储和快速调用。 图:将原文本嵌入 4.使用链(Chain)对矢量数据库进行问答在拥有了嵌入数据之后,我们就可以利用LangChain的强大链功能来执行我们的问答。这时就可以通过自然语言对于文档内容进行提问了。
通过LangChain回答问题/完成任务
LangChain可能的应用场景当前的AI热潮吸引了很多人,而除了ChatGPT这类问答还有New Bing这种搜索服务外,并没有什么可以将LLM商业化的案例。甚至可以说只有New Bing才是目前唯一一个成功的商业化案例。LangChain为所有人提供了一个新的商业化方案。此前有将LLM导入客服软件中应用的方案,但是由于LLM容易出现事实幻觉而无法实施。 同时,将所需内容通过Prompt导入LLM的想法也由于LLM的对话(Context)输入限制而不可能实施。LangChain则通过将数据向量化避免了使用输入限制,从而将所需内容导入LLM进行问答。 当下的人工成本逐渐提升,例如淘宝客服等人工密集型产业的成本逐步提升。当前的智能问答距离可用仍有较远的距离。 通过已经预训练好的LLM是一个快速降本增效的方案。基于每个产品的数据,可以将数据引入LLM中,让LLM接替客服工作,准确、快速的回答客户的定制化问题,同时语气贴合自然口吻,避免了情绪化工作。 基于文档的工作还可以在各类公司培训和智能化文档方面提供作用。很多产品文档随着时间的积累变得越来越复杂,多层跳转也会让人学习起来效率低下且不适。 此时基于LangChain就可以将文档重新梳理,输出为大纲类,在使用的时候可以随时通过问答的形式将内容输出。类似于新员工培训和产品说明书等等场景都可以有所应用。这就极大的拓宽了文字类LLM的使用场景。
基于LangChain的问答 除了直接与人交互的方面外,还可以导入特定领域的知识库,实时更新LLM的内容,让LLM的知识时刻处于最新的状态。依赖于此,LangChain除了可以完成自然语言文档搜索外,还可以基于及时的资源进行快速开发。 导入资源后LangChain开发出的网页 当前LangChain的局限性目前,由于整个AI生态还处于一种快速发展期,各类工具和平台还没有完全成熟,因此LangChain的各类链和模块的定制性和功能都还不够强大。对于有高性能场景需求和定制化任务的可能需要自己重新修改。 事实合法性也是未来需要解决的一个痛点。LLM的各类越狱层出不穷。虽然在引入了嵌入之后LLM只会对文档内容进行问答,但是仍然需要有一套额外的监督系统防止出现任何非法的回答。 同时当前LangChain还有使用难度较高等问题。目前的各类AI工具都面临着普通用户无法轻松驾驭等等的问题,而LangChain的问题更盛。 普通产品或者开发者的上手学习成本较高,使用起来难度很大。这一切都需要社区和商业资本的共同投入才有可能解决。 结语LangChain是当前众多的AGI实验性工具的基石项目。基于链(Chain)的LLM调用思维势必会贯穿未来LLM的发展生态。
提前关注AI发展动向,关注LangChain的开发进度,会对未来的AI应用落地有极大的帮助。
标签:
相关推荐:
精彩放送:
- []天天最新:积极探索多能互补模式,欣旺达打造近零碳锂电基地
- []【世界独家】蜂巢能源龙鳞甲电池亮相上海车展 通过热失控实验验证极致安全
- []焦点速读:最新持仓浮出水面:百亿级私募左手AI右手“央国企”
- []天天微动态丨争抢项目工地 河北廊坊“理想城”建设乱象
- []深业集团18亿元公司债票面利率确定为3.10%
- []今日播报!70个文旅项目在大连成功签约
- []速读:中国铁建投资将发行不超15亿元可续期公司债 票面利率为3.30%及3.60%
- []【全球新要闻】“宁王”再放大招!新电池“更高、更快” 还能“上天”!
- []天天播报:江苏无锡正式挂牌第二批次地块 5宗地总起价32.6亿元
- []宁德时代发布凝聚态电池 可应用于载人飞机
- []上海今年首轮土拍启动 有房企经营执照范围未通过核验
- []环球快播:去年收租94.3亿元 商业成龙湖业绩“压舱石”
- []每日快看:起拍价每平方米38.4万元 深圳“法拍房之王”5月上线
- []焦点速读:TD早报 | 一季度关键数据:住宿和餐饮业GDP为4511亿元,6506.5万人次出入境
- []传盒马鲜生正在与中金、摩根士丹利等合作筹备上市事宜
- []每日焦点!齐鲁保只能济南人买吗
- []有运费险是啥意思
- []商代可以转成公积金吗
- []【世界报资讯】一老一小保险属于什么保险
- []天天日报丨年金保险的五大功能
- []全球热推荐:海鸥住工:2022年实现收入32.94亿元
- []环球头条:国芯科技2023年第一季度预计营收1.36亿 积极开拓市场和客户
- []当前速递!天奈科技2022年净利4.24亿同比增长43.37% 董事长郑涛薪酬158万
- []合肥城建:拟出资9亿元设立滨润置业
- []百联股份:2022年实现收入322.69亿元
- []深交所发布对步步高关注函 要求说明盈利能力持续较弱原因
- []焦点快播:井松智能2022年净利7086.43万同比增长3.77% 董事长姚志坚薪酬78.72万
- []【环球时快讯】青岛双星:公司高度重视与广大投资者的交流与沟通,耐心回复投资者关心的问题
- []招商局商业房托一季度写字楼出租率下降3个百分点至82.9%
- []实时:泰州《关于调整住房公积金使用政策的通知》政策解读
- []当前视讯!中南城投持有的中南建设3390万股将被司法拍卖 占后者总股本0.89%
- []宜华健康修正业绩预告 预计2022年归母净亏损3.5亿-5亿元
- []天天快看:嘉凯城修正2022年业绩预告 预计净亏损增至11.2亿元
- []聚焦:大禹节水:公司一贯坚信科技革新力量,重视科技研发投入
- []观天下!通达海:公司一直在关注ChatGPT以及国内大模型的发展,但是目前还没有相关的计划和安排
- []天天微速讯:久祺股份:公司在海南设立的贸易公司已经开始试运营,2025年海南全岛封关会增加公司产品出口的竞争力
- []大中矿业:公司曾在舟山市进行尽调考察,目前在舟山市的项目未落地,也未与政府形成具体的合作协议
- []天天热资讯!人福医药:4月17日徐华斌减持公司股份合计30万股
- []万达投资拟减持万达电影3%股份 现持股比例38.99%
- []格力地产完成发行10.2亿公司债券 票面利率为4.97%
- []长沙宁乡挂牌一宗居住用地 起始价2.4亿元
- []世界速看:3月业务量增速近三成 顺丰的当打之年
- []全球快看点丨高等教育出版社“大学物理(上)习题课”直播课程第九讲4月19日开讲
- []全球即时看!青岛即墨区3宗商住地将法拍 总起价11.64亿
- []德塞利代表国家队出场次数_德塞利
- []大族激光:公司业务板块暂不涉及上述事项
- []天天观焦点:片仔癀:公司一直在持续积极地推进信息化建设
- []世界今日报丨国科微:公司目前暂无光模块或者光通信模块相关产品
- []京能置业一季度权益签约金额16.27亿 同比涨1511%
- []深交所对奥园美谷发布关注函 要求说明为京汉置业担保相关事项
- []上坤地产发布经审核的2022年度业绩 4月20日起复牌
- []世界球精选!新光光电:请您查阅公司于4月21日披露的2022年年度报告!
- []天天微头条丨天开高教科创园政策解读:打造天津科技创新策源地、科研成果孵化器、科技服务资源集聚区
- []天天热资讯!大盘为何又跌下来了呢?
- []今日报丨断交10余年再度结盟 突尼斯总统会见叙利亚外长
- []观焦点:Ming:聊一聊泰坦20分钟0输出的事情?就是菜呗,没办法啊
- []全球时讯:光大嘉宝副总裁于潇然因个人原因辞职
- []天天滚动:阳光房地产基金:22/23财年第三季度物业组合租用率为92.1%
- []拉卡拉王国强:支付为民,努力让小微企业实现自主获取数字化服务
- []全球资讯:光大嘉宝接受的光大控股10.53亿元财务资助展期6个月至2023年10月
- []东方嘉盛:公司目前经营活动正常
- []华特达因:公司研发费率保持相对稳定,研发费用会随着研发项目进展情况按计划支出
- []当前短讯!宇环数控:公司产品主要为数控磨床、数控研磨抛光机和智能装备系列产品,公司不直接生产手机中框
- []头条焦点:片仔癀:目前,公司正常经营,如触发相关事宜的披露标准,公司将按照有关规定及时公告
- []【报资讯】昆明公租房建设管理公司成功发行2亿元公司债 利率7.5%
- []全球微动态丨权威发布 | 国家能源局:3月份全社会用电量同比增长5.9%
- []天天播报:点亮智慧光网,烽火通信携手云南电网加速智能电网多业务承载
- []江苏:3月份新增太阳能发电2.57GW
- []全球第一!派能科技登顶家储市场
- []环球观热点:宁德时代,钠离子电池“上车”
- []速递!硅料价格继续下跌(2023.4.19)
- []光伏降价,储能吃饱
- []星云股份募资12亿投建储能项目
- []环球快报:淄博,正“烧烤”新能源
- []世界短讯!为广府菜“立法”,佛山“硬核”破题广府菜传承发展难
- []储能PCS产业格局
- []全球快报:华为nova11系列发布,能接受这几点可以无脑选
- []【当前独家】吉林:引导和督促金融机构对接房地产开发融资需求
- []德科立:公司募投项目正在按计划有序推进,具体进展情况请持续关注公司的定期报告
- []世界时讯:安宁股份:公司将关注相关规定,谨慎评估收购标的,制定应对措施,请关注公司公告
- []荆门城建集团9.26亿元私募债更新至“已反馈”
- []天天快播:1-2月长春市财政收支情况
- []楚江新材:公司一季度生产经营正常
- []环球热议:南京江北新区产投集团20亿元私募债更新至“已反馈”
- []世界头条:吉林省:3月末,全省房地产开发贷款增速5.3%,同比提高3.1个百分点
- []世界通讯!金新农:公司按照正常的生产节奏和巿场行情来销售生猪
- []六氟磷酸锂价格下探至8万元/吨 跨界企业业绩已出现亏损
- []当前快播:“削光补储”?欧洲储能市场成熟经验值得借鉴
- []天天信息:40年来首次!比亚迪超越大众获得乘用车季度销冠
- []世界今热点:55亿平需求! 今年隔膜投扩产已超200亿元
- []世界快资讯丨开始量产!猛狮科技钠离子电池亮相广交会
- []天天热讯:国际金价重新走低,但空头面临这两大背景须准备随时撤退
- []天天热文:马叉虫是什么意思_马叉虫简介
- []全球看热讯:4月19日中科信息涨停分析:UWB超宽带,中科院系,华为云·鲲鹏概念热股
- []4月19日欢瑞世纪涨停分析:影视,旅游,元宇宙概念热股
- []通讯!新华联控股:拟计提2022年度资产减值准备
- []全球快报:泰禾集团:张旭所持公司股份于近日被司法强制执行
- []全球新动态:同兴环保:公司目前在手订单充足
- []速讯:科士达:闪电储能目前还处于提出概念阶段,公司目前尚未涉及该领域的研发
- []全球微资讯!4月19日朗特智能涨停分析:露营,无线耳机,充电桩概念热股
- 当前通讯!LangChain:为你定制一个专属的GPT
- 天天微头条丨科华数据:科华云集团作为行业领先的数据中心综合服务提供商,也致力成为算力平台服务提供商
- 每日时讯!统联精密:关于公司最新股东人数请关注公司最近一期的定期报告
- 【世界报资讯】创世纪:“赫勒精机”是公司为顺应市场发展趋势,逐步实现国产替代和走向国际化成立的高端机床品牌
- 【当前独家】松下计划在美国建第三家电池工厂,或选址俄克拉荷马州
- 华泰证券:仍应以成长股视角审视头部物管公司
- 部分公募资金兑现收益 从人工智能回归消费
- 宁德时代凝聚态电池单体能量密度达500Wh/kg 可用于载人飞机
- 热资讯!找到了!连续4年上涨的基金
- 新型储能要走市场化之路
- 全球球精选!NYMEX原油料跌破79美元关口
- 金融街物业:沈明松辞任非执行董事
- 凤凰股份:力争将业务发展的重心重新聚焦于南京市
- 卧龙地产:一季度实现收入16.49亿元
- 【新视野】4月19日奥马电器涨停分析:白色家电,区块链,供应链金融概念热股
- 未来3年推8款新能源车型 2023上海车展上汽荣威宣布新能源转型提速
- 当前消息!网红车手张雷被曝车祸去世 网友:据说赛道全都不正规
- 海辰储能“新制造”规划发布 320Ah专用电池锚定“光储平价”
- 世界要闻:特斯拉布局储能,马斯克如何搅动新超级赛道?
- 观点:重磅!宁德时代正式进军储能系统集成领域!
- 看点:对话高纪凡:储能行业具有高速发展的特征,也会有调整的必然性
- 课题动态 | 新型储能商业模式和参与电力市场机制思考
- 环球看热讯:兰蔻196寓意是什么?使用口红的注意事项有哪些?
- 前沿资讯!什么叫做邮编?邮编的作用是什么?
- 环球今日报丨4月19日 13:18分 登康口腔(001328)股价快速拉升
- 环球速读:员工自动离职有什么影响?员工自动离职的影响介绍?
- 阅览的近义词有哪些?阅览的近义词大全?
- 焦点讯息:关于抗日的小说有哪些?分享几部关于抗日的小说?
- 【天天播资讯】四大机场2022年总亏损超80亿元,今年国际航班航线逐步优化
- 国漫出海风头劲,粤企携优质IP“圈粉”世界
- 国漫出海风头劲,粤企携优质IP“圈粉”世界
- 墨尔本城vs西悉尼直播
- 世界快资讯丨魔域桃源什么时候演的?魔域桃源演员表介绍?
- 土木工程专业是什么专业?土木工程专业介绍?
- 国漫加速出海 粤企携优质IP抢订单
- 国漫加速出海 粤企携优质IP抢订单
- 环球微动态丨A股旅游酒店股午后持续拉升 西安旅游、曲江文旅涨停
- 螃蟹要蒸多久才能蒸熟?蒸螃蟹的方法介绍?
- 世界要闻:手机号段与手机号码有什么区别?手机号码有哪些组成?
- 擀面皮是什么做的?擀面皮是哪里的小吃?
- 【全球聚看点】扬州城建控股15亿公司债券将付息 利率3.60%
- 热门看点:* 江山欧派盘中跌超6%,位列长城久富核心成长基金第三大重仓股
- 环球看热讯:从“快复苏”到“稳复苏”,一季度中国楼市走稳
- 环球观速讯丨2023广州周柏豪演唱会门票可以买几张?
- 珠海格力集团注资由8亿元增至200亿元 增幅达2400%
- 当前速读:政策助推数字经济发展 欧比特大涨8%
- 天天信息:瑞银上调中国今年GDP预测至约5.8%
- 蠡湖股份:作为泉州国资控股的第一家上市公司,会依托国企资源,为上市公司做赋能
- 世界观点:房山再添一所优质高中
- 当前热点-电池级碳酸锂价格跌破20万/吨!十年后电动车价格再跌一半有戏
- 全球微动态丨13.5GW TOPCon电池!中来股份拟与百达精工合作投建新项目
- 每日速看!国家能源局:不得以任何名义增加新能源不合理投资成本!
- 亿纬锂能:2022年动力和储能电池营收超270亿,毛利率同比下降
- 晶科能源N型组件在海上漂浮发电项目中优势显著
- 工商业储能与大储四大环节差异
- 新地University Hill首张价单涉123伙 市值约10亿港元
- 每日视讯:湖北十堰郧西县:支持文旅产业发展 最高可获200万元奖励
- 摩通上调今年内地GDP预测至6.4%
- 世界快资讯:西部材料:公司的实控人是陕西省财政厅
- 晨光生物:公司部分营养类产品已应用于宠物食品
- 全球球精选!盒马于上海成立科技公司 业务范围包含外卖递送服务等
- 世界实时:北京语言大学官网_北京语言大学hsk动态作文语料库
- 天天速讯:合肥长丰县挂牌2宗约158亩居住地 参考价为10.16亿元
- 【焦点热闻】肿瘤免疫的新领域:肿瘤微生物微环境
- 天天关注:官方12306订票网_12306订票网
- 贵州省从江县高脚村中寨教学点乡村教师孟荣达:扎根瑶寨 守护希望
- 睿远基金旗下基金一季报披露:港股中国移动多现减持 接下来关注这些机会
- 天天看热讯:1.4GWh!海辰储能与阿特斯签署战略采购协议;创维数字5000万成立储能技术公司;中国储能系统落地墨西哥|365Daily
- 环球热头条丨五个一百:宏伟蓝图鼓舞人心 时代号角催人奋进
- 天天精选!长安期货4月19日原油报告:库存下降对冲宏观压力减弱,短线震荡之际或仍存偏空机会
- 天天讯息:惠誉:授予珠海华发集团拟发行高级无抵押债券“BBB”评级
- 世界今日讯!【东海期货4月19日产业链日报】贵金属篇:美联储官员发言鹰派,金银震荡
- 全球热讯:凯莱英:2022年度报告期内,公司合成生物技术板块出色承接并完成临床后期口服药用酶的研发生产
- 今日播报!2023版8克熊猫金币价格(2023年04月19日)
- 全球看点:摩根大通将中国2023年GDP增长预测从6%上调至6.4%
- 天天微速讯:上海首批供地:保利48.87亿拿下宝山区大场镇地块 金地10.88亿摘得嘉定一地
- 每日热文:铁翼飞旋 搏击海天——第72集团军某陆航旅海上实弹射击训练影像
- 【天天新要闻】铂科新材:根据中登结算公司数据,公司截至2023年4月10日的股东户数为8,127
- 当前消息!【BT金融分析师】法拉第未来产品再次延期,分析师称供应商合作出现了问题
- 黑芝麻:公司正按部署开展项目的相关工作,后续将根据规定履行进展公告
- 大连万达商管5亿元中票将付息及回售部分兑付 利率6.15%
- 如何制作苏格兰帽
- 【世界热闻】建业地产:交换要约及同意征求已届满 将发行约7.58亿美元票据
- 全球快看:同兴环保:公司目前在手订单充足。公司低温SCR脱硝催化剂生产基地项目预计二季度达产
- 【BT金融分析师】疫情好转Moderna股价暴跌,分析师称不要忽视其他药物的潜力
- 焦点资讯:三一氢能中标全球最大风光绿氨项目!
- 规格是什么意思跟型号有区别 规格是什么意思
- 【世界时快讯】石家庄人力资源和社会保障局在哪?石家庄人力资源和社会保障局怎么去?
- 世界观热点:彩灯有哪几种?彩灯种类介绍?
- 【独家】海辰储能技术降本先行 海辰发布320Ah新一代电力储能专用电池
- 天天简讯:宁德时代钠离子电池花落奇瑞车型,有望成为锂电池重要补充
- 当前短讯!自刎什么意思?自刎的出处是哪里?
- soul是一款什么样的软件?soul有哪些功能?
- 怎么查看信号基站的位置?查看信号基站的位置的方法?
- 每日时讯!Boy London是什么牌子?Boy London品牌资料介绍?
- 焦点日报:嘉元科技2022年销售铜箔4.9万吨 今年将向宁德时代供货2万吨
- 环球观速讯丨百天宝宝突然不吃奶粉怎么办_宝宝突然不吃奶粉怎么办
- 环球短讯!转换开关的作用是什么?转换开关的结构原理是什么?
- 全球实时:人间冰器作者是谁?人间冰器作者有哪些代表作?
- 重点聚焦!招财猫鱼好养吗?招财猫鱼的养殖方法?
- LOL隐藏分怎么查询?LOL隐藏分的查询方法?
- 推荐一个口碑好、服务好的借款产品——“钱小乐”
- 天天看点:北京大兴临空经济区再生医学园项目完成挂牌成交
- 热点评!象屿租赁3-8期资产支持专项计划“已受理” 拟发行金额30亿元
- 全球热点评!有色金属板块走强 洛阳钼业涨超9%
- 流程公布:第一届中国全域流量峰会暨雪梨商学院4周年庆议程
- 讯息:腾势汽车全国开业门店累计超200家 覆盖城市超116座
- 天天热头条丨香港银行体系结余跌至2008年以来新低
- 今日看点:中闽能源:中闽海电(莆田平海湾海上风电场一、二期项目)已于2020年通过重大资产重组注入公司
- 今日快看!分众传媒:感谢投资者的批评意见,我们后续会更高效及时的做好相关工作,敬请留意相关进展公告!