您现在的位置: 首页> 观点 > 正文
大语言模型的开发利器langchain_天天聚看点
发布时间:2023-06-28 10:15:49 来源:博客园
目录简介什么是langchainlangchain的安装langchain快速使用构建应用聊天模式Prompt的模板ChainsAgentsMemory总结简介

最近随着chatgpt的兴起,人工智能和大语言模型又再次进入了人们的视野,不同的是这一次像是来真的,各大公司都在拼命投入,希望能在未来的AI赛道上占有一席之地。因为AI需要大规模的算力,尤其是对于大语言模型来说。大规模的算力就意味着需要大量金钱的投入。那么对于小公司或者个人来说是不是什么都做不了呢?

当然不是,虽然小公司或者个人不能开发底层的大语言模型,但是我们可以在大语言模型之上进行应用开发,这应该就是我们现在能做到的。

今天给大家介绍一个大语言模型的开发框架langchain,有了它,在AI的世界,你可以如虎添翼。


(资料图片仅供参考)

什么是langchain

简单来说,langchain是一个基于大语言模型只上的开发框架,有了他,我们就可以轻松在各种大模型之上进行实际应用的开发。

langchain的主要特点有两个,第一点就是组件化。langchain提供了各种封装好的组件供我们使用,大大缩短了我们开发的时间。

第二点就是提供了工具链,可以组装各种组件,从而实现更加复杂的功能。

langchain的安装

废话不多说,我们来看下langchain是如何安装的。

AI时代大家一定要学一下python,至于为什么要学习python呢?因为其他语言都不好使......

langchain实际上是python的一个开发包,所以可以通过pip或者conda两种方式来安装:

pip安装

pip install langchain

conda安装

conda install langchain -c conda-forge

默认情况下上面的安装方式是最简单的安装,还有很多和langchain集成的modules并没有安装进来,如果你希望安装common LLM providers的依赖模块,那么可以通过下面的命令:

pip install langchain[llms]

如果你想安装所有的模块,那么可以使用下面的命令:

pip install langchain[all]

因为langchain是开源软件,所以你也可以通过源代码来安装,下载好源代码之后,通过下面的命令安装即可:

pip install -e .
langchain快速使用

下面我们以几个具体的例子来讲解一下langchain如何使用的。

因为langchain只是一个大语言模型上的开发框架,它的所有的能力都是依赖于大语言模型的,所以在使用langchain之前,我们需要一个大语言模型,最简单同时也是最强大的大语言模型就是openai的chatgpt了。

接下来我们就以接入openai为例子进行讲解。

当然langchain也可以接入其他的大语言模型框架,后面的系列教程中我们会详细讲解。

要使用openai,必须先注册一个openai的账号,然后拿到openai的api key。

具体的注册流程这里就不讲了。大家可以自行参考网络上的各种教程。

有了api key之后,我们需要配置一下环境变量:

export OPENAI_API_KEY="..."

然后安装openai的包:

pip install openai

接下来就可以愉快的使用openai提供的各种功能了。

当然,如果你不想在环境变量中配置openai的key,我们也可以在OpenAI的构造函数中传入openai_api_key:

from langchain.llms import OpenAIllm = OpenAI(openai_api_key="...")
构建应用

有了上面的准备工作,接下来我们就可以开始使用langchain了。

当然,最最基础的一个应用就是跟大模型交互了,比如跟openai交互,我们可以让openai给我们写首诗:

>>> from langchain.llms import OpenAI>>> llm = OpenAI(temperature=0.9)>>> llm.predict("请以古龙的口吻,写首关于春天诗")春天来了,万物复苏,终于迎来了一个新的时辰,草儿花儿抬起头,喜迎新绿与绚丽的颜色。山林里,小草发芽,河畔边,花儿香烈,这让我们感到心旷神怡,这真是一个美好的世界。春天来了,列位朋友,请喜迎这样一个新时辰,不要抱怨什么,享受春的温暖与欣慰。

虽然写出来了,但是我觉得写的一般般吧。

但是这不重要,我们知道了如何通过langchain来调用openai的大模型,这个才是最重要的。

聊天模式

上面我们调用LLM使用用的是"text in, text out"的模型。

虽然聊天模式也是基于LLM,但是他更进了一步,因为他保存了会话的上下问题,所以在对话上更加智能化。

在代码上,传入的就不是文本了,而是message对象。

在langchain中,目前支持下面几种消息类型:AIMessage, HumanMessage, SystemMessage 和 ChatMessage。

在绝大多数情况下,我们只需要用到AIMessage, HumanMessage, SystemMessage即可。

下面是使用的代码例子:

from langchain.chat_models import ChatOpenAIfrom langchain.schema import (    AIMessage,    HumanMessage,    SystemMessage)chat = ChatOpenAI(temperature=0)chat.predict_messages([HumanMessage(content="请以古龙的口吻,写首关于春天诗")])

那么聊天模式和LLM模式有什么不一样呢?

大家可以看到,聊天模式调用的是predict_messages接口, 而LLM模式调用的是predict接口。

事实上聊天模式底层还是使用的是LLM,为了方便大家的使用,你也可以直接使用chat.predict方法来进行LLM方式的调用,如下所示:

chat.predict("请以古龙的口吻,写首关于春天诗")
Prompt的模板

开发过LLM应用的人都知道,在LLM中Prompt是非常重要的,一个好的Prompt直接决定了这个应用的质量。

但是Prompt肯定需要结合用户的输入和我们自己做的一些限定来结合使用。

这时候就需要用到Prompt的模板功能了。 我们可以在系统中设置好模板,用户只需要填充模板中的特定消息即可。

在LLM模式中,可以使用PromptTemplates,这样来写:

from langchain.prompts import PromptTemplateprompt = PromptTemplate.from_template("请帮忙我详细描述一下这个物体,这个物体的名字是: {object}?")prompt.format(object="猫")

最后生成的结果如下:

请帮忙我详细描述一下这个物体,这个物体的名字是: 猫

如果是在chat models中,代码会复杂一点点,但是逻辑实际上是一样的。 在chat models中,需要用到几种MessagePromptTemplate,比如:ChatPromptTemplate,SystemMessagePromptTemplate和HumanMessagePromptTemplate。

我们具体来看下如何使用:

from langchain.prompts.chat import (    ChatPromptTemplate,    SystemMessagePromptTemplate,    HumanMessagePromptTemplate,)template = "现在,你的角色是{your_role}, 请根据你的角色回答后续的问题."system_message_prompt = SystemMessagePromptTemplate.from_template(template)human_template = "{text}"human_message_prompt = HumanMessagePromptTemplate.from_template(human_template)chat_prompt = ChatPromptTemplate.from_messages([system_message_prompt, human_message_prompt])chat_prompt.format_messages(your_role="教师", text="世界上最远的地方是哪里?")

对应的输出如下:

[    SystemMessage(content="现在,你的角色是教师, 请根据你的角色回答后续的问题.", additional_kwargs={}),    HumanMessage(content="世界上最远的地方是哪里?")]

非常完美。

Chains

langchain还有一个非常有用的功能就是Chains,他可以把多种不同的功能结合起来。

比如上面我们用到了LLM,还用到了Prompt的模板,那么我们可以用Chains把他们结合起来:

from langchain.chains import LLMChainchain = LLMChain(llm=llm, prompt=prompt)chain.run("猫")

当然,也可以结合chat使用:

from langchain import LLMChainfrom langchain.chat_models import ChatOpenAIfrom langchain.prompts.chat import (    ChatPromptTemplate,    SystemMessagePromptTemplate,    HumanMessagePromptTemplate,)chat = ChatOpenAI(temperature=0)template = "现在,你的角色是{your_role}, 请根据你的角色回答后续的问题."system_message_prompt = SystemMessagePromptTemplate.from_template(template)human_template = "{text}"human_message_prompt = HumanMessagePromptTemplate.from_template(human_template)chat_prompt = ChatPromptTemplate.from_messages([system_message_prompt, human_message_prompt])chain = LLMChain(llm=chat, prompt=chat_prompt)chain.run(your_role="教师", text="世界上最远的地方是哪里?")
Agents

什么是agents? 从字面意义上看,Agents就是代理。

事实上langchain中的Agents就是代理的意思。

比如我们现在需要向openai询问昨天的天气,但是openai本身只是一个大模型,它并不知道实时的信息。但是通过agents就可以先进行一次判断,看看这个问题是交给大模型处理合适,还是交给搜索引擎来查询比较合适。

这就是agents的作用。

agents利用LLM来判断需要怎么处理这个任务,并且以什么样的顺序来处理这个任务。

但是使用agents是要有些条件的,首先你这个LLM模型必须支持agent,这样才能进行后续的工作。

其次是需要挑选合适的工具来进行你想要做的事情,比如:Google Search, Database lookup, Python REPL等等。

最后就是需要指定支持的agent的名字,这样LLM才知道到底需要进行哪种action。

下面是一个使用SerpAPI结合openai来进行搜索的例子:

from langchain.agents import AgentType, initialize_agent, load_toolsfrom langchain.llms import OpenAI# The language model we"re going to use to control the agent.llm = OpenAI(temperature=0)# The tools we"ll give the Agent access to. Note that the "llm-math" tool uses an LLM, so we need to pass that in.tools = load_tools(["serpapi", "llm-math"], llm=llm)# Finally, let"s initialize an agent with the tools, the language model, and the type of agent we want to use.agent = initialize_agent(tools, llm, agent=AgentType.ZERO_SHOT_REACT_DESCRIPTION, verbose=True)# Let"s test it out!agent.run("What was the high temperature in SF yesterday in Fahrenheit? What is that number raised to the .023 power?")

agent比较复杂,功能也很强大,后续我们会详细讲解。

Memory

最后要讲解的langchain的一个功能就是Memory。

因为很多时候,我们的应用应该是一个有状态的,也就是说应用需要知道你之前做了什么,这样才可以给用户提供更好的服务。

但是之前我们将的LLM或者chain都是无状态的。

所以langchain提供了一个Memory的功能,可以把之前的输入输出保存起来,方便后续的使用。

总结

有了langchain的各种工具,现在你就可以快速开发一个属于你自己的LLM应用啦。

标签:

大语言模型的开发利器langchain_天天聚看点

[toc] 简介最近随着chatgpt的兴起,人工智能和大语言模型又再次进入了

世界快消息!五菱汽车刹车更换视频(五菱的刹车盘多久更换?)

相信大家对五菱汽车刹车更换视频,五菱的刹车盘多久更换?的问题都很疑

2023澜沧江—湄公河合作媒体峰会在京举办|世界看热讯

新华社北京6月27日电6月27日,2023澜沧江—湄公河合作媒体峰会在北京举

数百家跨国企业齐聚南京 共赴“江宁之约”-快播

活动现场。江宁区委宣传部供图人民网南京6月27日电(记者顾姝姝)6月27

挺好的停车资源怎么就用不上 世界微头条

挺好的停车资源怎么就用不上

硬核科技论 | 保时捷918继任者纯电化!全新Mission X这些技术值得了解

现在绝大多数电动车都是基于400V的平台,然后极狐和阿维塔的个别车型支

台媒称蓝正龙离婚了!好友曝出原因:周幼婷无法忍受丧偶式婚姻

6月27日,台媒曝蓝正龙与周幼婷办理了离婚手续,两人还被拍到穿情侣装

【全球聚看点】谄怎么读呢 谄怎么读

1、谄[chǎn]一个汉字,基本意思是奉承巴结,含贬义,还有很多不好的意

今日热文:集成灶首选(欧诺尼)

来为大家解答以上问题,集成灶首选,欧诺尼很多人还不知道,现在让我们

福建:这两条国道项目又有新进展

来源:中新网近日,福建这两条国道项目又有新进展。国道G355线漳州芗城

通天神探狄仁杰剧情介绍(通天神探狄仁杰)

1、链接:提取码:xkk6导演:徐克编剧:张家鲁主演:刘德华 刘嘉玲 李冰冰

老人树林中迷路 徐闻公安连夜找回

近日,徐闻县公安局外罗派出所暖心救助一名迷失树林的老人。6月23日晚

世界即时:北京银保监局:辖内农业保险密度和保险深度处于全国领先水平

新京报贝壳财经讯(记者黄鑫宇)6月27日,在北京地区农险信息化工作专

为何要探索建立房屋养老金制度?钱从哪来?

21世纪经济报道记者唐婧北京报道你知道除了人需要养老金之外,住房也需

什么是赫兹伯格的双因素理论基础_什么是赫兹伯格的双因素理论_全球快资讯

1、赫兹伯格的双因素理论双因素理论是美国心理学家赫兹伯格于1959年提

全球速递!印度将成为亚太地区增长最快的经济体之一

印度将成为亚太地区增长最快的经济体之一,普尔,新兴市场,印度央行,金融

特斯拉市值一夜蒸发3600亿 当前总市值7639.63亿美元

6月27日,智车派注意到,美东时间6月26日周一,特斯拉股价重挫逾6%,市

当前视点!西藏造老银元价格(2023年06月27日)

金投白银网提供西藏造老银元价格(2023年06月27日),西藏银元最新消息

全球报道:公积金封存有利息没 公积金封存

1、封存流程个人住房公积金账户封存提取流程图以下情况应办理职工个人

复合袋英文怎么说_复合袋用英语怎么说-资讯

1、翻译如下:复合袋CompoundBag例句:复合袋的复膜质量与阻隔性能TheC

高铁深圳站在哪里位置_高铁深圳站在哪里-全球短讯

你们好,最近小品发现有诸多的小伙伴们对于高铁深圳站在哪里位置,高铁

父亲误把1年没见的儿子当偷车贼,网友:见过父子不和的,没见过父子不熟的

近日,江西高安,鄢先生报警称摩托车被盗。监控显示一光头男拿钥匙骑走

全球速递!legal_high 第七话里千春是谁演的

木南晴夏假名きなみはるかプロフィール外文名HarukaKinami生年月日1985

百度CTO王海峰首谈文心大模型3.5:通过插件扩增能力边界

DoNews6月27日消息,据报道,日前,百度文心大模型3 5版本已内测应用,

绵阳交通发展集团有限责任公司原党委书记、董事长邓辉星 接受纪律审查和监察调查_环球动态

绵阳交通发展集团有限责任公司原党委书记、董事长邓辉星涉嫌严重违纪违

家长请注意!火漆印章玩具存安全隐患 14岁以下儿童不应使用|观天下

【独家】破坏环境对人类的危害(破坏环境带来的危害)

全球播报:最新!杭城小学期末作文题出炉,你能拿几分

多地织牢织密防汛安全网 全力开展防汛救灾工作

天天看点:6月27日山东地区硝酸铵价格暂稳

联合国报告:全球有近3亿人使用毒品|全球热门

【世界时快讯】居民如何看待既有住宅加装电梯?面临哪些堵点?上海这样推进→

怎样制作一份优秀的个人简历,附可下载word模板

乳业股震荡拉升 皇氏集团此前涨停 _全球看热讯

做孩子的知心人和“解铃人”

社会效益指标内容_社会效益指标怎么写 热点评

华鼎股份6月27日盘中涨幅达5%

浙江龙玺精密科技有限公司

猪肉片粉条的做法? 全球快消息

中国能建宋海良:房地产结构性需求仍将长期存在

要闻:笑面人和他的助手

东湖评论:外卖平台先行,让小份菜发挥大作用

俄总统普京发表电视讲话 感谢全国民众和社会的团结

天天热议:听,古老尼山与现代智慧碰撞的声音——世界互联网大会数字文明尼山对话主论坛综述

2023年6月26日江苏省正癸酸价格最新行情预测

全球快讯:wps怎么解除限制编辑wps只能看不能编辑的解决方法

【世界聚看点】江西铅山:全力提升科创服务质量

全球速看:锦南新城:十年磨一剑 九州到亚洲

sns营销概念_SNS营销相关内容简介介绍

中国—东盟自贸区3.0版第三轮谈判在昆明开幕-当前播报

精准押注!英国央行上周意外加息前 看涨英镑水平创逾五年来新高_今日热门

许你清凉一夏 昆明上榜“2023避暑旅游优选地”名单

逆水寒手游战斗特性有哪些 逆水寒手游战斗特性分析-世界热点

《文字玩出花》怎么通过怀旧岁月8关卡 全球快讯

威特曼医学检验(南京)有限公司1.95亿项目环评获同意

最帅的网名 好听男网名 世界最资讯

环球速看:深圳市体育实验学校2023年插班生招生公告

视频号小店人工客服怎么找?视频号怎么运营?_视焦点讯

《闪耀的她》管文跟丁宁当初为何分手?

吉林省特色旅游景区推介会在长春举办 环球视讯

邵东市积极推进医疗事业高质量发展 迎乡贤建家乡医院-今亮点

2023河南省文旅文创发展大会将于6月底在洛阳举办

「每日书画笺」《战国蜀地漆簋》:色彩鲜艳丰满 纹饰丰富有形|世界微头条

世界信息:大都市如何“生”出万亩粮田?

仙霞高级中学打造了一座“海洋科普馆”_环球今日报

焦点简讯:手机号码标记平台查询_手机号码标记在线查询

环球热头条丨重庆的酸菜鸡怎么做才好吃

每日热闻!山东2023年普通高校招生各批次录取控制分数线

美图秀秀发布7款AI产品:支持用户创作、商业创作

全球速读:文班亚马被质疑涉嫌违规,马刺4换1交易鲍尔,可怜肖华良苦用心

丽水3个集群入选“浙江制造”省级特色产业集群协同区创建名单|全球速递

6月中旬名优白酒环比价格指数下跌0.05%

视频丨李家超谈上任一年:以结果拉近距离,以成绩凝聚互信

全球热头条丨中老两国禁毒部门成功侦破“12.04”中国移民警察蔡晓东被杀害案

黄潇潇左手指月_黄潇潇 今日精选

x 广告
x 广告

Copyright ©  2015-2022 太平洋自然网版权所有  备案号:豫ICP备2022016495号-17   联系邮箱:93 96 74 66 9@qq.com