LangChain《2024人工智能全景报告出炉》:OpenAI依旧是龙头 开源模型采用率上升 siyushenqi.com • 2025 年 8 月 13 日 下午9:36 • 行业动态 • 阅读 484 报告通过分析LangSmith产品,展示了人们构建大型语言模型应用方式的变化。 摘要 报告指出,用户从以检索工作流程为主转向具有多步骤、代理性工作流程的智能体应用,开源模型供应商如Ollama、Mistral和Hugging Face的使用量占据了前20名中的20%。 OpenAI继续稳居最常使用的大语言模型供应商宝座,而Ollama和Groq因支持开源模型而增长迅猛,跻身行业前五。 企业越来越重视整合智能体,LangGraph自发布以来受欢迎程度稳步增长,现在有43%的使用LangSmith平台的组织正在发送LangGraph追踪数据。 报告分析了组织如何与他们的应用程序互动,确保其需求的复杂性与性能效率相匹配,观察到每个追踪的平均步骤数显著增长,同时大语言模型的平均调用次数增长较为温和,表明开发者在设计系统时努力减少大语言模型调用次数,同时实现更多功能。 12月20日,美国人工智能公司LangChain日前发布了《2024年人工智能全景报告》(State of AI Report 2024)。自2018年开始,LangChain团队已连续七年发布当年的《人工智能全景报告》,成为人工智能行业流行的风向标。在今年的报告中,通过深入探究大模型应用开发平台LangSmith产品的使用模式,LangChain团队揭示出人工智能生态系统以及人们构建大型语言模型应用的方式是如何演变的。 LangChain团队在报告中指出,随着用户在LangSmith中进行追踪、评估和迭代,他们观察到了几个显著的变化,其中包括开源模型采用率的急剧上升,以及从以检索工作流程为主转向具有多步骤、代理性工作流程的智能体应用。 LangChain团队通过深入研究以下统计数据,整理出开发者正在构建、测试和优先考虑的内容。 大语言模型使用分析 在全球范围内,大语言模型正迅速普及,这也引发了一个普遍的疑问,类似于童话中王后对魔镜提出的问题:“在所有模型中,哪一个是最常被使用的?”LangChain团队通过深入分析收集的数据,揭示出这一问题的答案。 (一)大语言模型顶级供应商: 注:2024年十大语言模型供应商排名 如同前一年的数据所示,OpenAI在LangSmith用户群中继续稳居最常使用的大语言模型供应商宝座,其使用率是排名第二的Ollama的六倍以上。 注:2024年十大大语言模型供应商排名 特别引人注意的是,Ollama和Groq(这两家公司都支持用户运行开源模型,Ollama侧重于本地执行,而Groq则专注于云端部署)在今年的增长势头迅猛,成功跻身行业前五。这一趋势反映了市场对于更加灵活的部署选择和个性化人工智能基础设施的日益增长的需求。 在开源模型供应商方面,与去年相比,顶级供应商的排名相对稳定——Ollama、Mistral和Hugging Face等公司为开发者提供了便捷的平台,以便他们能够轻松地运行开源模型。这些开源软件供应商的合计使用量占据了前20名大语言模型供应商中的20%。 (二)顶级向量检索/存储系统: 注:2024年十大顶级向量检索/存储系统排名 在众多生成式人工智能(GenAI)的工作流程中,执行高效的检索操作依然扮演着关键角色。今年的顶级向量存储系统排名与去年相比保持稳定,Chroma和FAISS继续占据最受欢迎的前两位。此外,Milvus、MongoDB和Elastic的向量数据库也在今年成功跻身前十,这反映出业界对于灵活部署选项和可定制化人工智能基础设施的兴趣日益增长。 使用LangChain产品构建应用 注:组织如何使用LangSmith构建应用 随着开发者对生成式人工智能的运用经验日益丰富,他们正在构建更多动态的应用。从工作流程的日益复杂化,到人工智能智能体(AI agents)的兴起--LangChain观察到几个趋势,这些趋势指向了一个不断创新发展的生态系统。 (一)可观测性不仅限于LangChain应用程序 开源框架LangChain虽然是众多开发者构建大语言模型应用的首选,但根据LangSmith今年的追踪数据,有15.7%的追踪来自非LangChain框架。这一现象揭示了一个更广泛的趋势:无论使用哪种框架来构建大语言模型应用,对可观测性的需求都是普遍存在的。LangSmith通过支持不同框架间的互操作性,满足了这一需求。 (二)Python继续占据主导地位,JavaScript使用率稳步上升 在调试、测试和监控领域,Python SDK深受Python开发者的青睐,占据了84.7%的使用率。与此同时,随着开发者越来越多地投身于Web优先的应用开发,JavaScript的使用兴趣也在显著提升。今年,JavaScript SDK在LangSmith中的使用比例达到了15.3%,与去年相比增长了三倍。 (三)智能体正逐渐受到关注 随着企业越来越重视在各个行业中整合智能体,我们可控的智能体框架LangGraph的采用率也在上升。自2024年3月发布以来,LangGraph的受欢迎程度稳步增长——现在有43%的使用LangSmith平台的组织正在发送LangGraph追踪数据。这些追踪数据代表了复杂、协调的任务,超越了基本的大语言模型互动。 这一增长与智能体行为的增加相一致。LangChain团队发现,平均有21.9%的追踪现在涉及工具调用,而2023年的平均值仅为0.5%。工具调用允许模型自主调用函数或外部资源,标志着更多的智能体行为,即模型决定何时采取行动。增加工具调用的使用可以增强智能体与外部系统交互的能力,并执行如写入数据库等任务。 性能与优化 在应用程序开发领域,尤其是在利用大语言模型资源的应用中,实现速度与复杂性的平衡是一个核心挑战。LangChain团队分析了组织如何与他们的应用程序互动,确保其需求的复杂性与性能效率相匹配。 (一)复杂性的提升并未影响任务处理的效率 注:LangChain团队观察到每个追踪的平均步骤数有了显著的增长 在过去的一年里,LangChain团队观察到每个追踪的平均步骤数有了显著的增长,从2023年的2.8步上升至2024年的7.7步。LangChain团队将这些步骤定义为追踪中的独立操作,包括对大语言模型、检索器或工具的调用。这一增长趋势揭示了组织正在采用更加复杂和多维的工作流程。用户所构建的系统已经超越了简单的问答交互,转而将多个任务串联起来,如信息检索、信息处理以及产出可执行的结果。 与此同时,每个追踪中大语言模型的平均调用次数增长较为温和--从1.1次增至1.4次。这表明开发者在设计系统时,正努力在减少大语言模型调用次数的同时,实现更多的功能,既维持了系统的功能性,又有效控制了成本较高的大语言模型请求。 大语言模型测试与评估 注:顶级评估数据排名 面对如何确保大语言模型应用不产生不准确或低质量响应的挑战,组织采取了哪些措施?虽然维持大语言模型应用的高标准质量是一项艰巨任务,但调查发现组织正利用LangSmith的评估工具来自动化测试流程,并构建用户反馈机制,以开发出更加稳健和可靠的应用程序。 通过LangSmith的评估功能,组织能够自动执行测试,并收集用户反馈,确保大语言模型应用输出的质量。这不仅包括对大语言模型生成响应的准确性和质量进行测试,还涉及根据用户反馈不断调整和优化应用性能。这样的做法使得组织能够在应对复杂需求的同时,确保大语言模型应用的性能保持高效。 (一)大语言模型作为评审员:关键要素评估 使用大语言模型作为评审员的评估工具将评分准则整合进大语言模型的提示中,并通过大语言模型来评定输出结果是否满足特定的评估标准。LangChain团队观察到开发者在测试中最为关注以下几个特性:相关性、正确性、精确匹配以及有用性。这些特性强调出大多数开发者正在进行初步的响应质量检验,以确保人工智能生成的内容不会严重偏离预期目标。 (二)利用人类反馈进行迭代 在构建大语言模型应用的过程中,人类反馈扮演着至关重要的角色。LangSmith通过加速收集和整合人类反馈至追踪和执行过程中(即执行跨度),帮助用户构建出更丰富的数据集,以便于改进和优化应用。在过去一年里,标注的执行次数增长了18倍,这一增长与LangSmith使用量的增加成正比。 尽管每次执行的反馈数量从2.28条上升到2.59条,显示出轻微的增长,但相对于每次执行来说,反馈量仍然较少。这可能意味着用户在审查执行时更倾向于追求速度,而不是提供详尽的反馈,或者他们可能只针对那些最关键或存在问题的执行提供评论。 结 论 在2024年,开发者在构建大语言模型应用时,更加倾向于采用多步骤智能体来增加应用的复杂性;他们通过减少大语言模型的调用次数来提升效率,并引入质量检查机制,通过反馈和评估方法来确保输出结果的质量。随着大语言模型应用的不断增多,我们期待看到开发者如何进一步探索更智能的工作流程、提升性能表现以及增强应用的可靠性。 相关阅读外贸展会后怎么跟进客户?72小时、7天、30天的完整SOP网易辟谣:王怡未离职,部分营销团队并入事业部OpenAI内部信"摊牌":微软联盟已成枷锁,将押注亚马逊合作突围哔哩哔哩首次全年盈利、友谊时光靠女性向小游戏扬眉吐气丨9家游戏公司财报深度拆解群核科技开启全球招股;众擎机器人完成2亿美元B轮融资;红熊AI完成2.1亿元A轮融资丨投融资周报需要日本PayPal代付;社交APP伊拉克支付提现渠道;收巴西各类流量;海外买量|私域神器每周合作精选No.201一周要闻NO.195丨恶意软件入侵谷歌商店;9家游戏公司财报深度拆解;非洲市场又一电商巨头退场;Meta首个"超级智能"模型亮相微软或考虑将《使命召唤》移出Xbox Game Pass泡泡玛特进军巴西:先打假冒伪劣智元机器人,一分为四! 本文源自「私域神器」,发布者:siyushenqi.com,转载请注明出处:https://www.siyushenqi.com/32760.html 赞 (0) 打赏 微信扫一扫 支付宝扫一扫 0 0 生成海报 关于作者 siyushenqi.com 关注私信 13.9K 文章 0 评论 425 问题 18 粉丝 私域神器:海外私域营销拓客软件 一天下载量30万,这家厂商靠AI修图赢麻了? 上一篇 2025 年 8 月 13 日 下午9:36 ChatGPT搜索带火Perplexity,获5亿美元、估值90亿美元 下一篇 2025 年 8 月 13 日 下午9:36 相关推荐 行业动态 过气产品如何在中东找到市场,焕发生机? 随着城市化进程的提速,天然气管道进入千家万户,煤气罐逐渐不见了踪影。 siyushenqi.com 2025 年 8 月 3 日 502000 私域神器每周精选 No.24|优质游戏寻全球流量合作 多款手游寻国内外发行 本期精选的合作类型涵盖多款精品手游发行、资源合作与流量需求等。接下来就一起看看吧~ siyushenqi.com 2025 年 8 月 24 日 • 行业动态 498000 行业动态 簌口水爆卖10万单,小赚148万!TikTok Shop美国小店(1.15-1.21)新榜 本期(2024年1月15日—1月21日)TikTok Shop 美国站“品类周榜”及“店铺周榜"销量数据分析,帮助卖家及时了解 TikTok Shop 美国小店最新市场现状,掌握选品趋势。 siyushenqi.com 2025 年 8 月 12 日 446000 环保鞋履走红全球,DTC品牌VIVAIA为何能成功出海? 我们有理由相信,VIVAIA将继续在DTC模式下崭露头角,成为更多消费者心目中的首选品牌。 siyushenqi.com 2025 年 8 月 12 日 • 行业动态 528000 行业动态 追平多模态满血o1,kimi的新模型k1.5 破解了OpenAI的秘密? 国产大模型DeepSeek R1和Kimi k1.5相继发布,性能比肩OpenAI的o1模型。DeepSeek R1开源模型权重并公布技术报告,而Kimi k1.5则是首个OpenAI之后的多模态类o1模型,延续了快速迭代的节奏。 siyushenqi.com 2025 年 8 月 13 日 494000 行业动态 亚马逊股价盘前跌超2%,Q4业绩展望不及预期 腾讯证券10月30日讯,在线零售巨头亚马逊(NASDAQ:AMZN)股价周五盘前跌逾2% siyushenqi.com 2025 年 8 月 13 日 426000 行业动态 WhatsApp蓝标号在跨境电商中的应用场景 提升品牌信任度 优化客户服务体验 促进销售转化 增强客户互动 支持多语言沟通 提升品牌信任度 在跨境电商中,WhatsApp蓝标号作为一个品牌认证标志,具有显著的品牌信任度提升作用。消费者通常对未知品牌存在一定的不信任感,而WhatsApp蓝标号的存在,向客户展示了品牌的认证和可信赖性。这不仅增强了品牌形象,也让顾客感到在与该品牌沟通时更有保障。通过获得蓝标… siyushenqi.com 2025 年 8 月 13 日 下午9:36 484000 行业动态 短剧出海爆火:北美 "横店" 崛起,40 + 女性成主力受众,文化差异成最大难题? 爆款套路,国内团队操盘,10集免费+跳转付费,北美40+女性最买单,单部营收破2000万美元。 siyushenqi.com 2025 年 9 月 8 日 557000 行业动态 天美×卡普空的新尝试,想把“怪猎”带给更多新玩家 普攻+奥义+三技能键简化输入,保留派生节奏与部位破坏策略,新增“精准闪避”和部位轮盘,兼顾新手爽感与老猎硬核。 siyushenqi.com 2025 年 10 月 7 日 416000 对话FUNNYFUZZY创始人陈硕:下一个电商红利是生成式AI “商标是一个视觉识别系统,DTC是一个数字化系统,品牌是一个“人货场”系统。FUNNYFUZZY是一个DTC养宠生活品牌。”——陈硕 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 484000 一个独立站估值超40亿美元!瑜伽服里的“他经济” 男士瑜伽服装市场开始崛起 siyushenqi.com 2025 年 8 月 12 日 • 行业动态 446000 行业动态 腾讯1个月连投两家西班牙工作室,可以组局打国家德比了 一个月内,腾讯投资了两家西班牙游戏工作室。 siyushenqi.com 2025 年 8 月 24 日 507000 行业动态 莉莉丝“剑与远征2”出征,首日冲进美国畅销榜Top50 | 欧美出海秀 《剑与远征:启程》正式上线欧美地区,首发告捷。 siyushenqi.com 2025 年 8 月 18 日 490000 行业动态 Shein将在伦敦提交500亿英镑IPO招股说明书 快时尚电商巨头Shein正准备向英国金融行为监管局递交招股说明书,以获得批准,准备在伦敦上市,其估值可能在500亿英镑(约合人民币4617亿元)。 siyushenqi.com 2025 年 8 月 6 日 431000 宜家这些最「过时」的产品,怎么成了被 Z 世代追捧的时尚单品? 作为有着 70 多年历史的家具品牌,人们总是调侃道家具的终点就是「宜家风」,那么过往年代的宜家设计风格会是怎样的呢? siyushenqi.com 2025 年 8 月 13 日 • 行业动态 426000 行业动态 小红书的“第一个”618 复盘小红书直播电商的三个核心秘诀。 siyushenqi.com 2025 年 8 月 13 日 495000 行业动态 AI终端,有望迎“排浪式”增长! 国家发展改革委会同有关部门推进“人工智能+”行动,完善政策体系、加大支持力度,促进人工智能赋能各行业,形成良好的社会氛围。 siyushenqi.com 2025 年 8 月 13 日 385000 行业动态 这款下载量仅1780万次的任天堂手游,累计收入已超10亿美元 在任天堂旗下所有手游中,已经有一款全球累计流水收入超过了10亿美元。 siyushenqi.com 2025 年 8 月 24 日 445000 自建衍生品电商,Netflix的第二曲线? 在流媒体领域一直突飞猛进的Netflix近期宣布推出线上商城Netflix.shop,一头扎进电商领域。 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 328000 行业动态 PAGC2024短剧出海峰会精华回顾丨在百亿市场破局,短剧出海如何少踩坑多增长? 自2023年短剧产品在海内外市场迎来爆发式需求以来,越来越多的中国短剧团队开始走向海外,他们擅长打磨优质剧本,具备丰富的拍摄经验,对海外市场有长足的探索。 siyushenqi.com 2025 年 8 月 18 日 399000 行业动态 苹果头显,就火了俩礼拜 别急,一批Vision Pro国产“平替”正在路上。 siyushenqi.com 2025 年 8 月 13 日 414000 行业动态 厉害!安克半年营收超70亿元 跨境“模范生”果然厉害。 siyushenqi.com 2025 年 8 月 13 日 447000 收入激增143%,这种游戏社交传播蕴藏着什么“财富密码”? 社交传播?拿来吧你。 siyushenqi.com 2025 年 8 月 25 日 • 行业动态 425000 让大模型讲人话,“天工”有何不同? 微软和OpenAI联手烧起来的大模型之火还没燃完一个月,国内大模型已经开始卷起来。今年四月可以称为国内大模型的肇始之月。继百度在3月底发布文心一言后,阿里、腾讯、字节等行业巨头,以及商汤、知乎等细分领域玩家都陆续发布了自己的大模型产品。 siyushenqi.com 2025 年 8 月 14 日 • 行业动态 392000 行业动态 新加坡直播首秀!范冰冰品牌正式入驻TikTok Shop 范冰冰宣布其创立的美妆品牌Fan Beauty正式入驻TikTok Shop,并将新加坡市场作为首站进行拓展。 siyushenqi.com 2025 年 8 月 5 日 312000 全球卷起“托尼”热:又一款hair超休闲登顶安卓免费榜 取材于生活的超休闲,连理发也不放过。 siyushenqi.com 2025 年 8 月 24 日 • 行业动态 455000 卖家净收入增长287%,美国宠物市场增速迅猛 宠物用品市场前景大好,Petco净收入增长287%。受疫情影响,人们在家中度过了更多的时间,为了让自己的居家生活不孤单,有许多人选择养一只宠物陪伴自己。在受疫情冲击全球经济持续低迷的情况下,“宠物经济”反而逆流而上,在多国迎来了爆发式增长。 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 392000 一场内容战引起的跨圈风潮 卷起了多少营销创意 内容为王时代风头正盛,游戏厂商怎能止步不前? siyushenqi.com 2025 年 8 月 24 日 • 行业动态 445000 年终盘点:2022谷歌热搜商品榜Top100,全球人民都爱买什么? Google发布了2022热搜购物榜 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 441000 《卧龙》:幻想中的三国动作游戏,要被日本人做出来了 在6月13日的微软游戏发布会上,一款名为《卧龙:苍天陨落》的游戏深深吸引了全球玩家的目光 siyushenqi.com 2025 年 8 月 24 日 • 行业动态 460000 发表回复 请登录后评论...登录后才能评论 提交