大模型行业,根本没有什么“真”开源? siyushenqi.com • 2025 年 8 月 13 日 下午11:41 • 行业动态 • 阅读 396 最近一段时间开源大模型市场非常热闹,先是苹果开源了70亿参数小模型DCLM,然后是重量级的Meta的Llama 3.1 和Mistral Large 2相继开源,在多项基准测试中Llama 3.1超过了闭源SOTA模型。 最近一段时间开源大模型市场非常热闹,先是苹果开源了70亿参数小模型DCLM,然后是重量级的Meta的Llama 3.1 和Mistral Large 2相继开源,在多项基准测试中Llama 3.1超过了闭源SOTA模型。 不过开源派和闭源派之间的争论并没有停下来的迹象。 一边是Meta在Llama 3.1发布后表示:“现在,我们正在迎来一个开源引领的新时代。”另一边是Sam Altman在《华盛顿邮报》撰文,直接把开源闭源的矛盾上升到国家和意识形态层面。 在前段时间的世界人工智能大会上,李彦宏直言“开源其实是一种智商税”,因为闭源模型明明性能强,推理成本更低,再次引发讨论。 随后,傅盛也发表了他的看法,他认为开源和闭源这两个阵营是彼此共同竞争,共同发展。并对“开源其实是一种智商税”这一观点进行了反驳:“开源大语言模型是免费的,他怎么来的智商税呢,谁在收税?”,“如果今天企业用付费闭源大语言模型,那才叫'智商税',尤其是收很高的模型授权费、API费用,一年花了数百上千万,最后买回去当个摆设,甚至员工根本用不起来(模型)。” 这场争论的核心涉及到技术发展的方向和模式,反映了不同利益相关者的观点和立场,在我们谈论大语言模型的开源和闭源之前,需要厘清先“开源”和“闭源”这两个基本概念。 “开源”一词源自软件领域,指在软件开发过程中公开其源代码,允许任何人查看、修改和分发。开源软件的开发通常遵循互惠合作和同侪生产的原则,促进了生产模块、通信管道和交互社区的改进,典型代表包括Linux,Mozilla Firefox。 闭源软件(专有软件)由于商业或其他原因,不公开源代码,只提供计算机可读的程序(如二进制格式)。源代码仅由开发者掌握和控制。典型代表包括Windows,安卓。 开源是一种软件开发模式,基于开放、共享和协作,鼓励大家共同参与软件的开发和改进,推动技术的不断进步和广泛应用。 选择闭源开发的软件更有可能成为一个稳定、专注的产品,但是闭源软件通常需要花钱,且如果它有任何错误或缺少功能,只能等待开放商来解决问题。 至于什么是开源大模型,业界并没有像开源软件一样达成一个明确的共识。 大语言模型的开源和软件开源在理念上是相似的,都是基于开放、共享和协作,鼓励社区共同参与开发和改进,推动技术进步并提高透明性。 然而,在实现和需求上有显著区别。 软件开源主要针对应用程序和工具,开源的资源需求较低,而大语言模型的开源则涉及大量计算资源和高质量的数据,并且可能有更多使用限制。因此,虽然两者的开源都旨在促进创新和技术传播,但大语言模型开源面临更多的复杂性,社区贡献形式也有所不同。 李彦宏也强调了两者的区别,模型开源不等于代码开源:“模型开源只能拿到一堆参数,还要再做SFT(监督微调)、安全对齐,即使是拿到对应源代码,也不知道是用了多少比例、什么比例的数据去训练这些参数,无法做到众人拾柴火焰高,拿到这些东西,并不能让你站在巨人的肩膀上迭代开发。” 大语言模型的全流程开源包括将模型开发的整个过程,从数据收集、模型设计、训练到部署,所有环节都公开透明。这种做法不仅包括数据集的公开和模型架构的开放,还涵盖了训练过程的代码共享和预训练模型权重的发布。 过去一年,大语言模型的数量大幅增加,许多都声称是开源的,但它们真的有多开放呢? 荷兰拉德堡德大学的人工智能研究学者Andreas Liesenfeld和计算语言学家Mark Dingemanse也发现,虽然“开源”一词被广泛使用,但许多模型最多只是“开放权重”,关于系统构建的其他大多数方面都隐藏了起来。 比如Meta和微软等科技虽将其大语言模型标榜为“开源”,却并未公开底层技术相关的重要信息。而让他们意外的是,资源更少的AI企业和机构的表现更令人称赞。 该研究团队分析了一系列热门“开源”大语言模型项目,从代码、数据、权重、API到文档等多个方面评估其实际开放程度。研究还将OpenAI的ChatGPT作为闭源的参考点,凸显了“开源”项目的真实状况。 为开放,~为部分开放,X为封闭 结果显示,项目间差异显著,根据这个排行榜,Allen Institute for AI的OLMo是最开放的开源模型,其次是BigScience的BloomZ,两者都是由非营利组织开发。 论文称,Meta的Llama以及 Google DeepMind的Gemma 虽然自称开源或开放,但实际上只是开放权重,外部研究人员可以访问和使用预训练模型,但无法检查或定制模型,也不知道模型如何针对特定任务进行微调。 最近LLaMA 3和Mistral Large 2的发布引起了广泛关注。在模型在开放性方面,LLaMA 3公开了模型权重,用户可以访问和使用这些预训练和指令微调后的模型权重,此外Meta还提供了一些基础代码,用于模型的预训练和指令微调,但并未提供完整的训练代码,LLaMA 3 的训练数据也并未公开。不过这次LMeta带来了关于LLaMA 3.1 405B 的一份93页的技术报告。 Mistral Large 2的情况类似,在模型权重和 API 方面保持了较高的开放度,但在完整代码和训练数据方面的开放程度较低,采用了一种平衡商业利益和开放性的策略,允许研究使用但对商业使用有所限制。 谷歌表示,该公司在描述模型时“在语言上非常精确”,他们将Gemma称为开放而非开源。“现有的开源概念并不总能直接应用于 AI 系统,” 这项研究的一个重要背景是欧盟的人工智能法案,该法案生效时,对归类为开放的模型实施较宽松的监管,因此关于开源的定义可能会变得更加重要。 研究人员表示,创新的唯一途径是通过调整模型,为此需要足够的信息来构建自己的版本。不仅如此,模型还必须接受审查,例如,一个模型在大量测试样本上进行了训练,那么它通过特定测试可能并不算一项成就。 他们也对如此多的开源替代方案的出现感到令人欣喜,ChatGPT非常受欢迎,以至于很容易让人们忘记对其训练数据或其他幕后手段一无所知。对于那些希望更好地了解模型或基于构建应用的人来说,这是一个隐患,而开源替代方案使得关键的基础研究成为可能。 硅星人也对国内部分开源大语言模型的开源情况进行了统计: 从表中我们可以看到,和海外的情况类似,开源较为彻底的模型基本是由研究机构主导,这主要是因为研究机构的目标是推动科研进步和行业发展,更倾向于开放其研究成果。 而商业公司则利用其资源优势,开发出更为强大的模型,并通过适当的开源策略在竞争中获得优势。 从GPT-3到BERT以来,开源为大模型生态系统带来了重要的推动力。 通过公开其架构和训练方法,研究人员和开发者可以在这些基础上进行进一步的探索和改进,催生出更多前沿的技术和应用。 开源大模型的出现显著降低了开发的门槛,开发者和中小企业能够利用这些先进的AI技术,而不必从零开始构建模型,从而节省了大量的时间和资源。这使得更多创新项目和产品得以快速落地,推动了整个行业的发展。开发者们在开源平台上积极分享优化方法和应用案例,也促进了技术成熟和应用。 对教育和科研而言,开源大语言模型提供了宝贵资源。学生和新手开发者通过研究和使用这些模型,能快速掌握先进AI技术,缩短学习曲线,为行业输送新鲜血液。 然而,大语言模型的开放性并非简单的二元特性。基于Transformer的系统架构及其训练过程极为复杂,难以简单归类为开放或封闭。开源大模型并非一个简单的标签,更像一个光谱,从完全开源到部分开源,程度各异。 大语言模型的开源是一项复杂而细致的工作,并非所有模型都必须开源。 更不应以“道德绑架”的方式要求全面开源,因为这涉及大量技术、资源和安全考量,需要平衡开放与安全、创新与责任。正如科技领域的其他方面一样,多元化的贡献方式才能构建一个更丰富的技术生态系统。 开源和闭源模型的关系或许可以类比于软件行业中开源和闭源软件的共存。 开源模型促进了技术的广泛传播和创新,为研究者和企业提供了更多可能性,而闭源模型则推动着整个行业的标准的提升。两者的良性竞争激发了持续改进的动力,也为用户提供了多样化的选择。 正如开源和专有软件共同塑造了今天的软件生态,开源和闭源大模型之间也并非二元对立,两者的并存发展是推动AI技术不断进步、满足不同应用场景需求的重要动力。最终,用户和市场会作出适合自己的选择。 相关阅读外贸展会后怎么跟进客户?72小时、7天、30天的完整SOP网易辟谣:王怡未离职,部分营销团队并入事业部OpenAI内部信"摊牌":微软联盟已成枷锁,将押注亚马逊合作突围哔哩哔哩首次全年盈利、友谊时光靠女性向小游戏扬眉吐气丨9家游戏公司财报深度拆解群核科技开启全球招股;众擎机器人完成2亿美元B轮融资;红熊AI完成2.1亿元A轮融资丨投融资周报需要日本PayPal代付;社交APP伊拉克支付提现渠道;收巴西各类流量;海外买量|私域神器每周合作精选No.201一周要闻NO.195丨恶意软件入侵谷歌商店;9家游戏公司财报深度拆解;非洲市场又一电商巨头退场;Meta首个"超级智能"模型亮相微软或考虑将《使命召唤》移出Xbox Game Pass泡泡玛特进军巴西:先打假冒伪劣智元机器人,一分为四! 本文源自「私域神器」,发布者:siyushenqi.com,转载请注明出处:https://www.siyushenqi.com/34002.html 赞 (0) 打赏 微信扫一扫 支付宝扫一扫 0 0 生成海报 关于作者 siyushenqi.com 关注私信 13.9K 文章 0 评论 425 问题 18 粉丝 私域神器:海外私域营销拓客软件 轮到字节追赶快手一次了 上一篇 2025 年 8 月 13 日 下午11:41 等不及Sora的老铁,奔向快手可灵 下一篇 2025 年 8 月 13 日 下午11:41 相关推荐 行业动态 B站要变成AI站 2024Q2营收73.4亿元(+20%),毛利率升至36.5%,经调净利5.6亿元再创纪录,首次把赚钱变成“稳定叙事”。 siyushenqi.com 2025 年 8 月 26 日 516000 行业动态 Meta首个"超级智能"模型亮相 Meta发布首个原生多模态推理模型Muse Spark,由重组后的AI团队开发,支持工具使用、可视化思维链和多智能体协调,采用闭源模式并计划商业化。 转自扬帆出海 2026 年 4 月 10 日 258000 行业动态 冷眼AI,笑谈印度,库克卖的什么药? 在硬件公司一连串堪称灾难的财报中,苹果再次成为那一抹亮色。 siyushenqi.com 2025 年 8 月 14 日 475000 私域神器周报 No.21丨华为苹果相继召开新品发布会 看看出海圈本周又有哪些大事件 9月第二周,热浪褪去,不知不觉2022年已经过去了2/3,出海行业继续领跑互联网核心,成为追求增长的必然历程。为了提升行业认知,私域神器为大家整理了一周内出海行业中值得关注的新闻。本周华为苹果相继召开新品发布会,互联网中各大厂商也大动作不断。 siyushenqi.com 2025 年 8 月 14 日 • 行业动态 482000 下载千万、流水近亿,点点互动又抓到了一个“出海爆款” 从多个角度分析《Frozen City》获得成功的原因。 siyushenqi.com 2025 年 8 月 24 日 • 行业动态 437000 行业动态 网易暴雪国服回归正式官宣,魔兽手游产品营销负责人曝光 花开了 siyushenqi.com 2025 年 8 月 18 日 494000 行业动态 一周要闻NO.141丨小红书正式进军跨境电商;华谊兄弟清仓英雄互娱获利约9100万;Meta与台积电合作测试首款自研AI芯片 一起看看这周有哪些出海圈值得关注的大事记吧! siyushenqi.com 2025 年 8 月 14 日 464000 行业动态 为110万用户圆梦“与偶像恋爱”,国产AI社交应用去日本掘金了? AI社交也能玩转“偶像经济”。 siyushenqi.com 2025 年 9 月 23 日 494000 行业动态 年增长500万用户,两款小众社交应用靠“饥饿营销”拿捏用户,破解用户心理成关键 如何靠“搞心态”拉高用户欲望。 siyushenqi.com 2025 年 8 月 17 日 422000 发布3年,海外年收入破3亿,这款二次元麻将游戏神奇还在继续! 如果国内二次元厂商手头上都有一本相同的黄历,那么2022年第一条一定是“宜动画化”。 siyushenqi.com 2025 年 8 月 25 日 • 行业动态 510000 行业动态 OpenAI发布高级语音视觉功能,还有一个圣诞节彩蛋 OpenAI在其12天发布会的第六天推出了高级语音视觉功能,使ChatGPT能够通过视觉和听觉与用户互动,提供实时的视觉互动体验。 siyushenqi.com 2025 年 8 月 13 日 451000 行业动态 一款AI产品做到3万人社群,上线15个月实现盈利,对话灵力AI创始人讲述“AI产品商业化”的故事 一款AI产品如何解答商业化难题。 siyushenqi.com 2025 年 8 月 13 日 371000 行业动态 Tap4Fun投资创业公司志爱之陆,持股14.7% 大概又是做SLG的公司 siyushenqi.com 2025 年 8 月 19 日 432000 行业动态 又一机器人“入主”上市公司 16.65亿元“协议转让+要约收购”拿下锋龙43%股权,优必选将首次拥有A股上市平台,实际控制人变更为周剑。 siyushenqi.com 2025 年 12 月 27 日 378000 印度人弄了款抗中奇侠手游 下载量爆炸,全球第一! 战争手游《FAU-G》1月26日(印度国庆日)在印度上线,2月初全球上线。 siyushenqi.com 2025 年 8 月 25 日 • 行业动态 426000 行业动态 大批账号挂了!亚马逊新一轮审查 欧洲本土账号大审查,原因可能是注册资料出了问题。 siyushenqi.com 2025 年 8 月 12 日 387000 行业动态 掘金超300亿的潮玩市场 “泡泡玛特”们在东南亚掀起了开盲盒热潮 欧美,日本之后,潮玩淘金地下一站是东南亚? siyushenqi.com 2025 年 8 月 12 日 503000 行业动态 GICC | 2025金帆奖入围名单揭晓,投票通道开放,决定出海圈的“年度C位”! 千帆竞渡,见证百大出海先锋力量! siyushenqi.com 2025 年 9 月 17 日 438000 行业动态 跨境电商品牌做海外社媒,需要重点运营哪些平台? 随着跨境电商竞争日益激烈,品牌出海不仅要重视产品和物流,更要重视用户运营和内容曝光。其中,海外社交媒体已经成为品牌塑造、私域积累和精准引流的核心阵地。 但海外社媒平台众多,不同平台的用户结构、内容机制和行业适配度各不相同。对于跨境电商品牌而言,如何聚焦最关键的平台,合理配置资源,成为出海成功的关键一环。 ✅ 一、为什么跨境电商品牌必须重视社交媒体? 在海外市… siyushenqi.com 2025 年 8 月 13 日 下午11:41 396000 行业动态 优质户外家具将成为中东下一个消费新趋势?大卖家这样说.. 优质户外家具将成为中东下一个消费新趋势?大卖家这样说 siyushenqi.com 2025 年 8 月 13 日 449000 Q3出海日本:《剑与远征》首次上榜,莉莉丝日本收入增长208% 日前,SensorTower发布了Q3日本手游市场报告,报告中显示,中国手游出海日本成绩在步入2020年来,占比和吸金成绩都芝麻开花节节高。 siyushenqi.com 2025 年 8 月 26 日 • 行业动态 467000 优衣库母公司23Q1财报显示东南亚、北美及欧洲增速明显,员工薪资是成本中增速最高项目 “具备盈利能力后,UNIQLO将在北美、欧洲市场加速开设新门店。” siyushenqi.com 2025 年 8 月 13 日 • 行业动态 377000 行业动态 新加坡电商Carousell推出CarouBiz Booster Package 5月27日消息,据外媒报道,新加坡电商公司Carousell宣布推出CarouBiz Booster Package,以助力中小企业实现业务数字化。 siyushenqi.com 2025 年 8 月 13 日 462000 行业动态 人形机器人迪拜爆火!宇树科技狂揽千万级中东订单 迪拜酋长亲与 Unitree G1 人形机器人挥手互动,将其亮相联邦马吉利斯,宣示“科技与传统共存”的国家创新愿景。 siyushenqi.com 2025 年 8 月 26 日 530000 行业动态 14人小团队融资2亿+,这些休闲游戏厂商被资本争抢 过去一年,海外休闲游戏市场呈现火热态势,合成+、三消+、休闲棋牌等品类收入增长显著,原本以IAA为主的休闲玩法如3D堆叠、Sort(整理、排序)品类也在IAP上取得突破。 siyushenqi.com 2025 年 8 月 17 日 470000 行业动态 Grammarly收购Coda,扩大生成式AI影响力 Grammarly宣布收购Coda后,将加大对生成式AI领域的投资,以增强用户体验。 siyushenqi.com 2025 年 8 月 13 日 489000 行业动态 眼镜支付:“新生活方式”将会成为AI眼镜的制胜法宝 近期国内AI眼镜相关动态显示,接入支付体系已成为各大厂商共识,如Rokid Glasses、雷鸟V3、星纪魅族AR眼镜等均有支付功能展示,且这些支付解决方案多由支付宝提供支持。此外,支付宝背后的蚂蚁集团正在开发AI眼镜产品,探索新一代支付入口及数字人助理终端潜力。 siyushenqi.com 2025 年 8 月 13 日 429000 行业动态 WhatsApp协议号安全合规运营实用指南 数据加密与隐私保护 GDPR 合规要求 定期安全审计的重要性 用户隐私保护措施 数据处理透明度 数据加密与隐私保护 在现代企业运营中,用户数据的加密保护至关重要。对于WhatsApp协议号的安全合规运营,确保数据在传输和存储过程中的加密是防止数据泄露和黑客攻击的第一道防线。使用强加密算法(如AES-256)能有效地保护数据内容,即使数据被拦截,也难以被破解。… siyushenqi.com 2025 年 8 月 13 日 下午11:41 396000 行业动态 Anthropic最快明年IPO Anthropic已启动IPO筹备,聘请长期法律顾问Wilson Sonsini,并接触多家投行,最快2026年上市,或成史上最大IPO之一。 siyushenqi.com 2025 年 12 月 4 日 361000 2023 全球手游广告变现趋势报告:热门市场与品类数据剖析 2022 年受全球经济下行和政策收紧的影响,整个游戏行业都受到震荡,红利时代已经过去,接下来将面临更多的机遇与挑战。 siyushenqi.com 2025 年 8 月 3 日 • 行业动态 592000 发表回复 请登录后评论...登录后才能评论 提交