秘密研发,“威胁人类”,一个代号就引发全网恐慌?OpenAI的Q*到底是啥? siyushenqi.com • 2025 年 8 月 13 日 下午10:52 • 行业动态 • 阅读 411 Q*算法真的很神秘吗?我看未必! 让我们先把OpenAI管理层内部的极地大乱斗放在一边,聊一聊这家公司最新的传言——Q*。OpenAI在11月22号的时候给员工发了一封内部信,承认了Q*,并将这个项目描述为“超越人类的自主系统”。着实让人感觉到有一丝丝可怕。 虽然OpenAI官方没有放出任何有关Q*的消息,但是我们还是有能力浅浅了解。 首先第一步,我们要认识Q*的读法,官方正式名称叫做Q-Star,翻译过来就是Q星。对,你没看错,即便深度学习中,区块之间是通过乘积来求解的,但是在Q*里,“*”并不是乘的意思,而是“星号”。“Q”这个字母在强化学习中表示一个动作的期望奖励。 在人工智能领域里,但凡跟大写Q沾边的,本质都是Q学习。Q学习以现在的评判标准可以算是强化学习的一种,指的是在训练的过程中,以记录训练历史奖励值的方式,告诉智能体下一步怎么样选才能跟历史最高奖励值相同。但请注意,历史最大奖励值并不代表模型的最大奖励值,有可能是,也有很大可能不是,甚至还有可能八竿子打不着。换句话说,Q学习和智能体就像是一支球队的分析师和教练之间的关系。教练负责指导球队,分析师则用来辅佐教练。 在强化学习的过程中,智能体输出的决策是要反馈到环境中才能得到奖励值。而Q学习因为只记录奖励值,因此它不需要对环境进行建模,相当于“结果好,一切就好”。 不过这样看下来,好像Q学习还不如现在人工智能,尤其是大模型常用的深度学习模型。像现在这种动不动几十亿几百亿这么多参数下,Q学习不仅对模型没什么帮助,反倒还增加了复杂性,从而降低了鲁棒性。 别急,其实这是因为上述Q学习背后的思路本身只是一个诞生于1989年的基本概念。 DeepMind在2013年的时候曾经通过改进Q学习,推出过一个算法叫做深度Q学习,其最鲜明的特点就是使用经历回放,从过去多个结果中进行采样,再使用Q学习,进而达到提高模型的稳定性,降低模型因为某一次结果导致训练方向过于发散。 然而实话实说,这个概念一直没有走红也是有原因的,而从实际意义来看,深度Q学习此前在学界看来最大的作用就是开发出了DQN。 DQN是指深度Q网络,诞生于深度Q学习。DQN的思路和Q学习是一模一样的,但是在求得Q学习中最大奖励值的过程,是用神经网络来实现的。这一下子就fashion了起来。 DQN同一时间只会生成一个节点。与此同时,DQN会生成一个优先级队列,然后再把剩下的节点和动作的元祖存到优先级队列里。显而易见,一个节点肯定不够用,如果全程就一个节点那最后求解的答案一定错得离谱。当节点和动作元祖从队列中移出来的时候,就会根据这个动作应用到已经生成的那个节点得出来的关联性进而生成一个新节点,以此类推。 稍微懂点人工智能发展史的人会觉得越看越眼熟,这不就是高配版弗洛伊德求边长? 现代计算机中,处理器所使用的核心原理就是弗洛伊德算法,通过与历史最优值比对,求得两点之间最短的路径。内存的作用就是将计算以优先级的方式存储,每当处理器完成一次计算后,内存再把下一条计算扔给处理器。 DQN本质没什么区别。 这基本就是Q的意思,那么*又是指什么呢? 从诸多的业内人士分析来看,*很有可能指代的是A*算法。 这是一种启发式算法。先不着急讲启发式算法是什么,我来讲个笑话: A问B说“快速求出1928749189571*1982379176的乘积”,B立马就回答A说:“32”。这个A听了就很纳闷,这么大的两个数相乘,不可能答案是两位数。B反问A:“你就说快不快?”。 看起来离谱,但启发式算法也是同理。 它的本质就是估算,在效率和正解之间只能选择一个。要不然就非常讲究效率,可有时候会出错;要不然就非常讲究正确性,可耗时有时候会很长。A*算法则是先通过启发式算法估算一个大概其的值,当然这个值很有可能极其偏离正解。估算完成后就会开始循环遍历,如果怎么都没办法求解那就重新估值,直到开始出现解。如此反复,最终得出最佳解。 虽然能得到最佳解,然而A*就是上文提到的第二种,答案对,耗时比较长。放在实验室环境还好,这种算法要是放在个人设备上,有可能会导致内存溢出,产生系统问题,比如蓝屏。 因此这样的局限性使得过往A*算法往往应用于一些不太复杂的模型,最典型的就是网络游戏中角色寻路。一些大型游戏中,角色在寻路开始的那一刹那出现卡顿,就是因为A*算法。 综合来看,目前人工智能圈的共识是,OpenAI内部信中提到的Q*算法,大抵是Q学习和A两者的取长补短,即节省算力、节省内存,并得到最佳解——因为它总不可能是又多花费算力,又浪费内存,最后还得不到最佳解吧!那不成累傻小子了吗! 而且,就像OpenAI把基础模型这件事最终做成了一样,它同样早已存在,甚至也一度被人们冷落,直到OpenAI用具体的创新的方法把它的潜力重新发掘出来。今天人们自然有理由相信在Q和A这两个早就存在的算法思路里,OpenAI能故技重施再次创造奇迹——当然,对于这奇迹可能对人类带来的危害也因为最近OpenAI的闹剧而让更多人忧心忡忡。 所以,回到这个算法,Q*最有可能的样子是,利用Q学习快速找到接近最优解的估值,再利用A*算法在小范围内求解,省去了大量没有意义的计算过程,以此达到快速求得最佳解的效果。但是OpenAI具体要怎么做,还得等公开论文(如果能等到的话)。 Q*的出现其实说明了一个问题,人工智能头部公司意识到当下人工智能发展中求解的过程比求解更有意义。因为现在只追求答案的正确性不再能满足人们对人工智能的需求。比如OpenCompass上,即便是平均分数差10分、20分,但是如果从理解的准确率上看,最好的模型和最差的模型也没有很大的差距。 在人们的猜测和恐慌中,一个关于Q*的说法是,Q*可以解决非常高级的数学问题。萨里以人为本人工智能研究所所长安德鲁·罗戈斯基表示“我们知道现有的人工智能已被证明能够进行本科水平的数学运算,但无法处理更高级的数学问题。但是Q*极有可能用来解决高难度的数学问题。”说不定等到Q*出来的那一天,还可以考考它哥德巴赫猜想。而数学被认为是人类智慧的最大结晶之一,因此Q*只是一个代号就引发了全网的恐慌。 而且Q*背后还被与OpenAI的那个使命相联系——那就是对通用人工智能(AGI),甚至是超级智能的探索。OpenAI 将 AGI 定义为在最具经济价值的任务中超越人类的自主系统,Q*就是OpenAI迈向的AGI的一步。 目前OpenAI对于Q*和内部信泄露事件没有对外发表任何置评,可我却喜忧参半。对Q*拥有强大能力表示开心,人工智能领域发展将会更进一步。同时也比较担心Q*噱头大于实际,最后真到发布的那一天测试结果也就那么回事,让我被哐哐打脸。 相关阅读外贸展会后怎么跟进客户?72小时、7天、30天的完整SOP网易辟谣:王怡未离职,部分营销团队并入事业部OpenAI内部信"摊牌":微软联盟已成枷锁,将押注亚马逊合作突围哔哩哔哩首次全年盈利、友谊时光靠女性向小游戏扬眉吐气丨9家游戏公司财报深度拆解群核科技开启全球招股;众擎机器人完成2亿美元B轮融资;红熊AI完成2.1亿元A轮融资丨投融资周报需要日本PayPal代付;社交APP伊拉克支付提现渠道;收巴西各类流量;海外买量|私域神器每周合作精选No.201一周要闻NO.195丨恶意软件入侵谷歌商店;9家游戏公司财报深度拆解;非洲市场又一电商巨头退场;Meta首个"超级智能"模型亮相微软或考虑将《使命召唤》移出Xbox Game Pass泡泡玛特进军巴西:先打假冒伪劣智元机器人,一分为四! 本文源自「私域神器」,发布者:siyushenqi.com,转载请注明出处:https://www.siyushenqi.com/33318.html 赞 (0) 打赏 微信扫一扫 支付宝扫一扫 0 0 生成海报 关于作者 siyushenqi.com 关注私信 13.9K 文章 0 评论 425 问题 18 粉丝 私域神器:海外私域营销拓客软件 OpenAI神秘新模型Q*曝光,太强大让董事会警惕,或是奥特曼被开除导火索 上一篇 2025 年 8 月 13 日 下午10:51 超级AI不会主宰人类,但人工智能必须开源!LeCun最新采访引全网300万人围观 下一篇 2025 年 8 月 13 日 下午10:52 相关推荐 行业动态 两大AI视频独角兽竞逐新融资 Runway 正洽谈 5 亿美元新融资,投前估值 50 亿美元,比上一轮 30 亿高 67%;竞争对手 Luma AI 拟融 11 亿,投前 32 亿美元,半年暴涨约 12 倍。 siyushenqi.com 2025 年 8 月 14 日 377000 行业动态 营销新思路:公域和私域结合打造全域营销 在数字营销领域,全域营销已经成为了一种重要的策略。全域营销,顾名思义,就是涵盖了所有营销渠道的全面营销策略。这种策略强调公域与私域的结合,以实现更广泛的市场覆盖和更高效的客户获取。 公域,指的是公共的、开放的营销渠道,如搜索引擎、社交媒体、电商平台等。这些渠道具有广泛的用户基础和高度的曝光率,是企业获取新客户、扩大品牌影响力的重要途径。然而,公域营销也面临着… siyushenqi.com 2025 年 8 月 13 日 下午10:52 411000 行业动态 AIGC 与 AI 智能体协同优化复杂业务流程的技术解析 AIGC与AI智能体的结合正推动企业向更高效、智能化的方向发展。两者协同工作,使得企业的业务流程不仅实现自动化,还能够灵活、精准地优化。通过实时决策和自动调整,AIGC和AI智能体在各行各业中的应用不断扩大,为企业提供更高效的决策支持... siyushenqi.com 2026 年 1 月 24 日 393000 行业动态 LinkedIn的profile headline(职业档案标题)该怎么写? 经常有一些外贸伙伴来跟我说,他了解各国的市场,知道如何指导客户做市场营销,同时还是物流方面的专家,知道如何节省空间装更多的货物,甚至都知道如何帮客户省钱。 但是你这么厉害,你的客户知道吗?你的LinkedIn上的潜在客户知道吗? 在你和你潜在客户成交之前,他们未必了解你的情况。所以一个专业的、有吸引力的headline就非常重要。Headline可以是你的头… siyushenqi.com 2025 年 8 月 13 日 下午10:52 411000 data.ai 6 月中国游戏厂商及应用出海收入 30 强:Ujoy Games 入围收入榜 2023年6月中国游戏厂商及应用出海收入30强榜单出炉 siyushenqi.com 2025 年 8 月 18 日 • 行业动态 481000 行业动态 首批微短剧已通过新备案:耗时21天 从某省某短剧制作公司获悉,该公司于4月26日在微短剧新备案系统中申请备案的短剧已经在5月17日获得了通过,目前已进入公示阶段。 siyushenqi.com 2025 年 8 月 18 日 514000 行业动态 中国消费出海投资的真机会和真挑战 一组资深产业和一二级投资人的视角:中国消费出海投资的真机会和真挑战。 siyushenqi.com 2025 年 8 月 6 日 401000 行业动态 2022年10月全球热门移动游戏收入TOP10 Sensor Tower 商店情报数据显示,2022年10月腾讯《王者荣耀》在全球 App Store 和 Google Play 吸金近2.1亿美元,蝉联全球手游畅销榜冠军。来自中国iOS市场的收入占95.1%,海外市场收入占比为4.9%。 siyushenqi.com 2025 年 8 月 24 日 582000 行业动态 《Coin Master》总收入突破 20亿美元 Moon Active社交博彩手游《Coin Master》迎来高速增长,目前总收入已超过20亿美元。 siyushenqi.com 2025 年 8 月 25 日 432000 行业动态 AI融入语言教学,不输Duolingo的小语种教学应用大爆发 日活用户上千万,语言教学市场大爆发。 siyushenqi.com 2025 年 8 月 18 日 497000 行业动态 硬扛蛋仔!寄生Roblox收割500万DAU后,这款衍生手游登顶印尼 活久见,“0.1折”套路居然进了一款MMO派对游戏? siyushenqi.com 2025 年 8 月 18 日 493000 TikTok曝光量51亿,英国人买爆“粉色圣诞树” 从小物件到圣诞树、花圈和包装纸,今年圣诞节似乎一切都变成了玫瑰色。 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 467000 当广告遇上兵法:见招拆招巧解投放难题,运筹帷幄决胜变现获客 当挑战与机遇同时来临,“专业性”就成为了成功的关键 siyushenqi.com 2025 年 8 月 3 日 • 行业动态 414000 行业动态 日本畅销第3,付费留存98%,今年第一个出海爆款太反常 被忽略的赛道。 siyushenqi.com 2025 年 8 月 18 日 401000 奥运季来了!看淘宝直播如何定义 “什么是淘宝女主播” 这是一群本可以靠脸吃饭的人,但是他们偏偏要靠专业。 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 403000 行业动态 下一站,沙特 去年以来,你一定在各类社交媒体见过不少与中东有关的话题。 siyushenqi.com 2025 年 8 月 18 日 494000 谷歌云(GCP)账号如何注册? 谷歌云(GCP)账号如何注册? siyushenqi.com 2025 年 8 月 3 日 • 行业动态 474000 TikTok流量风口,四个白牌卖家为何能逆袭 聚集10亿月活的TikTok一直备受关注,高流量推动下,TikTok电商(也称“TikTokShop”,下同)上已有诸如CIDER、Patpat、BloomChic等品牌交出成绩不俗的答卷。 siyushenqi.com 2025 年 8 月 13 日 • 行业动态 447000 私域神器每周精选 No.48|多款精品游戏寻海外合作、多款MMO寻全球代理 本期精选的合作类型涵盖多款精品游戏寻海外合作。接下来就一起看看吧~ siyushenqi.com 2025 年 8 月 15 日 • 行业动态 430000 网易投资游戏健身公司PlayPulse,后者将推触屏动感单车 挪威健身游戏初创公司PlayPulse宣布获得网易游戏的投资,这笔钱将用于帮助其在2023年初推出首款产品PlayPulse One健身自行车 siyushenqi.com 2025 年 8 月 24 日 • 行业动态 411000 行业动态 8月营收增长13% 点点互动挺进中国手游出海收入榜三甲 9月11日,第三方机构Data.ai公布了2023年8月中国游戏厂商及应用出海收入30强排行榜单,世纪华通(SZ.002602)旗下点点互动继7月上升到第4名后,8月已超越三七互娱,挺进榜单三甲位置。 siyushenqi.com 2025 年 8 月 19 日 397000 行业动态 年入1600万美金,独立站20万月活,海外宠物市场6个新机会正在爆发 高端宠物用品市场需求暴增。 siyushenqi.com 2025 年 8 月 6 日 436000 行业动态 离职腾讯后,悄悄扩至千人团队:又一“小游戏大佬”诞生了! 直接对标海外爆款《Spin Squad》,把“肉鸽+老虎机抽奖+自走棋”三要素做成超轻度化,用强随机刺激降低门槛,同时保留棋子站位、神话公式等微量策略,形成“又爽又不烧脑”的小游戏标配体验。 siyushenqi.com 2025 年 9 月 16 日 542000 行业动态 6月进口版号下发!宝可梦、马里奥、奥特曼、仙境传说等多款IP产品赫然在列 腾讯、朝夕光年、高图......都是老熟人。 siyushenqi.com 2025 年 8 月 18 日 393000 行业动态 二次元杀疯了,多款流水创新高,悠星杀进前十——11月发行商Top30 2023年11月中国手游发行商全球App Store、Google Play收入排行TOP30出炉 siyushenqi.com 2025 年 8 月 18 日 630000 行业动态 主动脉智能科技 确认入驻PAGC 2025丨第五届全球产品与增长展会! 主动脉智能科技 确认入驻PAGC 2025丨第五届全球产品与增长展会! siyushenqi.com 2025 年 8 月 17 日 455000 微博相继认证,米哈游、库洛、蛮啾的新作要开宣了 随着200多天后的国产游戏版号的再次下发,不少游戏开发者心里吃下了一颗定心丸,至少很多原本没什么声音或者默默开发的项目开始走上正常宣发的轨道。 siyushenqi.com 2025 年 8 月 25 日 • 行业动态 488000 行业动态 韩国跨境电商规模创新高,大批卖家疯狂涌入 韩国跨境电商市场正在持续爆发。 siyushenqi.com 2025 年 8 月 12 日 526000 左手MOBA,右手射击,字节游戏在日本先下一城 4月20日,国家新闻出版署发布新一批共计86款国产游戏版号。其中包括:59款移《字节MOBA国服低调开测,跟腾讯正面刚》动游戏;19款移动休闲益智游戏;5款移动+客户端游戏;以及客户端、Switch、移动+客户端+Switch类游戏各1款。 siyushenqi.com 2025 年 8 月 24 日 • 行业动态 483000 行业动态 《黑神话:悟空》海外社媒互动量近亿,国内全网互动超1.8亿! 四年磨一剑,一剑破长空。 siyushenqi.com 2025 年 8 月 17 日 546000 发表回复 请登录后评论...登录后才能评论 提交