OpenAI「登月计划」剑指超级AI

OpenAI「登月计划」剑指超级AI

通用AGI，或许近在咫尺。

OpenAI下一步「登月计划」，就是实现人类期待已久的超级人工智能，而到达这一步的前提是——解决超级AI对齐问题。

就在前几天，首席科学家Ilya带头OpenAI超级对齐团队取了的实质性成果。他们发表的最新论文，首次确定了超级AI对齐的研究方向：

实证表明，GPT-2可以用来激发GPT-4的大部分能力，能够达到GPT-3.5的性能。甚至还可以泛化到小模型失败难题上。

其中，官方博客的第一句便是：我们相信超级智能可能会在未来10年内出现。

再加上传闻中即将面世的GPT-4.5，以及或许会在明年诞生的GPT-5，OpenAI似乎已经准备好迎接超级人工智能到来了。

然而，在LeCun看来，「超人AI」的发展不会一蹴而就，而是要经历多个阶段逐渐完成。

第一阶段：学习世界运作方式首先，是构建能像小动物一样学习世界运作方式的系统——可以观察环境并从中学习，为发展更高级的AI能力打下基础。而这也是AI进化的关键一步。

相比之下，如今的语言模型如GPT-4或Gemini，主要关注的还是文本数据，这显然远远不够。

LeCun经常嘲讽当前AI的一句话是，「如今大模型的智力连猫狗都不如」。甚至在他看来，通往AGI路上，大模型就是在走歪路。

一直以来，他坚信世界有一种「世界模型」，并着力开发一种新的类似大脑的AI架构，目的是通过更真实地模拟现实世界来解决当前系统的局限性，例如幻觉和逻辑上的缺陷。

这也是想要AI接近人类智力水平，需要像婴儿一样学习世界运作的方式。

这个世界模型的架构，由6个独立的模块组成：配置器模块、感知模块、世界模型模块、成本模块、短期记忆模块，以及参与者模块。

其中，核心是世界模型模块，旨在根据来自感知模块的信息预测世界。能够感知人在向哪移动？汽车是转弯还是继续直行？

另外，世界模型必须学习世界的抽象表示，保留重要的细节，并忽略不重要的细节。然后，它必须在与任务水平相适应的抽象级别上提供预测。

LeCun认为「联合嵌入预测架构」（JEPA）能够解决这个难题。JEPA支持对大量复杂数据进行无监督学习，同时生成抽象表示。

今年6月，基于「世界模型」的愿景，他又提出了一个全新架构I-JEPA。

论文地址：https://ai.meta.com/blog/yann-lecun-ai-model-i-jepa/

不过，LeCun更高层次的愿景留下了许多未解决的问题，例如关于世界模型的架构和训练方法的细节。

第二阶段：目标驱动且有保护措施的系统其次，是构建目标驱动并在一定的保护措施下运作的机器。

这些保护措施将确保AI系统在追求目标时仍然安全可控。

第三阶段：规划与推理随着AI系统的不断成熟，它们将发展出规划和推理的能力，从而在遵守安全规范的前提下，实现既定目标。

这将使AI系统能够基于对世界的理解做出更加明智的决策，并采取合适的行动。

第四阶段：分层规划再进一步，AI系统将能够进行分层规划，从而大幅提升决策能力。

这将使AI系统更加高效地处理复杂任务和难题。

第五阶段：增强机器智能随着AI的进化，这些系统的智能将从最初的老鼠提升至类似狗或者乌鸦的水平。

在此过程中，为确保AI系统保持可控和安全，将需要不断对其保护措施进行调整。

第六阶段：更广泛的训练与微调当AI系统达到一定的智能水平时，就需要将它们放在不同环境和任务中接受训练，使其更加灵活，能够应对各种挑战。

随后，还需要对AI系统进行微调，以便在特定任务上表现出色。

第七阶段：超人类AI的时代总有一天，我们开发的AI系统会在几乎所有的领域超越人类智能。

但这并不意味着这些系统具备情感或意识。只不过是在执行任务方面，会比人类做得更好。

同时，即使这些高级AI系统智力超群，它们也必须始终受到人类的控制。

根据LeCun之前提出的观点，这理论上是可行的：由于智力水平与主导欲望之间并无直接联系，而AI并不像人类那样具有天生的主导欲望。因此，AI或许会愿意为智力上不及它们的人类服务。

当然，这种情况在未来5年内不太可能出现。

LLM自我迭代，走向AGI

为了让超级AI系统能够迭代学习，持续完成任务并不断改进效果，当前的许多框架采用了可识别的过程。

类似于下图中的结构，包括反馈控制和强化学习。

另外，还可以采用一些附加功能，以最大限度地减少人工输入并增强流程自动化。

那么，上面展示的迭代学习系统是如何运行的？

首先，人类将广义定义的任务分配给智能体。

任务通常采取提示的形式，概述主要目标，例如，「探索环境，并完成尽可能多的不同任务」。

Planner（规划）模块以这个目标为条件，将目标分解为一系列可执行的、可理解的任务。

由于LLM已经在大量数据上进行了训练，充分了解智能体运行的环境，可以很好地支持目标分解。此外，还可以补充上下文来增强LLM的性能。

当Planner提供了一组派生的子任务后，Selector负责确定最合适的下一个子任务（满足先决条件，且能产生最佳结果）。

Controller的工作是生成当前子任务所需要的操作。然后，生成的操作被引入到环境中。

在这个过程中，使用Memory块检索最相似的学习任务，将它们集成到其正在进行的工作流中。

为了评估最近操作的影响，Critic会监视环境状态，提供反馈，包括识别缺点和失败原因等。

Descriptor块把环境和智能体的状态描述为文本，作为Critic的输入，然后，Critic为Planner提供全面的反馈，以协助进行下一次试验。

下面来看一下系统中每个模块的一些具体细节。

规划（Planner）Planner负责组织整个任务，根据智能体的当前状态和水平来协调学习过程。

通常会假设基于LLM的Planner在训练中接触过类似的任务分解过程，但这个假设在这里并不成立。

因此，研究人员提出了一种方法：从环境手册文本中提取所有相关信息，总结成一个小尺寸的上下文，并连接到提示中。

在现实生活中的应用程序中，智能体会遇到各种不同复杂程度的环境，这种简单而有效的方法，可以避免频繁为新任务进行微调。

Planner模块与VOYAGER和DEPS在某些方面类似。

VOYAGER使用 GPT-4作为自动课程模块，试图根据探索进度和智能体的状态提出越来越难的任务。它的提示包括：

美妆赛道的“风云突变”

2023是美妆护肤赛道重新洗牌的一年。线上流量的红利期褪去，营销成本越来越高，各大品牌越来越需要打造品牌影响力，调整营销思路和营销手段。

国货美妆品牌风波不断，却在新型营销的加持下卖得更好了。国际大牌因直播惹争议，其后是营销方式的多元化和大牌美妆用户的分层。细分赛道上黑马频出，定制短剧正在成为品牌打造爆品的新方式。

这一整年中，美妆品类赛道出现了哪些变化？有什么样的新趋势？

欧美大牌阵地失守，困中求变

一个明显的趋势是，欧美大牌卖不过国货美妆了。欧美大牌的整体销售额呈现出集体下滑趋势，尤其表现在护肤品类的高端线，国际大牌的“老爆品”打不过国货品牌的“新爆品”。

在今年双十一天猫护肤品销售榜单（按累计GMV排名）中，往年能扛能打的欧美大牌欧莱雅、雅诗兰黛、OLAY、SK-II排名有不同程度的下滑。2022年欧莱雅的天猫销冠宝座被老国牌珀莱雅拿下。而在抖音双十一的品类榜单（按累计销售额排名）中，仅有欧莱雅和雅诗兰黛留在前十，有四个去年上榜的欧美大牌均跌出前十。

今年以来，多个国际美妆品牌的销售业绩在公司集团财报中表现欠佳。雅诗兰黛集团的财报显示，包含中国市场在内的亚洲/太平洋地区的净销售额、净利润从2022年第四季度开始已连续五个季度下滑，2024财年第一季度报则显示，雅诗兰黛的护肤版块净销售额下降了22%。

欧莱雅集团财报显示，2023年第三季度集团在包括中国市场在内的北亚市场的销售额出现下滑，宝洁集团的旗下高端护肤品牌SK-II在今年的业绩报告中多次被指出业绩下滑，为了恢复业绩SK-II采取“提价”策略，这才迎来第四季度的业务增长。

美妆品类赛道的线上营销正在经历转变期。国际大牌在产品和渠道上的弊端在近些年来逐渐显现，而线上的营销不力更是为其“火上浇油”，种种因素综合影响之下促使国际大牌的销售额下降。

以雅诗兰黛品牌为例，雅诗兰黛常年依赖免税渠道进行销售，在国内建立工厂的时机也较晚，在产品的迭代速度、对消费者需求的感知度上都有所欠缺，在线上营销方面也有不足。

根据中国香料香精化妆品工业协会发布的《2023年中国化妆品市场行业发展与消费洞察》显示，2023年中国消费者购买化妆品的主要渠道位于线上，其中综合电商平台占比最高，为69.1%，并提到随着社交电商等新业态模式的发展，线上购买率将进一步提升。

1993年进入中国市场的雅诗兰黛在2021年才宣布在东京建立亚洲第一家工厂，产品则十分依赖免税店渠道进行销售，线下直营的价格通常不具备竞争力，二者时常形成竞争关系。

近年来雅诗兰黛的明星单品价格因渠道原因几度迎来跳水，对品牌形象也造成了一定影响。“小棕瓶”精华、眼霜、智妍面霜先后迎来大降价，曾被消费者调侃“雅诗兰黛小棕瓶降价比我的基金跌得还快。”

针对近年来，国内美妆护肤消费者愈发注重成分、功效、肤质适配等心态变化上，雅诗兰黛品牌整体的反应速度也不如部分国货品牌。不仅错失了敏感肌赛道的布局，也错失了像其他大牌那样将专利成分贯穿到品牌全系列产品，借此提升品牌力和占据消费者心智的机会。而欧莱雅集团就将专利成分“玻色因”推至赫莲娜、巴黎欧莱雅等品牌，抓住了这个机会。

今年8月，雅诗兰黛推出的“SOS闪修精华”在小红书宣传时采用了“建议纳入医保”相关夸张词汇，引起不少相关从业者的吐槽，从业者曾向媒体表示这样的夸张表达不仅反映了品牌对于我国医保集采条款的无知，还具有误导性。相关的笔记虽然在短时间之内就下架，还是对相关产品和品牌形象造成了一定的负面影响。

在上述原因之外，雅诗兰黛集团与宝洁集团缺乏面向大众的产品线也是其销售额下降的原因之一。雅诗兰黛旗下虽拥有20+个品牌，但旗下海蓝之谜、倩碧、Tom Ford、Bobbi Brown、馥马尔等品牌均集中于中高段产品线。宝洁集团则曾经将美妆护肤品牌线集中于SK-II和OLAY两个中高端品牌上。

总的来说，国际大牌的销售额表现不佳并非是一日问题，而是在渠道、产品线布局、营销的变化和敏感度上都有不足，是多方失力的结果。面对消费者心态变化快、竞争日益激烈的美妆赛道，国际大牌需要更加重视市场变化，才能在这个赛道上保持优势。

国货迅猛，抢占“山头”

国产美妆品牌今年来在销售表现上十分亮眼，特别是在今年双十一，珀莱雅强势登上天猫、抖音两个平台护肤品销售榜单的榜首。

品牌营销焕新，国货美妆通过超头主播进行曝光和销售，而是开始重视店播渠道和腰尾部达人，利用短剧植入进行剧情营销成为国货品牌打造爆品的新方式。相对小众的美容仪赛道上也跑出黑马，兴趣电商平台的线上销售渠道成为品牌销售最重要的增长极。

品牌自播爆发和品牌尝试利用短剧进行营销的两个现象一方面反映着品牌不再单方面依赖超头主播，通过店播直播等实现定价自主，采用更加经济、长效、低风险的运营方式，另一方面则反映着观众对内容营销感知的渠道变多了，在兴趣电商平台，品牌通过营销方式的变化抓住流量，增强用户心智的同时成功拓展兴趣人群。

今年最值得关注的就是国货品牌珀莱雅的变化，大单品+店播自播+新营销策略成为珀莱雅提升品牌力和销售额的关键原因。

珀莱雅品牌在今年9月召开的临时股东大会上提到，珀莱雅品牌今年在抖音平台对抖音矩阵号进行了调整，共有5个品牌自播账号，分别对应红宝石系列、双抗系列、源力系列、面膜号和福利社。通过对品牌自播账号的调整，品牌加强了对目标消费人群的筛选，触达更多兴趣人群。

根据热浪数据，珀莱雅品牌号数量13个，今年10月初到11月末开播场次超过570场，上架超过500个SKU，商品销售额高达3.9亿，其中品牌自播销售额占比达33.7%，红人直播销售额占66.2%。在具体操作过程中，珀莱雅官方旗舰店会上架达人的专属链接，在商品数量和赠品组合上做出区分，避免达人与官方直播间竞争低价福利的情况。

珀莱雅除了与广东夫妇、疯狂小杨哥、贾乃亮、陈意礼等头部主播合作，也和嘴哥、米兜妈妈呀、种草大户萌叔Joey等中腰部博主合作，合作的所有红人中粉丝量达到1000万及以上的仅占20.3%，而粉丝量在100万以上1000万以下的达到66.5%。

定制短剧和剧情营销则成为打造新爆品的重要方式。今年双十一登上抖音美妆行业爆款榜榜首的韩束红蛮腰礼盒就是一个例子。今年韩束同银色大地合作先后推出5部定制短剧，其中《以成长来装束》播放量超过6亿，今年3月，韩束直播间实现单月GMV破亿，成功登上品牌自播销量榜单1位。