文 | 王吉伟

春节期间OpenAI推出的AI***模型Sora火出天涯，到处都是文生***模型如何厉害如何改变真实天下的信息，以至于OpenAI在AI Agent方面的最新动向都被粉饰了。

春节前的2月8日，科技媒体The Information宣布OpenAI正开拓两款革命性的Agent软件，个中一款能够有效接管客户的设备来自动实行繁芜的任务。

听说，这个Agent能够自动实行点击、光标移动、文本输入等操作，与人类操作软件无异。
例如，把文档中的数据传输到电子表格中进行剖析，或者自动填写用度报告并将其输入司帐软件，或者根据一定的预算制订行程或预订机票。

这个能够直接操纵个人电脑自动完成各种任务的智能体，现在被更多媒体称作AI Agent 2.0。

这些宣布没有详细解释这款Agent所接管的设备是PC还是手机，不过ChatGPT有移动端，能够在手机或者平板上调用这个Agent是迟早的事。

想要在移动端构建AI Agent的大措辞模型（LLM，Large Language Models）厂商，远不止OpenAI这一家。

去年12月，腾讯与德州大学达拉斯分校互助推出了一个名为AppAgent的项目。
该项目可以通过自主学习和模拟人类的点击和滑动手势，在手机上实行各种任务。

项目地址：https://github.com/mnotgod96/AppAgent

论文地址：https://arxiv.org/abs/2312.13771

包括在社交媒体上发帖、帮助用户撰写和发送邮件、利用舆图、在线购物，乃至进行繁芜的图像编辑。
AppAgent在50个任务上进行了广泛测试，涵盖了10种不同的运用程序。

2月初，阿里巴巴与北京交通大学联合推出了一款全新的手机操作智能体框架Mobile-Agent。
该框架的核心上风在于其纯视觉办理方案。
传统的手机操作办法每每须要依赖XML等标记措辞以及系统元数据，而Mobile-Agent则完备摒弃了这些需求。

项目地址：https://github.com/X-PLUG/MobileAgent

论文地址：https://arxiv.org/abs/2401.16158v1

这意味着，用户无需进行繁芜的设置或修正，只需通过直不雅观的视觉指示即可完成操作。

除了科技大厂，LLM创业团队也推出了相应的Agent项目。
比如在去年12月，清华&智谱AI团队推出的CogAgent-Chat。
CogAgent是一个基于180亿参数规模的视觉措辞模型（VLM）的图形用户界面（GUI）智能体，专注于GUI图形交互界面的理解和导航。

CogAgent利用屏幕截图作为输入，在PC和Android GUI导航任务上超越了基于措辞模型的方法，如Mind2Web和AITW，引领了GUI理解领域的最新技能发展。

论文：https://arxiv.org/abs/2312.08914

代码：https://github.com/THUDM/CogVLM

Demo：http://36.103.203.44:7861/

如今的大措辞模型在详细运用方面都是多端通用，MAS和SaaS模式使得LLM厂商推出的AI Agent构建平台及个体能够运用于手机端也是一定。

AI智能体涌向移动端，已经成为AIGC行业发展的一定趋势。

AI Agent趋势：涌向移动端

系统厂商与终端厂商的步子，乃至频年夜模型厂商迈得还要大。
毕竟他们更贴近用户，理解市场须要什么，也知道自己在哪里打破。

这些厂商对付AI Agent的探索比我们预想得要早很多，且已经拿出初步成果。

也是在春节前夕，微软推出了名为UFO的Windows Agent。
这是一款用于构建用户界面（UI）交互智能体的 Agent 框架，能够快速理解和实行用户的自然措辞要求。

项目地址：https://github.com/microsoft/UFO

技能报告：https://arxiv.org/abs/2402.07939

UFO可以在Windows内自主回答用户查询，可在单个或者跨多个App中无缝导航和操作来知足Windows 操作系统上的用户要求。
可以更加智能地理解用户的意图，不用人工干预，自动实行相应的操作。

如果你想从一份Word文档中提取文本、对照片运用程序中的图像进行不雅观察、以及总结 PowerPoint中的内容，利用所有这些信息撰写一封深度的电子邮件内容并完备自主发送时，你只须要借助一个UFO框架就可以完成。

这意味着，以前须要大量手动事情的跨运用程序事情流程，现在可以直接简化为针对 UFO 的大略自然措辞指令。

UFO，或许会成为下一代Windows系统的核心。
往后搭载windows系统的条记本电脑等移动终端，将会因UFO而开启全新用户体验。

重点在于，其他系统也会效仿Windows，AI Agent将会成为各个别系的标配。

把LLM以及AI Agent装入PC或者移动终端，硬件厂商将其称作AI PC或者AI 手机。

自从LLM能够在端侧支配之后，硬件厂商们就开启了狂飙模式，而LLM的落地运用紧张路子的AI Agent模式也首先进入其法眼。

在2024 CES上，遐想首次提出“智能终端AI OS”，即在AI技能驱动下，智能终端将内嵌个人Agent（智能体）、个人大模型、本地知识库、运用接口，形成下一代AI OS。
并认为，AI技能的打破将在PC、手机、AIoT等所有智能终端产品领域掀起第三次技能革命浪潮，重塑终端体验及家当生态。

据悉，遐想个人Agent或将在4月份与用户见面。

面对新生代AI硬件设备AI pin和Rabbit R1 所展现的“准AI Agent”属性，手机厂商们早已经坐不住，强势展开了对AI智能体的竞赛。

1月份，小米、华为、vivo、空想等几家公司联合清华大学智能家当研究院（AIR）共同发布了一篇个人LLM智能体综述论文（也是一个标准），该论文梳理了个人LLM智能体所需的能力、效率和安全问题，网络并整理了领域专家的见地，还首创性地提出了个人LLM智能体的5级（L1—L5）智能水平分级法。

论文地址：https://arxiv.org/abs/2401.05459

文献库：https://github.com/MobileLLM/Personal_LLM_Agents_Survey

今后各家的智能体处于什么水平，参照这个标准便会一览无余，也为移动终真个Agent构建供应了更多参考方向。
当然，这个标准的推出也意味着厂商们对付移动终端智能体的积极探索与更大的市场需求。

OPPO等推出的AI手机，用户实测后的感触是越来越像Agent，至少已经能够达到上述标准的L2级。

OPPO与IDC在联合发布的《AI手机白皮书》中，还给AI手机下了一个明确的定义。

OPPO还公布1+N智能体生态计策，核心包括OPPO AI超级智能体和AI Pro智能体开拓平台。

个中1指的是AI手机的智能OS，扮演AI时期操作系统的角色，具备传统智好手机不支持的自学习感知能力、长期影象能力和工具调用能力。
它可以与用户专属的智能体、第三方智能体的交互和信息统筹。
N指的便是前面所述的用户智能体和第三方智能体等构成的全新智能体生态。

空想汽车参与这份标准的研究，则映射的是AI Agent适配人车交互场景的广阔市场。
国盛证券在一篇报告中指出，AI Agent面向繁芜任务处理，充分适宜人车交互场景，是数字人的核心演进方向。

座舱智能化时期，用户在驾乘中会有各种个性化需求，数字人被授予更多的施展能力的空间，其义务是通过AI Agent实现AGI向汽车座舱渗透，实现三屏互动（手机屏、车载屏和家用屏）。

而Meta与雷朋互助推出的第二代智能眼镜，接入多模态AI后，也开始向AI Agent”靠拢。
不必再为不同任务选用不同运用程序，只需用日常用语见告设备需求，眼镜就能基于软件获取的信息，为用户作出量身回应。

企服的爆发：Agent渐成标配

科技巨子公司及企业做事厂商，也早在AI Agent移动终真个运用方面下足了功夫。

字节跳动在2月初正式推出了「Coze 扣子」AI Bot 开拓平台。
任何用户都可以快速、低门槛地搭建自己的 Chatbot，且平台支持用户将其一键发布到飞书、微信公众号、豆包等渠道。

除了可以创建自己的Chatbot，Coze官方还供应了Bots 商店和插件。
插件的利用，可以让用户构建的机器人更加强大。

通过Coze构建的机器人，与OpenAI的GPTs类似，紧张用于交互并能够实现一定的业务流程操作，可以算是低级智能体。

其更早推出的豆包，也是一个构建智能体的平台。

钉钉在1月发布的钉钉7.5版本，也是全量上线AI Agent产品“AI助理”。
钉钉平台上的Agent，能够通过钉钉内的企业协同场景，迅速将AI Agent用起来，积累数据。
这个助理拥有真正的实行能力，并非勾留在和用户的交互层面，可以进行信息择要、写事情总结、写文档等通用的办公事情。

用友发布的YonGPT，也能通过高下文影象、知识/库表索引、Prompt工程、Agent实行、通用工具集等扩充大模型的存储影象、适配运用和调度实行能力，再结合财税、人力、供应链、研发等领域的知识和最佳实践扩充大模型专业能力，从而形成体系化的企业做事大模型。

以上这些平台的Agent，凭借SaaS属性，都可以在手机端丝滑利用。

除了以上公司，一些创业公司以及专注超自动化的厂商，也陆续推出了能够运用于移动真个Agent产品。

比如实在智能也推出了手机Agent智能体，只需一句话直接传达自己的意图，就可以帮你操作所有电脑、手机的软件完成各种事情和生活的目标任务，通过自主学习和模拟人类的点击和滑动手势，可以在手机上操作App实行各种任务。

背后的逻辑：发展趋势使然

在很多人还没有弄懂什么是AI Agent的时候，大部分人以为Agent更适宜在PC端实行各种任务的时候，厂商们已经在悄然布局AI Agent在移动真个运用了。

王吉伟频道认为，厂商们之以是急于将AI Agent拓展至移动端，大概有以下几点缘故原由：

用户需求：随着技能的发展，用户对智好手机和设备的期望越来越高，他们希望设备不仅仅是工具，还能成为日常生活的助手。
Agent能够理解用户的须要，并为他们供应个性化做事，改进用户体验。

增强粘性：通过供应Agent做事，可以让用户更频繁地与设备互动，增加用户对品牌的忠实度和设备的利用频率。

竞争上风：随着市场竞争的加剧，厂商须要不断创新以保持竞争力，集成前辈的Agent技能可以作为卖点，吸引消费者购买。

商业模式创新：AI Agent可以开辟新的收入渠道和商业模式，比如通过智能推举系统促进发卖，或者通过订阅做事供应高等功能。

开拓新的收入流：智能Agent每每能够与其他做事或产品相结合，为厂商创造新的收入渠道，如智能家居掌握、电子商务购物、内容订阅等。

提高事情效率：在企业做事领域，AI Agent可以帮助员工处理日常任务，提高事情效率，减少重复劳动，让员工有更多韶光专注于更有代价的事情。

客户做事改进：AI Agent可以供应24/7的客户做事，不仅提高了相应速率，还能够处理大量的客户咨询，提升客户满意度。

除了以上几点缘故原由，还有主要的一点便在于AI Agent行业发展趋势。

毕竟，按照比尔盖茨的不雅观点，AI Agent将彻底改变人们线下和线上的生活办法，改变每个人与打算机的互动办法，还将颠覆软件行业。

就智好手机而言，Gartner在干系报告中的不雅观点认为，天生式AI智好手机配备了硬件和软件功能，能够无缝集成和高效实行智好手机上的Gen AI驱动功能和运用程序。
它们能够在本地运行根本或微调的人工智能模型，产生新的衍生版本的内容、策略、设计和方法。

无疑，这对付提升用户体验以及利用手机提升生产力有着莫大的帮助。

Forrester在干系报告中给出的两组预测数据，也很好地解释了这个趋势。

到2027年，超过60%的个人电脑微处理器将集成设备上的人工智能功能。
随着设备上的人工智能成为标准哀求，这一比例将从2023年的10%上升。

同时，到2027年，智好手机中超过70%的其他运用场置器将集成设备上通用功能，而2023年这一比例为5%，设备上通用将成为一项标准哀求。

处理器集成LLM，将会极大地拓展AI Agent的存在空间，并会进一步提升用户体验。

按照OpenAI CEO奥特曼的说法，Open AI的愿景是让ChatGPT化身“超级智能事情个人助理”，为全能的AGI（通用人工智能）铺路。

显然，包括GPTs在内的AI Agent将会承载这个义务，而移动端Agent才是变革过往生产效率的真正开始。

手机警能体：跨端跨运用处景开启

前文我们不但一次提到了手机上的AI智能体。
能够在手机上运用并实行各种任务的Agent，都可以视作手机Agent\手机警能体。

而AI手机本身，也是一个Agent。
在OPPO AI中央产品总监张峻看来，AI手机不仅有底层硬件的需求，也有OS层面AI化和交互体验的改造，它更像是一个超级智能体。

手机警能体不仅是智能助手的升级版，更是一种新的互动办法。
它们能够感知用户的需求、自主决策实行，乃至学会用户的习气，为用户供应更为个性化的做事。
这种技能的发展将为我们带来更加智能化、便捷和高效的手机体验。

与PC真个Agent类似，目前的手机Agent一样平常分为两种：一种是被钉钉称作交互式的Agent，紧张用于各种笔墨、图片等的天生以及各种问答；另一种是能够直接操作部分生态内业务运用的业务类Agent。
在表现形式上，它们都是软件机器人。

但手机Agent的构建并不一定在手机端，也可以在PC端。

手机Agent的目的是通过在手机上运行Agent程序或者软件去实行各种对付手机的操作，以完成各种办公场景中的任务，以是这个Agent的形态可能便是一个运用，或者是通过APP去调用的某个打包的可实行文件。

事实上，受限于手机访问樊篱门槛加倍变高的趋势，从PC端构建AI智能体是目前TO B领域的主流移动Agent办理方案。
从电脑端触发手机警能体会有更大的上风，更能知足B端客户移动业务实现的需求，并能兼顾用户的事情与生活细节。

在王吉伟频道看来，我们日常事情中的大部分业务流程会分散到多端设备上，构建一个能够跨终真个Agent去处理跨端、跨软件、跨部门的业务流程是非常必要的，也是所有企业及办公职员的刚需。

手机警能体最强的能力展现便是调用手机真个统统运用，一边知足企业用户事情+生活并兼顾用户在各场景中的便利，另一边让个人用户一句话就畅享专属手机警能体助理的知心做事。

此外，由企业做事厂商推出的企业级手机Agent能够做到足够的安全级别，不用担心隐私数据透露等安全隐患。

以实在智能推出“手机+Agent”结合的手机警能体为例，它可以冲破手机App的界线，跨运用操作任何手机软件完成任务。

手机Agent能够通过模拟人类的直不雅观动作来与手机运用程序交互，就像一个真人用户一样，可以查询景象订机票、预约餐厅订位、进行在线购物、编辑图片或制作***，也可以操作办公软件发送邮件、采集业务数据和处理表格、提交事情流程审批单等等，只需一个指令，手机Agent智能体在瞬息间即可帮你完成。

例如，春节开工期间，您正忙于事情，无暇分身向客户发送开工问候，类似于此的重复性事情，在手机警能体的帮助下就可以自动完成，只需对手机说出“向标签为客户的好友发送开工问候”的需求，它就可以识别您的微信标签备注，向该标签下所有客户发送专属问候语，成为你的手机办公助理。

与传统的Siri等智能措辞助手不同的是，这个手机警能体不是大略的命令实行者，而是方案、决策和实行的多面手，通过ISSUT（智能屏幕语义理解技能）视觉能力进行全体操纵过程，无侵入接口，也不须要系统后台访问用户的隐私、敏感数据来实现操作。

此外，PC智能体已经天生的业务流程跟踪，也已经在手机端实现。
比如，企业的高管通过手机警能体就可以轻松获取当日最新掌握台业务剖析数据，节制第一手业务动态，及时将须要关注的动态发送给技能或支持职员等，提高事情的灵巧性和信息反馈效率。

这个逻辑，是用手机去掌握PC端智能体去实行干系的业务操作，这种跨系统、跨终真个连接型操作是基于手机Agent平台构建的Agent所无法实现的。

短短几个月韶光，AI Agent就已经涌向移动终端，手机警能体实现了跨端跨运用、场景联动。
国产厂商对付AI Agent的运用探索，一贯处于潮流前端，真的是难能名贵。

手机警能体未来：终端Agent智能革命

手机警能体将会为大家带来新的互动办法与个性化做事，并带来更加智能化、便捷和高效的手机体验。

未来，随着手机警能体的不断发展，它将会成为更加强大、智能化的存在，成为我们生活的一部分。
当然手机警能体崭露锋芒，也预示动手机和移动终端行业新纪元的到来。

比尔·盖茨认为，AI智能体最令人愉快的影响是它们将使当今对大多数人来说过于昂贵的做事民主化。
并指出，智能体不仅会改变每个人与打算机交互的办法，还将颠覆软件行业，带来自我们从键入命令到点击图标以来最大的打算革命。

现在看来，手机警能体带来的终端Agent智能革命，大概率会承载这一主要的历史义务。