很多人都在思考，LLM-based时代的本文作者：唐霜，转载请注明出处。【版权所有，侵权必究】应用应该怎么去开发。然而，时代的惯性会束【访问 www.tangshuang.net 获取更多精彩内容】原创内容，盗版必究。缚我们的思维，就像iphone颠覆式出现【访问 www.tangshuang.net 获取更多精彩内容】著作权归作者所有，禁止商业用途转载。一样，在它成为市场主流之前，我们根本想不著作权归作者所有，禁止商业用途转载。转载请注明出处：www.tangshuang.net出在手机屏幕上的软件会如此不同。这让我想【原创内容，转载请注明出处】【版权所有，侵权必究】到那句著名的论断，汽车出现之前，人们对交本文作者：唐霜，转载请注明出处。本文版权归作者所有，未经授权不得转载。通工具的究极想象都是围绕马展开，给马带上本文版权归作者所有，未经授权不得转载。【本文受版权保护】昂贵的装备，给马车装上牛逼的助推器，而当【版权所有，侵权必究】【原创不易，请尊重版权】汽车出现时，人们才恍然大悟，原来交通工具【版权所有】唐霜 www.tangshuang.net【未经授权禁止转载】可以不需要马。AI时代的到来，新的iph【版权所有，侵权必究】本文作者：唐霜，转载请注明出处。one时刻，是否会改变人们使用信息技术的【转载请注明来源】转载请注明出处：www.tangshuang.net方式？人机的交互方式，还会永远和当下一样本文作者：唐霜，转载请注明出处。【原创不易，请尊重版权】吗？计算机上的各种功能，将会以怎样的方式【原创不易，请尊重版权】原创内容，盗版必究。在我们的工作和生活中提供能力？本文将详细本文作者：唐霜，转载请注明出处。【本文首发于唐霜的博客】聊一聊这个话题。
【本文首发于唐霜的博客】转载请注明出处：www.tangshuang.netLLM是基础设施
前段时间，英伟达发布了自己的本地大模型服本文版权归作者所有，未经授权不得转载。【关注微信公众号：wwwtangshuangnet】务，购买它的显卡，可以直接在硬件上运行一【转载请注明来源】未经授权，禁止复制转载。个LLM。马斯克开源了迄今为止开源界参数【作者：唐霜】【作者：唐霜】最大的Grok，有人将它的源代码整理成一【关注微信公众号：wwwtangshuangnet】【关注微信公众号：wwwtangshuangnet】个可视化的3D模型，用以演示Grok的神【关注微信公众号：wwwtangshuangnet】【原创内容，转载请注明出处】经网络，人们发现Grok的架构如此复杂，本文版权归作者所有，未经授权不得转载。未经授权，禁止复制转载。层数如此之多，以完全超出现代工程的人力承【关注微信公众号：wwwtangshuangnet】【版权所有】唐霜 www.tangshuang.net受范围。大语言模型已经成为一种价格昂贵但转载请注明出处：www.tangshuang.net转载请注明出处：www.tangshuang.net唾手可得的基础设施。
【关注微信公众号：wwwtangshuangnet】原创内容，盗版必究。去年大家都在讨论LLM的能力涌现，例如推未经授权，禁止复制转载。原创内容，盗版必究。理能力，当然，也无法避开它的幻觉。然而，【访问 www.tangshuang.net 获取更多精彩内容】本文作者：唐霜，转载请注明出处。今年，世界似乎已经发生了翻天覆地的变化。【未经授权禁止转载】【转载请注明来源】市场上的大模型应用越来越多，但目前来看，转载请注明出处：www.tangshuang.net本文作者：唐霜，转载请注明出处。很多都是类Chat类应用，要说出现井喷式本文作者：唐霜，转载请注明出处。【原创不易，请尊重版权】爆发，还为时尚早。
【转载请注明来源】【原创不易，请尊重版权】【关注微信公众号：wwwtangshuangnet】未经授权，禁止复制转载。当然，现在仍然有非常多的人对LLM的理解【访问 www.tangshuang.net 获取更多精彩内容】未经授权，禁止复制转载。还停留在ChatGPT的形式上，他们把大未经授权，禁止复制转载。【原创不易，请尊重版权】模型等同于和ChatGPT形式一模一样的【未经授权禁止转载】本文版权归作者所有，未经授权不得转载。聊天机器人。只有较少的人会把LLM理解为【本文首发于唐霜的博客】本文作者：唐霜，转载请注明出处。更底层的工具，它用以支撑和驱动新能力的开本文版权归作者所有，未经授权不得转载。【版权所有】唐霜 www.tangshuang.net发，这类工具我们常常称为框架。简单讲，框本文版权归作者所有，未经授权不得转载。著作权归作者所有，禁止商业用途转载。架就是一系列工具的集合，以提升开发效率，【关注微信公众号：wwwtangshuangnet】【访问 www.tangshuang.net 获取更多精彩内容】让开发形成一种范式。而在AI领域做应用开【原创内容，转载请注明出处】本文作者：唐霜，转载请注明出处。发，在LLM之前有各种模式，现在LLM已转载请注明出处：www.tangshuang.net【转载请注明来源】经一统江湖，任何的AI应用，都可以用LL【关注微信公众号：wwwtangshuangnet】【原创不易，请尊重版权】M来开发，这让我们的智能化应用（或者说需原创内容，盗版必究。未经授权，禁止复制转载。要智能化的功能）开发变得极为简单了。
本文作者：唐霜，转载请注明出处。【原创内容，转载请注明出处】转载请注明出处：www.tangshuang.net举个例子，前几天，我在公众号 wwwta【版权所有】唐霜 www.tangshuang.net【本文首发于唐霜的博客】ngshuangnet 中讲了自己利用A未经授权，禁止复制转载。本文版权归作者所有，未经授权不得转载。I来设计自己的DSL，里面除了借助cha本文版权归作者所有，未经授权不得转载。转载请注明出处：www.tangshuang.nett来获得灵感外，另一个重要的点，就是直接【原创不易，请尊重版权】著作权归作者所有，禁止商业用途转载。利用LLM将自然语言生成DSL。
【关注微信公众号：wwwtangshuangnet】【版权所有】唐霜 www.tangshuang.net著作权归作者所有，禁止商业用途转载。
这在以前几乎是不可能的，也就意味着如果用本文作者：唐霜，转载请注明出处。原创内容，盗版必究。户没有掌握平台定制的DSL，就无法使用某【作者：唐霜】【本文首发于唐霜的博客】些功能，而在LLM成为基础设施之后，我们【访问 www.tangshuang.net 获取更多精彩内容】著作权归作者所有，禁止商业用途转载。的开发更加贴近用户，更容易把用户的想法放【版权所有】唐霜 www.tangshuang.net原创内容，盗版必究。到产品中去执行。而在这个过程中，我们甚至【原创不易，请尊重版权】【关注微信公众号：wwwtangshuangnet】可以减少编程中间过程，因为现在很多大模型本文版权归作者所有，未经授权不得转载。原创内容，盗版必究。都有了直接执行代码的能力（functio本文作者：唐霜，转载请注明出处。未经授权，禁止复制转载。nal calling）。这也代表着，必【作者：唐霜】【原创内容，转载请注明出处】须一个字一个字准确编程的时代过去了，新的本文版权归作者所有，未经授权不得转载。【本文受版权保护】基于LLM的编程，可以在模糊的表达下完成本文作者：唐霜，转载请注明出处。未经授权，禁止复制转载。编程过程，因此，也有人说，“面向对象”将【关注微信公众号：wwwtangshuangnet】本文版权归作者所有，未经授权不得转载。会消失，“面向目标”将会爆发，以描述目标本文作者：唐霜，转载请注明出处。【未经授权禁止转载】（而非机器执行）为编程内容的范式会逐渐兴【本文首发于唐霜的博客】本文作者：唐霜，转载请注明出处。起，这和SQL的设计极为相似，恰巧的是，【版权所有，侵权必究】原创内容，盗版必究。有一个叫Chat2DB的项目，可以实现智转载请注明出处：www.tangshuang.net【转载请注明来源】能的数据查询和报表能力，直接用自然语言替原创内容，盗版必究。【本文受版权保护】代了SQL。
著作权归作者所有，禁止商业用途转载。【访问 www.tangshuang.net 获取更多精彩内容】【本文首发于唐霜的博客】本文版权归作者所有，未经授权不得转载。此外，LLM自身的封装性良好，这也就意味本文作者：唐霜，转载请注明出处。未经授权，禁止复制转载。着，我们切换底层框架的灵活性大大提升。当【未经授权禁止转载】【版权所有】唐霜 www.tangshuang.net我们发现更好更智能的LLM的时候，我们可【版权所有，侵权必究】本文版权归作者所有，未经授权不得转载。以用非常小的代价切换底层设施到新的依赖上著作权归作者所有，禁止商业用途转载。【本文首发于唐霜的博客】，这也使得我们的架构设计更加灵活，安全性【原创内容，转载请注明出处】【版权所有】唐霜 www.tangshuang.net更强，可持续迭代的能力更可靠。
著作权归作者所有，禁止商业用途转载。【转载请注明来源】【原创内容，转载请注明出处】转载请注明出处：www.tangshuang.netAgent是AI时代的主角
之前的文章中，我有讲过，Agent作为A【转载请注明来源】【作者：唐霜】I时代功能搭建的基本单位，会出现真正的百【作者：唐霜】【转载请注明来源】花齐放。在移动互联网时代，APP是我们享受信息网转载请注明出处：www.tangshuang.net本文版权归作者所有，未经授权不得转载。络的入口，而到了AI时代，Agent就会【原创不易，请尊重版权】著作权归作者所有，禁止商业用途转载。替代APP，成为新时代的信息网络入口。
未经授权，禁止复制转载。【本文首发于唐霜的博客】AI时代的核心使命，是极速的提升人们获取【作者：唐霜】本文版权归作者所有，未经授权不得转载。信息的效率和质量。人类获取信息的模式经历本文作者：唐霜，转载请注明出处。【未经授权禁止转载】了很多次变革，从口口相传到结绳记事，从档未经授权，禁止复制转载。著作权归作者所有，禁止商业用途转载。案文书到信息管理，今天，我们将面临着走向转载请注明出处：www.tangshuang.net本文作者：唐霜，转载请注明出处。知识管理的终极——智慧发掘。LLM-ba未经授权，禁止复制转载。原创内容，盗版必究。sed AI把这种信息获取的难度拉的极低著作权归作者所有，禁止商业用途转载。【原创不易，请尊重版权】，以前我们要了解一个知识，需要从一部百科本文版权归作者所有，未经授权不得转载。【原创内容，转载请注明出处】全书图书中去查找，效率和质量都很低，而在【原创不易，请尊重版权】【作者：唐霜】LLM的加持下，我们可能只需要10秒钟就本文作者：唐霜，转载请注明出处。【本文受版权保护】可以获得高质量的知识内容。接下来的时代，【原创内容，转载请注明出处】【转载请注明来源】我们需要把这一智能利用往前推一部，让人类转载请注明出处：www.tangshuang.net原创内容，盗版必究。突破信息传递的次元壁，能够让人类借助AI未经授权，禁止复制转载。本文版权归作者所有，未经授权不得转载。的力量，在有限的人类脑力前提下，获得最大未经授权，禁止复制转载。未经授权，禁止复制转载。程度的智力加持。
【访问 www.tangshuang.net 获取更多精彩内容】【原创不易，请尊重版权】转载请注明出处：www.tangshuang.net过去，我们有一个说法，手机是人类身体长出【版权所有】唐霜 www.tangshuang.net本文版权归作者所有，未经授权不得转载。来的第三器官。因为人类已经无法离开手机了著作权归作者所有，禁止商业用途转载。【原创内容，转载请注明出处】，所以它就像器官一样被我们需要和使用。而【版权所有，侵权必究】转载请注明出处：www.tangshuang.net我相信，AI会成为人类的第二大脑，同时，【本文首发于唐霜的博客】【本文首发于唐霜的博客】人类还会长出第四器官。作为第三器官，手机【原创不易，请尊重版权】转载请注明出处：www.tangshuang.net智能在虚拟层面帮助人们解决一些效率问题，【本文首发于唐霜的博客】【本文首发于唐霜的博客】作为第四器官，Agent将会借助各种硬件本文作者：唐霜，转载请注明出处。转载请注明出处：www.tangshuang.net，直接在现实中增强人类的生理极限。过去，【未经授权禁止转载】【版权所有】唐霜 www.tangshuang.net让人长出第三只手，或者让人长出一对翅膀，【版权所有，侵权必究】【本文受版权保护】人类的大脑是无法承受的，过去通过脑电波的【未经授权禁止转载】著作权归作者所有，禁止商业用途转载。形式来实现人体外肢的实践，即使再过几十年【作者：唐霜】【转载请注明来源】也不会有大的进展。而在大模型加持下，自适未经授权，禁止复制转载。【原创内容，转载请注明出处】应的外肢并不需要大脑的直接控制，而是可以著作权归作者所有，禁止商业用途转载。未经授权，禁止复制转载。由大模型为大脑的AI系统控制，与人体的其【版权所有】唐霜 www.tangshuang.net【本文受版权保护】他系统协调工作，就像人的淋巴系统、内分泌【本文首发于唐霜的博客】【原创内容，转载请注明出处】系统一样，与大脑协调工作。
【本文首发于唐霜的博客】本文作者：唐霜，转载请注明出处。【作者：唐霜】未经授权，禁止复制转载。AI系统是由Agent作为最小单元分工协【版权所有，侵权必究】本文作者：唐霜，转载请注明出处。作构成的，我们需要井喷式的Agents来【版权所有】唐霜 www.tangshuang.net【转载请注明来源】为我们的创意提供原材料，就像开放世界游戏【原创内容，转载请注明出处】【原创不易，请尊重版权】一样，只有当能满足我们创意的原材料都具备本文作者：唐霜，转载请注明出处。【作者：唐霜】的时候，我们才能快速实现它，而当下，Ag【作者：唐霜】【原创内容，转载请注明出处】ent还是太匮乏。
【本文受版权保护】转载请注明出处：www.tangshuang.net本文版权归作者所有，未经授权不得转载。【转载请注明来源】我认为很多人把Agent的设计看的太过复本文版权归作者所有，未经授权不得转载。原创内容，盗版必究。杂，我认为Agent就是非常简单的输入输本文版权归作者所有，未经授权不得转载。【原创不易，请尊重版权】出模式，对于我们现有的很多功能，都是可以转载请注明出处：www.tangshuang.net【关注微信公众号：wwwtangshuangnet】重新设计为Agent的，甚至有时候不一定【作者：唐霜】【作者：唐霜】需要LLM，只要它能按照某种Agent协著作权归作者所有，禁止商业用途转载。【本文首发于唐霜的博客】议，实现输入输出接口，就可以被用到AI系【转载请注明来源】转载请注明出处：www.tangshuang.net统中，作为组成宏大目标的一部分。
未经授权，禁止复制转载。本文作者：唐霜，转载请注明出处。【作者：唐霜】【作者：唐霜】
这个图是我提出来的一种设计模式，感知Ag【版权所有】唐霜 www.tangshuang.net转载请注明出处：www.tangshuang.netent和行动Agent本身通过事件协议与本文作者：唐霜，转载请注明出处。本文作者：唐霜，转载请注明出处。中枢部分沟通，通过端口与外界的硬件、软件原创内容，盗版必究。【未经授权禁止转载】联系。一旦这种通用的协议形成共识，我们的【访问 www.tangshuang.net 获取更多精彩内容】【原创内容，转载请注明出处】Agent市场将会很快丰富起来。有了足够【转载请注明来源】【转载请注明来源】多的Agent，我们接下来要办的事，就是【原创不易，请尊重版权】【版权所有】唐霜 www.tangshuang.net让这些Agent能够协同工作。
未经授权，禁止复制转载。【转载请注明来源】Agent Workflow会是终极吗？
工作流是串联一系列单元，使它们能够按照开【版权所有，侵权必究】【关注微信公众号：wwwtangshuangnet】发者目标完成动作的有效方式。这些工作单元【作者：唐霜】本文作者：唐霜，转载请注明出处。，如果独立去看，可能与我们最终的目标相去【版权所有】唐霜 www.tangshuang.net转载请注明出处：www.tangshuang.net甚远，但是我们通过工作流，把这些看上去相本文版权归作者所有，未经授权不得转载。【关注微信公众号：wwwtangshuangnet】去甚远的单元组织在一起，有效的分配任务，【未经授权禁止转载】【关注微信公众号：wwwtangshuangnet】就可以实现我们自己的目标。世界上很多事情【本文受版权保护】【转载请注明来源】都是这样，看上去相去甚远的部件，可能在系【作者：唐霜】【未经授权禁止转载】统中起着关键作用，就像制作钓鱼竿的碳纤维转载请注明出处：www.tangshuang.net【版权所有】唐霜 www.tangshuang.net材料成为我国航天公关中的关键突破，就像我【本文受版权保护】【原创不易，请尊重版权】们平时写的代码分看来每个语法都平平无奇，本文版权归作者所有，未经授权不得转载。【未经授权禁止转载】组合在一起却功能强大。
【版权所有】唐霜 www.tangshuang.net原创内容，盗版必究。对应到我们的编程中，Workflow就是未经授权，禁止复制转载。本文版权归作者所有，未经授权不得转载。架构，即用以实现我具体目标的整体AI工作【作者：唐霜】【未经授权禁止转载】系统，与构成该系统的Agent工作单元之原创内容，盗版必究。【版权所有，侵权必究】间的交互、联系、调度等等。
【关注微信公众号：wwwtangshuangnet】【版权所有，侵权必究】前几天，我看到一则消息，国外某实验室正在【原创内容，转载请注明出处】本文版权归作者所有，未经授权不得转载。尝试让AI训练AI。当我们允许AI在解决转载请注明出处：www.tangshuang.net本文作者：唐霜，转载请注明出处。我们提出的具体需求时，且它自己认为自己无【版权所有】唐霜 www.tangshuang.net原创内容，盗版必究。法满足该需求的情况，可以通过训练一个具有未经授权，禁止复制转载。本文作者：唐霜，转载请注明出处。针对性的AI来解决该问题时，AI就实现了自举。当这一现象产生时，意味着真正的AGI时转载请注明出处：www.tangshuang.net本文作者：唐霜，转载请注明出处。刻到来了。那么这里有个问题，AI训练AI转载请注明出处：www.tangshuang.net未经授权，禁止复制转载。是我们的设定，还是AI自己的决策呢？如果本文版权归作者所有，未经授权不得转载。【版权所有】唐霜 www.tangshuang.net在我们的设计中，没有这种设计，AI是否有【版权所有】唐霜 www.tangshuang.net本文作者：唐霜，转载请注明出处。能力自己想到要去训练一个AI来解决具体问本文作者：唐霜，转载请注明出处。【原创不易，请尊重版权】题？
【未经授权禁止转载】转载请注明出处：www.tangshuang.net所以，当我们去设计Agent工作流时，我【关注微信公众号：wwwtangshuangnet】著作权归作者所有，禁止商业用途转载。们应该换一个角度，即每一个Agent都是未经授权，禁止复制转载。原创内容，盗版必究。一个举足轻重的角色，就像工作中的同事，如【版权所有，侵权必究】【未经授权禁止转载】果屏蔽了具体形象，只要它能完成工作流中的【关注微信公众号：wwwtangshuangnet】转载请注明出处：www.tangshuang.net环节任务，那么无论他有没有实体生命，都需【未经授权禁止转载】【访问 www.tangshuang.net 获取更多精彩内容】要在工作中被平等看待。
【版权所有】唐霜 www.tangshuang.net【访问 www.tangshuang.net 获取更多精彩内容】【本文受版权保护】
上图是一种拟人化的Agent工作流设计，【原创内容，转载请注明出处】本文作者：唐霜，转载请注明出处。这种设计把Agent作为工作环节上的角色本文版权归作者所有，未经授权不得转载。【本文受版权保护】，完成特定工作内容。虽然这些角色可以由人【未经授权禁止转载】【原创内容，转载请注明出处】来代替，但是我们现在是在讨论AI系统，我著作权归作者所有，禁止商业用途转载。【关注微信公众号：wwwtangshuangnet】们作为用户，期望得到的是结果。
【版权所有】唐霜 www.tangshuang.net【转载请注明来源】从上面的设计来看，AI系统本身并不具备自著作权归作者所有，禁止商业用途转载。著作权归作者所有，禁止商业用途转载。举的潜力，因为我们往往只会根据当下的业务【原创内容，转载请注明出处】【版权所有】唐霜 www.tangshuang.net需要来设计工作流。即使我们在工作流环节中未经授权，禁止复制转载。本文作者：唐霜，转载请注明出处。，允许AI进行AI训练，也会是把AI训练【未经授权禁止转载】本文版权归作者所有，未经授权不得转载。交给具体的Agent来完成，而Agent【未经授权禁止转载】转载请注明出处：www.tangshuang.net本身并不是主动决策自己要进行AI训练，它【版权所有】唐霜 www.tangshuang.net本文作者：唐霜，转载请注明出处。更多的是承担“人力”而非“人才”的角色。未经授权，禁止复制转载。【原创不易，请尊重版权】至于整套系统来说，就更不存在自己训练AI【原创不易，请尊重版权】原创内容，盗版必究。的说法。（当然，我们并不排除有人就是要设【原创不易，请尊重版权】【转载请注明来源】计一个可以训练AI的AI系统，而且据我所本文作者：唐霜，转载请注明出处。【版权所有】唐霜 www.tangshuang.net知，现在头部的大厂们，确实就是在用AI来著作权归作者所有，禁止商业用途转载。【版权所有】唐霜 www.tangshuang.net训练大模型。）
【未经授权禁止转载】转载请注明出处：www.tangshuang.net【本文首发于唐霜的博客】【转载请注明来源】结语
本文从思考AI时代的人机交互形式出发，提【关注微信公众号：wwwtangshuangnet】【转载请注明来源】出了AI时代的Agent等效于移动互联网著作权归作者所有，禁止商业用途转载。【未经授权禁止转载】时代的APP的观点。手机上的APP是软件本文版权归作者所有，未经授权不得转载。【本文受版权保护】，而Agent则不局限于软件，还可以是硬【版权所有，侵权必究】【未经授权禁止转载】件等。过去我们比较关注代码实现，“面向对【原创不易，请尊重版权】本文作者：唐霜，转载请注明出处。象”是最流行的编程范式。但在以LLM为基未经授权，禁止复制转载。【原创内容，转载请注明出处】础设施的时代，我们可以大幅减少对代码实现【原创不易，请尊重版权】未经授权，禁止复制转载。的依赖，比如一些算法、提取、转化、分析等本文版权归作者所有，未经授权不得转载。【版权所有，侵权必究】，一起我们可能需要写大段代码，甚至搭建一【原创不易，请尊重版权】【访问 www.tangshuang.net 获取更多精彩内容】套系统来实现，而现在，基于LLM的能力，【原创内容，转载请注明出处】【作者：唐霜】可以直接获得结果。目前来说，其实我们的L【关注微信公众号：wwwtangshuangnet】著作权归作者所有，禁止商业用途转载。LM基础设施已经很强了，比较欠缺的是Ag【未经授权禁止转载】【转载请注明来源】ent，现在的Agent实在是太少了，想本文作者：唐霜，转载请注明出处。【关注微信公众号：wwwtangshuangnet】要构建AI系统，任何功能（Agent）都【作者：唐霜】【关注微信公众号：wwwtangshuangnet】需要自己从0去造。当然，或许这也是机会。
【版权所有】唐霜 www.tangshuang.net【未经授权禁止转载】转载请注明出处：www.tangshuang.net2024-04-01 3005
