让我们猜猜看,下一代操作系统和三方应用会是什么样?

类似于gpt4o这种多模态实时大模型AI,最适合的硬件载体不是手机,而是AR眼镜。预测一下,google glass会不会复活?

就像smart phone取代pc,进入移动互联网时代,LLM也将带来新一代的操作系统和应用:

1、以VR眼镜为主要硬件载体

2、LLM将作为操作系统级底层,以agent思想为核心,交互设计以多模交互为主(眼镜摄像头、麦克风、手势识别、基于AR的互动),memory有保存至本地的,也有cloud端的,总之会记录用户的各种关键信息,7x24私人助理,贴身还懂你。

3、操作系统之上的应用层,分为action和agent两类。action部分,比如计算器、天气、记事本,是传统的编程模式,输入输出非常明确的硬编码,不涉及LLM。agent是更智能的部分,一个个垂直的专家,比如电子化办公的、编程的、设计的,agent由LLM驱动,用ReAct方式调用action,进一步解放人脑。

操作系统的agent是超级大管家,和人类接触的入口,超级大管家接受用户指令后调用action或其他专家agent。os层面内置了一些action和agent,同时也支持调用三方公司提供的action和agent。

action有带GUI界面的,也有纯api的,比如返回个json什么的。而agent才是终极形态,比如说,旅行网站可以提供一个旅行agent。当用户向操作系统的大管家agent说“请帮我安排一下下周四去东京的旅游行程”,大管家agent会向用户询问一些细节,几个人去啊,预算多少啊什么的,然后调用旅行专家agent(比如携程提供的agent),旅行专家会给出几个具体方案给管家agent,比如机票、酒店、旅游线路、时间行程排、费用明细之类,然后让用户确认。用户可以追加细节,旅行agent调整方案,反复几轮后,确定了详细计划。用户确认后,机票、酒店、门票等等自动下单,系统自带的用户日程自动更新,到点提醒。

这里的关键点就在于用户由“员工”变成了“boss”,只需要发出指示,然后等agent给出详细方案,再批示接受哪个方案,只做选择题和判断题。

os层面向三方开发者提供的sdk,本质上和之前的时代并无不同,最大的区别在于action多了api这种形式,而agent则需要调用LLM。至于多模交互方面,一定会弱化GUI,强化语音和手势,毕竟LLM时代的os,硬件可能是任何形式,不一定带键盘和屏幕。

以上纯猜想,3、5年内应该就能判断这个猜想离不离谱了。现在做通用大模型的公司,未来是有机会角逐操作系统级竞争的(鸿蒙加油,百度加油)。做各行业应用的,赶紧研究下LLM编程,准备下api接口和agent,早做准备,未来这个方向肯定又有一波流量红利和程序员稀缺行情,参考2010、2011年的移动互联网。而做垂直大模型的,你们自求多福吧,方向一定错了。。。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,884评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,347评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,435评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,509评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,611评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,837评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,987评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,730评论 0 267
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,194评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,525评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,664评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,334评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,944评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,764评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,997评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,389评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,554评论 2 349

推荐阅读更多精彩内容