首富从AI浪潮开始 第501节
汤圆的参数量和标注比例不算低了,更别提这个标注的精细程度和质量……
总之感谢韩总。
到章闻铎这里不够了?
“差哪方面的数据?我帮你想办法。”赵文渊说道。
帮遇到困难的下属解决问题是领导的责任,对赵文渊自己是如此,对韩总也是如此,对吧?
反正我先把活儿揽过来,韩总会有办法解决的。
章闻铎看了赵文渊一眼,不知道为什么他连是什么数据都没问就敢大包大揽,这么自信。
但他还是解释道:“是人的数据,确切地说,是人和人之间互动的数据。”
他不解释还好,一解释赵文渊反而不懂了。
现在的标注数据基本都是一对一对的输入和输出,这人和人之间的互动数据是什么意思?
第四百三十二章 多个个体之间的关系
赵文渊虽然现在主要精力都花在管理工作上了,但是他毕竟是正经八百名门出身的机器学习博士,章闻铎的话让他来了兴趣。
章闻铎的组在赵文渊看来属于放养的组,有长远投资的价值,资源给够,只要时不时能出点儿成绩就行了。他们每天具体在研究什么赵文渊并没有特别关注。
“给我具体说说吧,你要这个什么人与人之间的数据,干什么用?”赵文渊问道。
章闻铎看了赵文渊一眼,心里吐槽,合着老板你是对我们研究的方向一点儿不了解啊。
他在电脑上打开了一个文档,然后让出半个身子来让赵文渊能看到。
同时解说道:“经过我们最初的测试,汤圆1.0在意图理解这方面的能力已经非常强了,对于单个用户而言,只要收集到足够的信号,汤圆可以表现出惊人的理解力。由这种理解力衍生出来的共情能力、分析能力甚至是对用户施加影响的能力都是我们最近在测试的范围。”
赵文渊在旁边听着章闻铎的解说,一开始还好,越听越心惊。
什么叫分析能力,什么叫对用户施加影响的能力?
你不知道陪伴型的人工智能聊天工具都下线了吗?防的就是这个对用户施加影响。
更何况从当初源智成立开始,赵文渊和韩路一共同的理念就是,模型只能辅助人做判断,绝不能代替人做判断。
赵文渊没有打断章闻铎,但是在心里暗暗记着,这个事情要拿出来和韩总单独聊一下,在迭代下一代的模型之前,要考虑好怎么给汤圆装好安全阀。
章闻铎完全不知道赵文渊在担心什么,还在继续解说自己的研究:“在验证了汤圆1.0的意图理解使它在人际关系分析方面有非常强的能力之后,我们的研究自然转进了下一个阶段,就是对多个个体之间的关系相互影响后所能达到的最终状态的推理。”
赵文渊不自觉的在脑海中瞬间划过了韩路一、顾司��和苏念念之间的关系,下意识的问道:“比如呢?”
赵文渊虽然佩服韩路一经商做战略的能力,但是却对他处理和异性关系的能力不敢苟同。
哪像他赵文渊,万花丛中过,片叶不沾身。
章闻铎皱了皱眉,又看了赵文渊一眼,心想,我不是已经表述的很清楚了吗?还要我怎么解释呢?
但是毕竟是老板,章闻铎沉吟了一下,还是说道:“我们假设有一个团队,一共有ABC三个人,要共同完成一个项目。这三个人中,A看不起B,B不信任C,A和C又私交不错。所以在开始的时候,B会自然的恐惧自己被A和C联合起来孤立,而B在这种压力下就会改变自己的行为,可能会向A或者C靠拢。随着他们之间关系的改变,A和C之间也会进行不同的应对,也就是说,在这个极度简化的三人组合里,任何一个人的改变都会影响到其他两个人,进而其他的人改变又会影响到他本身。我们想研究的就是汤圆对这种情况的处理能力。”
赵文渊听明白了。
他本人对ReAct模式有很深的研究,更是思维链模式的先驱,知道这种一步一步进行推理的能力对模型既是挑战,也是提升其能力上限的一种方式。
但是不管是思维链还是ReAct,在赵文渊过去的研究中,更多考虑的是人机之间的互动,都可以假定外部条件是相对稳定的。
而章闻铎刚才提出的问题有一个明显更难的挑战,就是反身性。
一个个体做出的行为会影响其他个体,进而对其本身造成影响,这里面涉及到的计算量增加是指数级的。当然,真的进行运算的时候,肯定会在算法中进行运算的剪枝,但这不会改变问题本身复杂的本质。
想到这,赵文渊马上就想到了一个问题。
“终止条件呢?”赵文渊问道,“在传统的模型输出中我们都会有终止字符,当前面的词元最终推出的结果指向终止字符时,输出就终止了。但是你刚才提到的这种,多人互动的关系,如果他们之间的状态转移函数不收敛呢?”
章闻铎又看向赵文渊一次,这次他的目光里带着点儿钦佩的意思了。
赵总,很敏锐啊。
“您问到点子上了,不是可能不收敛,从我们测试过的场景来看,大部分情况下这种计算都不会收敛,甚至时间越长,发散的程度越高,所以我们现在的做法是限制计算步骤,不追求计算最终情况。”章闻铎说道。
“如果是这样的话,为什么会有准确性的问题?”赵文渊不解的问,“这个问题虽然复杂,但是限定了步长的情况下,总是算的出来的吧?你刚才也说了,汤圆本身就善于进行这种运算。”
“赵总,我刚才举的这个三人例子是极度简化的。实际上的群体互动个体数会远远比这个数字多。”
“你想算多大的?”赵文渊问道。
章闻铎想了想,说道:“我们现在测试卡在几万个个体这个量级了,但是如果可能的话,我希望能做到十亿到百亿级。”
如果不是赵文渊今天手里没咖啡,他能当场喷出来。
百亿级的人类个体互动模型,章博士,你不如说你想预测全人类好了?
这是缺乏数据的问题吗?
你把全世界的算力都加起来也不可能够算啊!
“不对,你不是在研究世界模型吗?”赵文渊突然反应了过来。我们刚才讨论了这么半天,和世界模型到底有什么关系啊?
章闻铎说道:“是啊,就是世界模型啊,您看。”
赵文渊这才有空看向章闻铎刚才就打开的文档,只见文档的标题上就写着����
《社会世界模型》。
赵文渊的嘴角微微抽了抽。
我以为给你一百多张卡,你会去做点儿更有用的事情呢。
“所以,研究这个东西有什么用?”赵文渊问道。
“这个����我也不知道呢。”章闻铎挠了挠头,说道。
做研究,哪有因为有用才做的,不都是因为好玩吗?
第四百三十三章 一事不烦二主
结束了和章闻铎的晨间闲聊,赵文渊回到自己的院长办公室里。
不得不说,章闻铎这个初出茅庐的新人给了科研老炮儿赵文渊一点儿小小的震撼。
真是初生牛犊不怕虎啊,啥都敢算。
百亿个体的群体互动行为预测,让你当拉普拉斯好不好?
吐槽归吐槽,赵文渊又忍不住思考起来,如果真的要往这个方向研究,有什么具有可行性的办法?
首先肯定是聚类。
说是百亿个个体,但是在对待特定的话题上,人和人的差距并没有那么大。
真的细分起来,无非就是支持、反对、观望这么几种,能做出的行动可能更多一些,但是也是有限状态机。
所以在计算过程中即使要表示一百亿个个体的状态,也完全可以用低几个数量级的向量来进行表示。
还有就是章闻铎说的数据的问题。
这里的挑战和之前训练汤圆时所面临的挑战又不一样了,意图理解需要的是高质量的标注,但是群体行为预测要的却是信号的维度完整性。
一个人会做出什么行为,这本身就是一个非常复杂的决策过程,是多个因素共同作用的结果。
人类很容易进入的谬误就是简单归因谬误,模型同样如此。
比如女人工作一天下班回家,发现老公正坐在沙发上愁眉苦脸。
她第一时间就以为对方是对自己不满,两人大吵一架。
但她完全没有想到,真实的原因是老公喜欢的球队在比赛最后一分钟被人绝杀了。
这就是简单归因谬误,女人在进行推理的时候没有收集到球赛胜负这个关键信号,导致了归因错误。
同样的道理,想要训练世界模型,就要确保在训练数据中的因果对是准确的,这里的因可能包含多个维度,但在现实世界中这种数据最难收集,很多时候数据提供者本身都不知道自己在哪里接触的什么信息导致了自己的行为。
不知道这种数据韩总有没有办法啊……
想着想着,赵文渊猛地一拍脑袋。
被小屁孩给带歪了,这不是现在最紧要的问题。
赵文渊看了看今天的日程,一会儿还有个访客要来。
是之前在参加黎严的饭局的时候机缘巧合认识的一个医学赛道创业者,江九思。
他当时因为对寻他的雕龙系列模型的能力感到不满,主动找上了赵文渊和韩路一,希望能使用当时还没开放API的汤圆模型。
这也是汤圆在医疗行业落地探索的第一个场景。
只是不知道他今天来为的是什么事。
说曹操曹操就到赵文渊正在想着,敲门声响了。
“赵总,江河医学的江总到了,我下去接一下?”是赵文渊新招的秘书方芳的声音。
“嗯,接上来之后直接来我这吧。”
几分钟之后,方芳再次敲门。
“请进。”赵文渊一边起身一边朗声说道。
办公室的门打开,江九思走了进来。
上一篇:这个导演不讲规矩
下一篇:我在中东造军火,被全球通缉?
