科技无垠

辰小序

首页 >> 科技无垠 >> 科技无垠最新章节(目录)
大家在看 大国相 战神变 大泼猴 星戒 后手 民国谍影 扎纸人 特种兵痞在都市 神煌 完美人生 
科技无垠 辰小序 - 科技无垠全文阅读 - 科技无垠txt下载 - 科技无垠最新章节 - 好看的其他类型小说

第7章 这究竟会训练出个什么玩意儿?

上一章 目 录 下一页 阅读记录

“ChatGPT你知道吧?‘言心’也是一个语言模型,跟ChatGPT的差别就是,相比之下,‘言心’更擅长中文语料。”

这个话题一旦展开,是怎么也绕不过去现今大火的聊天机器人ChatGPT的,ChatGPT推出2个月即拥有1亿月活用户,在消费者应用程序里,它是历史上最快达到这个数字的。

如今,它就是聊天机器人的标杆产品,火的一塌糊涂。

“ChatGPT的三代模型的核心架构都是Transformer,从本质上讲,它依然是基于海量数据的延伸,并没有新的颠覆性技术,也没有从本质上超出现有的技术。”

说起ChatGPT,程旭对此很不以为然——现阶段,人工智能的理论并没有新的进展,谁强并不是强在理论先进、技术高超上,而是强在硬件实力、强在算力堆积上。

换句话说,就是钱——就拿ChatGPT来说,它训练一次几乎就差不多需要三千万人民币以上的资金。

更别说每年的运营,据估算,每年仅是CPU和GPU的成本就能达到十亿人民币这个级别,再加上其他的费用,这真的不是一般企业能够承受的住的。

哪怕是千寻这样的巨头搜索企业,搞出“言心”这个语言模型,也是持续投入了十年以上,每年的投入几乎是整个千寻科技利润的五分之一——这绝对是一个惊人的数字。

“但微软是真的舍得投钱啊,十亿美金十亿美金的,钱跟不是钱似的往里投资。”

说着的时候,潘正甚是羡慕:“他们甚至给OpenAi团队配了一台性能极为强悍的超算,看着就让人眼红。”

“千寻科技的投入也不差吧?而且以后肯定还会越来越重视。毕竟现在GPT已经开始集成到bing搜索引擎,未来肯定是要发力的。

“而搜索引擎,这可是千寻科技的核心业务、甚至可以说是根基所在。bing未来在国内肯定是要跟千寻搜索直接竞争的,千寻也绝对不会无动于衷的!”

要说ChatGPT这种极为强悍的聊天机器人出现对谁的影响最大?

那当然是搜索业务,它对搜索引擎的影响简直就是颠覆性的。

相比于传统的搜索引擎来说,拥有极致的语言处理技术和语言理解能力的ChatGPT简直太超前了!

它与用户直接对话,用类似于人与人交互的方式进行搜索,而不是传统的关键词匹配。

这种搜索得出的结果更加直接、快捷,也更加容易使用,甚至直接放到论文里都没问题,查重都查不出来。

更有甚者,程序员给它描述需求,它能直接生成可用的代码——它对语言的理解能力已臻于化境!

而这对于千寻搜索来说,肯定不是什么好消息。

而“言心”模型,程旭印象中,“言心”好像是确实出了什么问题,好像还闹挺大的。

原本说是三月上线,三月是上线了,不过更多的是局限于商业合作伙伴,比如各类媒体、地图、房产等大型的合作伙伴——提供智能化的检索服务。

但对个人的开放一直在断续出问题,从三月上线开始,直到2024年中旬,一整年都没消停。

好像是模型的训练出了什么问题,但这其中究竟发生了什么,程旭也没有过多的关注。

“千寻确实花了不少钱,投资也数十上百亿了。”

潘正没有否认程旭的说法,这些东西都已经是公开可求证的了,不过,随后他便微微摇了摇头:“但是现在有点儿,坏了!”

“坏了?”

程旭有些不解,坏了是个什么概念?有这个术语吗?

“难道是寒武纪受到限制,训练卡和推理卡都不能及时供应得原因?”程旭有些不解,这是有些影响,但按理说,这还影响不到当前的上线。

“也不是什么机密,稍微消息灵通点儿的人一打听都知道。”

潘正无奈道:“不是硬件的问题,寒武纪的问题影响暂时确实没有那么大,是‘言心’基础模型的问题。”

程旭更加不解了,基础模型能有什么问题?

都训练那么长时间了,数十上百亿的资金都投入进去了,基础模型有问题都没发现吗?

“这算是早期的一个小失误,”潘正解释道:“原本不是什么大问题,但现在确实不好解决了。”

程旭没有吭声,等着潘正的下文,他是越听越糊涂了。

“早期训练的时候,训练人员也没想那么多,那个时候也没有什么严苛的标准,就使用了自己的产品做语料……”

“自家的产品?”程旭眼睛猛地一跳,瞬间就想起来发生了什么事儿了——千寻自家的产品,除了搜索引擎,也就文库和贴吧了!

而对话,贴吧,这……

程旭瞬间醍醐灌顶——脑海中冒出了一大堆的名词:大帝吧,航空吧,人口吧,孙吧,中西部发展吧……

这……

用这些语料做得模型早期训练?

这T-M-D究竟会训练出来个什么玩意儿?

“卧槽!”实在是没忍住,程旭爆了个粗口:“不会训练出‘阴阳人’加‘乐子人’的‘言心’模型吧?拿他岂不是只会阴阳怪气儿,指桑骂槐?”

程旭摇了摇头,只是这样还是好的,真要培养出来一个类似“50w人格”的价值观出来,那千寻真的是哭都没地儿哭去!

这章没有结束^.^,请点击下一页继续阅读!

喜欢科技无垠请大家收藏:(m.qinfengwx.net)科技无垠秦风文学更新速度全网最快。

上一章 目 录 下一页 存书签
站内强推 大国相 儒武争锋 吞噬星空 非典型萌妻 锦绣田园农家小地主 云家小九超皮哒 谍网 他像太阳 惊世医妃,腹黑九皇叔 久等了,唐先生! 最强皇道系统之召唤诸神 影视世界边缘同盟 特种兵痞在都市 天价宠妻:总裁夫人休想逃 将你私藏心尖 凌霄之上 我为纣王之傲啸封神 神魔之上 利刃 种田山里汉:神医美娇娘 
经典收藏 混世小术士 玄帝归来 策天神算 长生界 冥妻临门 巨星从网络主播开始 谁动了我的听诊器 贵女毒心:邪王嗜宠无下限 陈二狗的妖孽人生 甜蜜来袭,专宠伪装小萝莉! 星武通神 妖龙古帝 不红就要继承家业[重生] 这次换你来爱我(竞技) 至尊兵王 执法者手册 神祭人间 一拳打爆你的诡头 女校食堂管饭,被你们吹成食神 半岛墨途 
最近更新 大国相 战神变 大泼猴 星戒 后手 棺爷 绝色总裁爱上我 大刁民 民国谍影 阎王妻 扎纸人 谍网 特种兵痞在都市 久等了,唐先生! 神煌 吞噬星空 官榜 惊世医妃,腹黑九皇叔 万古神帝 雷武 
科技无垠 辰小序 - 科技无垠txt下载 - 科技无垠最新章节 - 科技无垠全文阅读 - 好看的其他类型小说