科技无垠

辰小序

首页 >> 科技无垠 >> 科技无垠最新章节(目录)
大家在看 秘巫之主 娇妻如云 御用兵王 绝世邪神 官途 武道天下 一号红人 逆剑狂神 最强神医混都市 灵剑尊 
科技无垠 辰小序 - 科技无垠全文阅读 - 科技无垠txt下载 - 科技无垠最新章节 - 好看的其他类型小说

第7章 这究竟会训练出个什么玩意儿?

上一章 目 录 下一页 阅读记录

“ChatGPT你知道吧?‘言心’也是一个语言模型,跟ChatGPT的差别就是,相比之下,‘言心’更擅长中文语料。”

这个话题一旦展开,是怎么也绕不过去现今大火的聊天机器人ChatGPT的,ChatGPT推出2个月即拥有1亿月活用户,在消费者应用程序里,它是历史上最快达到这个数字的。

如今,它就是聊天机器人的标杆产品,火的一塌糊涂。

“ChatGPT的三代模型的核心架构都是Transformer,从本质上讲,它依然是基于海量数据的延伸,并没有新的颠覆性技术,也没有从本质上超出现有的技术。”

说起ChatGPT,程旭对此很不以为然——现阶段,人工智能的理论并没有新的进展,谁强并不是强在理论先进、技术高超上,而是强在硬件实力、强在算力堆积上。

换句话说,就是钱——就拿ChatGPT来说,它训练一次几乎就差不多需要三千万人民币以上的资金。

更别说每年的运营,据估算,每年仅是CPU和GPU的成本就能达到十亿人民币这个级别,再加上其他的费用,这真的不是一般企业能够承受的住的。

哪怕是千寻这样的巨头搜索企业,搞出“言心”这个语言模型,也是持续投入了十年以上,每年的投入几乎是整个千寻科技利润的五分之一——这绝对是一个惊人的数字。

“但微软是真的舍得投钱啊,十亿美金十亿美金的,钱跟不是钱似的往里投资。”

说着的时候,潘正甚是羡慕:“他们甚至给OpenAi团队配了一台性能极为强悍的超算,看着就让人眼红。”

“千寻科技的投入也不差吧?而且以后肯定还会越来越重视。毕竟现在GPT已经开始集成到bing搜索引擎,未来肯定是要发力的。

“而搜索引擎,这可是千寻科技的核心业务、甚至可以说是根基所在。bing未来在国内肯定是要跟千寻搜索直接竞争的,千寻也绝对不会无动于衷的!”

要说ChatGPT这种极为强悍的聊天机器人出现对谁的影响最大?

那当然是搜索业务,它对搜索引擎的影响简直就是颠覆性的。

相比于传统的搜索引擎来说,拥有极致的语言处理技术和语言理解能力的ChatGPT简直太超前了!

它与用户直接对话,用类似于人与人交互的方式进行搜索,而不是传统的关键词匹配。

这种搜索得出的结果更加直接、快捷,也更加容易使用,甚至直接放到论文里都没问题,查重都查不出来。

更有甚者,程序员给它描述需求,它能直接生成可用的代码——它对语言的理解能力已臻于化境!

而这对于千寻搜索来说,肯定不是什么好消息。

而“言心”模型,程旭印象中,“言心”好像是确实出了什么问题,好像还闹挺大的。

原本说是三月上线,三月是上线了,不过更多的是局限于商业合作伙伴,比如各类媒体、地图、房产等大型的合作伙伴——提供智能化的检索服务。

但对个人的开放一直在断续出问题,从三月上线开始,直到2024年中旬,一整年都没消停。

好像是模型的训练出了什么问题,但这其中究竟发生了什么,程旭也没有过多的关注。

“千寻确实花了不少钱,投资也数十上百亿了。”

潘正没有否认程旭的说法,这些东西都已经是公开可求证的了,不过,随后他便微微摇了摇头:“但是现在有点儿,坏了!”

“坏了?”

程旭有些不解,坏了是个什么概念?有这个术语吗?

“难道是寒武纪受到限制,训练卡和推理卡都不能及时供应得原因?”程旭有些不解,这是有些影响,但按理说,这还影响不到当前的上线。

“也不是什么机密,稍微消息灵通点儿的人一打听都知道。”

潘正无奈道:“不是硬件的问题,寒武纪的问题影响暂时确实没有那么大,是‘言心’基础模型的问题。”

程旭更加不解了,基础模型能有什么问题?

都训练那么长时间了,数十上百亿的资金都投入进去了,基础模型有问题都没发现吗?

“这算是早期的一个小失误,”潘正解释道:“原本不是什么大问题,但现在确实不好解决了。”

程旭没有吭声,等着潘正的下文,他是越听越糊涂了。

“早期训练的时候,训练人员也没想那么多,那个时候也没有什么严苛的标准,就使用了自己的产品做语料……”

“自家的产品?”程旭眼睛猛地一跳,瞬间就想起来发生了什么事儿了——千寻自家的产品,除了搜索引擎,也就文库和贴吧了!

而对话,贴吧,这……

程旭瞬间醍醐灌顶——脑海中冒出了一大堆的名词:大帝吧,航空吧,人口吧,孙吧,中西部发展吧……

这……

用这些语料做得模型早期训练?

这T-M-D究竟会训练出来个什么玩意儿?

“卧槽!”实在是没忍住,程旭爆了个粗口:“不会训练出‘阴阳人’加‘乐子人’的‘言心’模型吧?拿他岂不是只会阴阳怪气儿,指桑骂槐?”

程旭摇了摇头,只是这样还是好的,真要培养出来一个类似“50w人格”的价值观出来,那千寻真的是哭都没地儿哭去!

小主,这个章节后面还有哦^.^,请点击下一页继续阅读,后面更精彩!

喜欢科技无垠请大家收藏:(m.001zj.com)科技无垠字节读书更新速度全网最快。

上一章 目 录 下一页 存书签
站内强推 御用兵王 我要名垂千古 造神 他从火光中走来 剑:世界 我在末日圈养星兽 百炼飞升录 帝霸 疯狂神豪玩科技 闺娇 火爆狂兵 天才高手在都市 神医娘亲天才萌宝 异世傲天 大戏骨 绝世神偷:废柴七小姐 重生南非当警察 猛男诞生记 贴身兵皇 为什么它永无止境 
经典收藏 三国之裴元庆传奇 王牌特工 师父又掉线了 神级插班生 妾色 大宋之风流才子 妙手天师 重生药王 先婚后爱:偷走总裁的宝宝 重生之怀孕 辟寒金 独家蜜婚 无垠 阴婚介绍人 青霄玉女 白袍总管 暗恋那点小事 误踩老公底线 战国捡尸人 带着面板修仙的假道士 
最近更新 秘巫之主 娇妻如云 御用兵王 绝世邪神 官途 劫天运 武道天下 我要名垂千古 一号红人 最强弃少 官道无疆 医品宗师 逆剑狂神 异世灵武天下 最强神医混都市 灵剑尊 邪御天娇 剑娘 万古至尊 神医弃女:邪王霸爱小狂妃 
科技无垠 辰小序 - 科技无垠txt下载 - 科技无垠最新章节 - 科技无垠全文阅读 - 好看的其他类型小说