首页 » 博客 » DEEPMIND 的语言模型

DEEPMIND 的语言模型

 

认识 Gopher:谷歌母公司 Alphabet 旗下的英国人工智能实验室 DeepMind 推出了 Gopher,这是一种大型语言模型,尽管其规模只有一些美国和中国公司的一半,但其表现却优于最先进的竞争对手。

参数规模大并不一定意味着更好: Gopher 拥有 2800 亿个参数,略高于微软 Megatron-Turing 自然语言生成模型(5300 亿个参数)的一半。由政府资助的北京人工智能研究院开发的“悟道 2.0”模型拥有 1.3 万亿个参数。尽管规模较小,Gopher 在超过 80% 的测试任务中表现优于竞争对手。

距离奇点更近一步: DeepMind 研究科学家 Iason Gabriel 表示,公司进军大型语言模型的新举措是“实现我们解决智能问题以推动科学发展并造福人类的使命”的更广泛努力的一部分。但先别高兴得太早。Gopher 距离达到人类水平的阅读理解能力还很远。

危险地带 的语言模型 大型语言模型因散

 

播有害内容、助长有害的种族主义和性别歧视偏见而饱受批评。它们还擅长制造虚假信息,批评人士担心,当它们用于与人类对话时,可能会被用来诈骗和欺骗人们。DeepMind 表 VB 数据库 示,Gopher 的训练基于一个大型英语文本数据库,以及书籍、新闻文章和维基百科等其他来源。该公司表示,其模型成功的部分原因在于,该公司通过过滤文本、删除重复和重叠内容,提高了数据集的质量。点击此处阅读更多内容。

英国国家医疗服务体系(NHS)濒临崩溃 购买时欧盟的烟草产品  周二,或许是最令人担忧的时刻,卫生大臣萨吉德·贾维德(Sajid Javid)告诉下议院,NHS面临被奥米克龙(Omicron)压垮的“非常现实的风险”。他表示,实际上,这将导致可怕的后果:遭遇车祸的儿童可能得不到救治。一位政府官员昨晚坚称,贾维德的这番话并非仅仅为了劝说议员们支持政府,而是对惠蒂提交给内阁的数据进行了诚实的评估。

保守党的滞后白厅对保守党议员

 

未能理解约翰逊和贾维德的论点感到沮丧。政府多位官员私下抨击保守党后座议员,称他们对奥米克龙疫苗的现状一无所知。一位保守党议员表示,他们的议员也 线数据库 存在自身新冠“滞后”现象——他们比其他人都晚才意识到事态的严重性。另一位议员则认为,一些议员在奥米克龙疫苗的危害程度尚未明朗之前就公开承诺反对这些措施,这无异于把自己逼上了绝路。

 

 

令人恼火的是,议员们似乎无法接受这样一个事实:即使绝大多数人口都接种了疫苗,即使奥米克龙疫苗的毒性较弱,但单凭数量就足以导致住院人数超过医院的容量。另一位部长表示,与英国国家医疗服务体系(NHS)不堪重负的前景相比,疫苗护照的抗议显得微不足道:“说实话,关于口罩和疫苗认证的争论已经过时了。现在的重点是加强剂和拯救生命。”

滚动至顶部