研究显示:AI模型在经典注意力测试中崩溃
核心数据:GPT-4o在处理五个词的列表时准确率达91%,十个词时降至57%,四十个词时仅为15%。Claude 3.5 Sonnet在二十个词前保持稳定,四十个词时陡降至24%。这表明当前AI模型在维持注意力方面存在根本性缺陷。 研究者让多个领先AI模型完成了经典的Stroop任务——一种已被用了数十年的心理学实验。在测试中,颜色词(如“红色”“蓝色”)以不同颜色的墨水显示,参与者需要说出墨水的颜色而不是读出词语本身。这看似简单,但实际上要求大脑抑制自动阅读的习惯,专注于识别墨水颜色。 当匹配和不匹配的颜色词出现在同一列表中时,挑战变得更加严峻。在这些条件下,不匹配项目的准确率降至接近零。AI模型无法始终如一地维持识别墨水颜色的指令,而是越来越倾向于直接读取单词本身。 这一发现特别引人关注,因为人类也面临类似的冲突。人们读词能力远强于识别墨水颜色的能力,但即便有这种偏差,大多数人仍能在长列表中保持高准确率和稳定表现。 ......阅读全文
新型AI芯片将大语言模型能耗减半
美国俄勒冈州立大学科研团队研发出一种新型AI芯片,成功将大语言模型的能耗降低50%。这项成果于近期在波士顿举行的IEEE定制集成电路会议上发布,是半导体领域的重大突破,有望成为解决大语言模型高能耗问题的“绿色钥匙”。 当前,以谷歌“双子座”和OpenAI的GPT-4为代表的大语言模型,因海量参
AI语言模型“提速”药物发现
原文地址:http://news.sciencenet.cn/htmlnews/2023/6/502762.shtm美国麻省理工学院和塔夫茨大学研究人员设计出一种基于大型语言模型(如ChatGPT)的人工智能算法,这种称为ConPLex的新模型可将目标蛋白与潜在的药物分子相匹配,而无需执行计算分子结
“AI+教育”,复旦推出大语言模型助力新生报到
8月25日,是复旦大学本科生新生报到的日子。来自全国各地和全球40多个国家的4300余名2024级本科新生,开启了在复旦的求学生涯。新生报道现场。为帮助来自世界各地的新同学尽快融入复旦大学,学校基于大语言模型,推出“复旦迎新助手”智能Agent。作为新生的贴心小帮手,大语言模型为新同学在迎新阶段提供
研究显示:AI模型在经典注意力测试中崩溃
核心数据:GPT-4o在处理五个词的列表时准确率达91%,十个词时降至57%,四十个词时仅为15%。Claude 3.5 Sonnet在二十个词前保持稳定,四十个词时陡降至24%。这表明当前AI模型在维持注意力方面存在根本性缺陷。 研究者让多个领先AI模型完成了经典的Stroop任务——一种已被
科研人员提出大语言模型复杂执行路径推理能力分析框架
近日,中国科学院软件研究所等围绕动态类型程序语言中复杂执行路径难以有效分析的问题,分析大语言模型的路径约束推理能力,并构建覆盖测试生成、路径可行性判定和缺陷检测的评测基准。 执行路径由程序从入口到出口依次经过的语句和分支构成,是理解程序语义、生成高覆盖测试和发现特定路径缺陷的基础。传统符号执行
压缩算法为大语言模型“瘦身”
据美国科学促进会旗下网站19日报道,美国普林斯顿大学和斯坦福大学团队开发出一种新压缩算法CALDERA,能精简大型语言模型(LLM)的海量数据,为LLM“瘦身”。这项算法不仅有助保护数据隐私、节约能源、降低成本,还能推动LLM在手机和笔记本电脑上高效使用。团队举例称,当人们使用ChatGPT时,请求
8个小技巧“用好”大语言模型
用大语言模型,还需要技巧?在人们的印象中,这是个极其简单的操作:只需输入一个问题,立刻就能得到回答。但实际上,如何有效地与这些人工智能模型互动,发挥出它们的最大潜力,却是一个经常被忽视的话题。中国科学技术大学心理学系特任研究员林志成关注到这一话题,并在他最近的评论文章中提供了一系列的策略和指导,希望
生成式AI可训练机器人执行多种任务
铲子,刀子,锤子,扳手3个不同的数据集:模拟(上)、机器人远程操作(中)和人类演示(下)让机器人能学习使用不同的工具。图片来源:麻省理工学院科技日报北京6月23日电 (记者张梦然)据美国麻省理工学院官网近日报道,该机构研究人员为了训练更先进的多用途机器人,开发出一种技术:使用一种称为扩散模型的生成式
AI论文数量激增但质量下滑:大语言模型重塑科研生态的双刃剑
ChatGPT之后的科研出版变局二〇二二年底ChatGPT对公众和学术界全面开放之后,世界各地的研究者在日常交流中开始频繁告诉同事自己能用这些新的人工智能工具完成更多学术工作;几乎在同一时间,各大科技期刊的编辑们开始报告一个前所未见的现象——语言表达极其流畅自然而科学实质内容似乎并未显著增加的投稿数
AI大模型“拿捏”电池寿命
作为现代生活中不可或缺的能源载体,电池的重要性不言而喻。从清晨唤醒我们的闹钟,到随身携带的手机、平板电脑等智能设备,无一不依赖于电池提供的稳定电力。此外,随着科技的发展,电动汽车、无人机等新兴领域也广泛应用了各类高性能电池,推动了绿色出行和智能科技的进步。因此,电池不仅极大地便利了我们的日常生活,还
大语言模型现状偏见难题终于有解了
加拿大滑铁卢大学的一项综合研究揭示,主流大语言模型存在显著的现状偏见,在气候相关建议中持续偏向既有、高排放的选择,而非创新的、对气候友好的替代方案。研究团队评估了十一个知名人工智能模型,在近五万五千条测试提示中,发现聊天机器人认可现有政策的概率,是支持拟议气候改革方案的两倍;而被推荐的电动汽车比
释放AI大模型促消费潜力
今年的《政府工作报告》提出持续推进“人工智能+”行动,旨在抓住人工智能技术突破机遇,使我国数字技术与制造优势、市场规模优势充分结合,推动人工智能大模型广泛应用,真正赋能千行百业、走进千家万户。在构建新发展格局战略背景下,AI大模型在激活内需市场、促进消费升级等方面充满“模”力。 随着人工智能技
新引擎实现大语言模型推理速度显著提升
原文地址:http://news.sciencenet.cn/htmlnews/2023/11/511841.shtm
研究显示:大语言模型数学证明效果提升显著
核心数据:一份离奇的里程碑证明 数学界数十年来最重大的事件正逐渐清晰,而它比任何人设想的都更加离奇。九月初,OpenAI发布了一份令人费解的166页纳维-斯托克斯问题解答,这是数学界著名的百万美元难题之一。 该公司动用了约一万个副本的智能体群,也就是其新近擅长数学的大语言模型,耗费约88小时计算时
新AI模型可预测系列任务中人类的决定
近日,一项发表于《自然》的研究报道了创新人工智能(AI)系统——Centaur。它可以预测人们在各种情况下做出的决定,并且优于利用心理学经典理论所做的推测。不同于谷歌Deepmind的AlphaGo等只能预测一个人就单一任务做出选择的AI系统,Centaur可以模拟一系列任务中人类的行为,包括赌博、
通用生物医学AI智能体可自主执行科研任务
美国斯坦福研究团队近日在《科学》杂志上报告了一种名为Biomni的通用生物医学AI智能体,其能够自主执行从数据分析到实验设计的多种研究任务。团队在多个案例研究中测试了该工具,认为其性能稳定,多项任务表现接近人类专家。该成果意味着AI智能体可与人类研究人员协作,加速推进生物医学从基础研究迈向应用转化。
厦大尝试AI大模型破译甲骨文
近日,厦门大学信息学院自然语言处理实验室教授史晓东团队申报的“基于甲骨文多模态大模型的多元信息甲骨文辅助考释模型”入选“探元计划2024”“创新探索型项目”TOP10榜单。基于甲骨文多模态大模型的多元信息甲骨文辅助考释模型。厦门大学供图甲骨文也被称作“殷墟文字”,距今已有三千多年历史,是世界四大古文
大语言模型在线辩论说服力超人类
实验设计示意图。图片来源:英国《自然·人类行为》在线版《自然·人类行为》19日发表的一项人工智能(AI)研究发现,在线辩论中,GPT-4一类的大语言模型(LLM)如能根据对手的个性化信息调整它们的论据,其说服力比人类辩手高出64%。研究结果显示了GPT-4生成有针对性和说服力论据的能力,揭示出AI工
华为发布大模型时代AI存储新品
原文地址:http://news.sciencenet.cn/htmlnews/2023/7/504751.shtm
AI大模型“源”炼造客服大脑
2018年至今,NLP领域经历了非常大的变化,Transformer、ELMO、BERT、GPT-3,再到最近的ChatGPT(GPT 3.5的微调)的突破,NLP在预训练大模型的暴力拆解路上越走越远,这也让各行业开始相信:很多之前无法做到的场景、效果,现在可以有新的解法和落地。 智能客服,是
AI大模型走出“泡沫期”未来何如
今年3月ChatGPT-4上线以来,国内科技龙头企业密集推出人工智能大模型,百度“文心一言”、阿里云“通义千问”、华为“盘古”、360“智脑”、昆仑万维“天工”、京东“灵犀”、科大讯飞“星火”、腾讯“混元”、商汤“日日新”等大模型先后登场,呈现百花齐放、迅猛发展的态势。截至2023年10月初,国
为何大语言模型越狱漏洞引发整个业界的安全关注?
只需几句巧妙的提示,全球最先进的大语言模型就能被劫持,吐出制造燃烧弹、甲基苯丙胺乃至铀浓缩设施的详细步骤。独立网络安全研究员大卫·库兹玛在一年多时间里发现了七种越狱方法,而多数模型厂商对漏洞披露几乎置若罔闻——这正是整个行业必须正视的安全警钟。一、案例详情:从泰坦尼克到核材料2024 年 10 月,
设计基因编辑工具的AI大模型问世
记者27日从中国农业科学院获悉,该院农业基因组研究所农业基因编辑技术研发与应用创新团队构建了全球规模最大的实验验证数据集,并基于此开发出人工智能(AI)大模型AlphaCD。该模型不仅能高效预测超过2万余种胞嘧啶脱氨酶的酶活特征,还能设计出新型高性能碱基编辑工具。相关成果日前发表于国际期刊《细胞
日本发布大规模语言模型
科技日报讯 (记者李杨)东京工业大学、日本理化学研究所及富士通公司等近日宣布,利用超级计算机“富岳”,他们开发的大规模语言模型“Fugaku-LLM”正式发布。“Fugaku-LLM”是首个完全由日本国产技术构建的AI语言模型,其在处理日语及相关文化内容上表现卓越。模型特别擅长基于日语敬语进行自然对
日本发布大规模语言模型
东京工业大学、日本理化学研究所及富士通公司等近日宣布,利用超级计算机“富岳”,他们开发的大规模语言模型“Fugaku-LLM”正式发布。 “Fugaku-LLM”是首个完全由日本国产技术构建的AI语言模型,其在处理日语及相关文化内容上表现卓越。模型特别擅长基于日语敬语进行自然对话,并展现出在人
东北大学研究团队发布TechGPT2.0大语言模型
近日,计算机科学与工程学院任飞亮副教授主持的“东北大学知识图谱研究组”发布了大语言模型TechGPT2.0。 TechGPT-2.0在继承了TechGPT-1.0全部特性的同时,通过增加多领域、多任务的数据,展现出了嵌套实体的抽取、幻觉回答、回答不可回答问题和回答长文本问题的能力。这些改进使得
科研人员利用大语言模型解释调节睡眠的分子机制
华中科技大学生命学院张珞颖团队和薛宇团队在Nature Communications杂志上合作发表了题为“Large-language models facilitate discovery of the molecular signatures regulating sleep and activ
科研人员利用大语言模型解释调节睡眠的分子机制
华中科技大学生命学院张珞颖团队和薛宇团队在Nature Communications杂志上合作发表了题为“Large-language models facilitate discovery of the molecular signatures regulating sleep and activ
东北大学研究团队发布TechGPT2.0大语言模型
近日,计算机科学与工程学院任飞亮副教授主持的“东北大学知识图谱研究组”发布了大语言模型TechGPT2.0。TechGPT-2.0在继承了TechGPT-1.0全部特性的同时,通过增加多领域、多任务的数据,展现出了嵌套实体的抽取、幻觉回答、回答不可回答问题和回答长文本问题的能力。这些改进使得模型更适
两个人工智能系统说起“悄悄话”
原文地址:http://news.sciencenet.cn/htmlnews/2024/3/519675.shtm 两个AI系统实现相互对话,预示着AI系统将像人类一样进行互动交流。图片来源:slguardian.org瑞士日内瓦大学的一个科学家团队在人工智能(AI)研究方面取得一项突破: