多模态同步语言神经影像数据集发布

大脑在加工语言时,需要实时调动多个脑区的神经元进行协同工作。构建高时空分辨率的神经影像数据可以帮助我们更好地了解各个脑区以及脑区之间的协同合作,对于探索大脑的语言加工机制至关重要。当前已有的开源数据主要针对英文采集,只包括单一模态的神经影像数据,如高空间分辨率的功能核磁共振(fMRI)或高时间分辨率的脑磁图(MEG),且多使用1小时以内的实验材料,数据规模有限,无法借助数据需求量大的计算模型进行更全面、更深入的大脑语言加工机制探索。 中国科学院自动化研究所自然语言处理研究组历时近两年,采集处理完成了迄今为止国际上规模最大、包括信息最丰富的汉语同步多模态神经影像数据集,并于近日正式对外发布。相关研究成果发表在Scientific Data上。 该数据集是当前国际上最大规模的用于脑语言处理机制研究的多模态同步神经影像数据集,针对12个被试收听约6个小时故事时的功能核磁共振(fMRI)、脑磁图(MEG)、每个被试的T1/T2加......阅读全文

全球首创多模态肿瘤治疗系统发布

原文地址:http://news.sciencenet.cn/htmlnews/2023/7/504937.shtm

“多模态”技术助推图像内容安全建设

原文地址:http://news.sciencenet.cn/htmlnews/2023/10/510589.shtm

新研究-创新多模态联邦学习框架

记者5月4日从天津理工大学获悉,该校计算机科学与工程学院副教授亓帆及其研究生李帅,针对多模态联邦学习中常见的模态不兼容问题展开深入研究,提出了一种创新的自适应超图聚合的多模态联邦学习框架。近日,该成果论文被计算机视觉和人工智能领域国际公认的顶级会议CVPR 2024录用。据介绍,现有联邦学习方法只会

多模态同步语言神经影像数据集发布

  大脑在加工语言时,需要实时调动多个脑区的神经元进行协同工作。构建高时空分辨率的神经影像数据可以帮助我们更好地了解各个脑区以及脑区之间的协同合作,对于探索大脑的语言加工机制至关重要。当前已有的开源数据主要针对英文采集,只包括单一模态的神经影像数据,如高空间分辨率的功能核磁共振(fMRI)或高时间分

多模态同步语言神经影像数据集发布

  大脑在加工语言时,需要实时调动多个脑区的神经元进行协同工作。构建高时空分辨率的神经影像数据可以帮助我们更好地了解各个脑区以及脑区之间的协同合作,对于探索大脑的语言加工机制至关重要。当前已有的开源数据主要针对英文采集,只包括单一模态的神经影像数据,如高空间分辨率的功能核磁共振(fMRI)或高时间分

多模态PET驱动跨学科临床前期成像

多模态PET驱动跨学科临床前期成像作者:Sonica van Wyk,Bruker Biospin核分子成像市场产品经理断层成像是一种广泛应用于各种领域的成像技术,包括放射学、核医学,以及地球物理和材料科学。它根据一个物体的截面或投影提供三维信息,常见的例子包括X射线、计算机断层扫描(CT)、正电子

深圳先进院多模态纳米探针研究取得进展

  近日,材料科学国际学术期刊Advanced Functional Materials发表了中国科学院深圳先进技术研究院纳米医疗技术研究中心蔡林涛课题组高笃阳、张鹏飞等研究组成员的最新成果:Highly Bright and Compact Alloyed Quantum Rods wit

中科闻歌发布优雅多模态文生视频平台

8月19日,2024北京人工智能生态大会在北京举行。会上,中科闻歌董事长王磊发布了优雅(YoYa)多模态文生视频平台(以下简称YoYa)。YoYa针对视频内容生产的工业化需求,以及对齐人物、动作、情感、对话等元素的视频生成技术需求,以人工智能(AI)多模态技术,赋能视频内容创作全链路。据介绍,依托中

组织任意来源的图像,实现多模态数据关联

  ——蔡司 ZEN Connect 助力材料科学研究  大学、研究机构及工业实验室的材料研究人员均可以利用蔡司ZEN Connect软件,整合所有的显微成像技术(甚至包括非蔡司的系统)来为自己的研究服务。  获得独特洞察力,提高效率,节省时间  蔡司 ZEN Connect允许用户对齐和叠加任意来

新研究为多模态传感应用提供指导

华东理工大学机械与动力工程学院研究员张博威、教授轩福贞等,提出了一种制造“高载量双结构单原子”的合成策略,为多模态传感(多种信息融合感知)的应用提供了指导。相关研究发表于《纳米快报》。抗坏血酸(AA)、多巴胺(DA)、尿酸(UA)和一氧化氮(NO)等化合物,广泛参与生物体的各种生理和病理过程。定量检

多模态文本智能技术助力AI实现智能推理

随着人工智能(AI)深入各行各业,多模态大模型正在成为AI发展的重要方向之一。近日,第八届中国模式识别与计算机视觉学术会议(PRCV 2025)在上海召开,“多模态文本智能大模型前沿技术与应用”论坛同期举办。来自华南理工大学、哈尔滨工业大学、南开大学、华中科技大学、小红书及合合信息技术团队的专家与学

蔡司增强在多尺度和多模态图像工作流程方面的效率

  研究人员将实现更快速的FIB-SEM样品制备、获得更精准的3D断层扫描图像和更完整的数据报告。  德国耶拿,2019年12月2日  现在,材料和生命科学领域的研究人员在研究3D样品时,可以更快速便捷地获取样品更深层次研究区域的信息。借助蔡司Crossbeam 350/550和Atlas 5的新功

Neuron:多模态感觉信息整合与决策的神经机制

  2019年10月10日,中国科学院脑科学与智能技术卓越创新中心、中科院灵长类神经生物学重点实验室、上海脑科学与类脑研究中心空间感知研究组顾勇研究员团队与瑞士日内瓦大学认知计算神经科学Alexandre Pouget研究组合作在Neuron杂志上发表了题为“Neural Correlates of

10问全球首个多模态地理科学大模型

9月19日,全球首个多模态地理科学大模型“坤元”(Sigma Geography)在京发布。多位同行评审专家用“惊艳”“专业”等词来描述这款大模型。“坤元”由中国科学院地理科学与资源研究所(以下简称地理资源所)联合中国科学院青藏高原研究所、中国科学院自动化研究所等单位研发,旨在拓宽普通大众的地理视野

多模态AI系统实现肺部感染性疾病精准诊疗

近日,四川大学华西医院呼吸与危重症医学科教授李为民、研究员王成弟团队在《创新》上发表了最新研究论文,创新性开发了多模态融合模型,即Multimodal Integration,MMI模型,利用临床文本、影像图像、检验指标等多维度信息,实现肺部感染性疾病及病原类型精准预测,及时对危重症进行预警干预。不

“能打字就能做视频”,智象多模态大模型升级

12月28日,安徽人工智能产业先导区启动活动在合肥举行,智象未来科技有限公司(以下简称智象未来)作为安徽人工智能产业先导区的零号入驻企业正式落地合肥。活动现场,智象未来正式发布智象多模态生成大模型3.0版。梅涛介绍智象多模态生成大模型3.0  主办方 供图“智象多模态生成大模型3.0版全面升级图像和

科研人员构建出多模态多任务酶筛选平台

近日,中国科学院上海营养与健康研究所建立了端到端筛选目标酶的多任务计算框架,提高了功能酶的预测与发现效率,并应用于真菌毒素降解酶的挖掘。近年来,深度学习在酶的结构、功能与性质的大规模预测方面取得了进展。然而,由于缺乏面向多模态输入和多任务输出的统一建模能力,现有方法难以满足高性能功能酶筛选的需求。针

科研人员提出高效时空多模态图神经网络

近日,中国科学院合肥物质科学研究院团队提出了高效时空多模态图神经网络(ET_MGNN)新型深度学习框架,提升了阿尔茨海默病和自闭症谱系障碍等脑疾病的自动诊断准确率。理解大脑的复杂活动需同时关注功能协调和结构解剖。然而,现有的脑网络学习模型在处理动态建模和多模态信息融合方面存在局限。为克服这些挑战,研

研究揭示多模态大模型涌现类人物体概念表征

人类能够对自然界中的物体进行概念化,这一认知能力长期以来被视为人类智能的核心。当我们看到“狗”“汽车”或“苹果”时,不仅能识别它们的物理特征即尺寸、颜色、形状等,还能理解其功能、情感价值和文化意义。这种多维度的概念表征构成了人类认知的基石。随着ChatGPT等大语言模型(LLMs)的爆发式发展,一个

学者提出融合多模态数据的荔枝霜疫霉病预测模型

近日,华南农业大学电子工程学院(人工智能学院)高级实验师陆健强课题组首次提出了融合多模态数据的荔枝霜疫霉病预测模型,为荔枝霜疫霉病的精准预测提供了新的研究思路与方法。相关成果发表于《IEEE物联网期刊》(IEEE Internet of Things Journal)。荔枝是我国南方的重要经济作物,

近红外发光量子棒可用于构建多模态纳米探针

  随着多模态成像技术的发展,迫切需要开发与多模态成像系统相应的新型多模态造影剂,即只需一次注射一种造影剂,便可实现两种或多种成像功能。目前磁共振成像(MRI)采用非侵入性监测方式深入组织,可提供解剖的细节和高质量的软组织的三维图像,但是其灵敏度相比放射性或光学方法而言较低;近红外荧光成像 (N

国际最大规模多模态同步语言神经影像数据集发布

大脑在加工语言时,需要实时调动多个脑区的神经元进行协同工作。构建高时空分辨率的神经影像数据可以帮助我们更好地了解各个脑区以及脑区之间的协同合作,对于研究大脑的语言加工机制至关重要。当前已有的开源数据主要针对英文采集,只包括单一模态的神经影像数据,如高空间分辨率的功能核磁共振或高时间分辨率的脑磁图,并

多模态融合方法划分质谱成像数据感兴趣区域

原文地址:http://news.sciencenet.cn/htmlnews/2023/4/498367.shtm4月11日,中国科学院深圳先进技术研究院医工所传感中心罗茜团队在质谱成像数据分析领域获得重要进展,成功开发了一种多模态融合验证的空间分割新方法,可以准确可靠地确定质谱成像数据的感兴趣区

全球首个!多模态地理科学大模型“坤元”在京发布

  中国科学院地理科学与资源研究所于9月19日在北京举行新闻发布会,正式发布全球首个多模态地理科学大模型“坤元”(Sigma Geography),旨在推动地理学与人工智能深度融合。  该大模型是专注于地理科学的专业语言大模型,具备处理地理科学相关问题的专业能力,研发团队完成了地理学全谱系高质量语料

多模态行为评价系统在酸奶感官测试研究中的应用

随着经济水平的不断发展,人民生活水平的不断提高,关于食品饮料方面的研究愈发受到关注。众所周知,日常生活中,消费者在做出购买选择时,会考虑诸多因素:品牌、价格、包装、安全性、营养性等。消费者的选择结果侧面反映出其对该产品的接受度及消费偏好。感官特性是影响消费者对食品接受度和消费偏好的一个重要因素。感官

多模态神经影像学在癫痫网络中的研究进展

  癫痫(epilepsy)是大脑神经元反复异常放电导致的病理性脑功能障碍性疾病,全球大约有6500万癫痫患者,其中有20%~40%为药物难治性癫痫。运用多模态的研究方法发现,癫痫的发生和传播是由于致痫皮质的癫痫网络异常而不是单纯的致痫灶的病变所引起,同时抑制或破坏致痫皮质的癫痫网络将为手术治疗癫痫

研究为天体目标分类提出新型多模态神经网络

在现代天文研究中,准确识别天体类型是理解宇宙结构、星系演化及暗物质分布等关键科学问题的基础。由于不同类型的天体辐射机制存在显著差异,天文学家通常依赖光谱观测进行分类。然而,获取光谱需耗费大量观测资源且难以在大规模巡天中实现全面覆盖。因此,目前大多天体缺乏光谱数据,进而长期制约学界对宇宙中海量天体的系

多模态感觉信息整合与决策的神经机制研究获进展

  10月10日,《神经元》期刊在线发表了题为《利用线性不变概率性群体编码实现基于复杂多模态感觉信息的最优决策》的研究论文,该研究由中国科学院脑科学与智能技术卓越创新中心(神经科学研究所)、中科院灵长类神经生物学重点实验室、上海脑科学与类脑研究中心空间感知研究组与瑞士日内瓦大学认知计算神经科学研究组

护航地下空间安全,杭州大学生研发多模态扫描仪

“使用我们深邃空间团队研发的三维扫描仪,可以建立地下管廊的数字孪生模型,为管廊的可视化监管和运维提供可靠数据。”近日,一支由杭州大学生组建的团队研发出了一款专门针对地下空间建模的三维智能多模态扫描仪,为解决地下空间安全问题提供了新方案。所谓“地下管廊”,就是将电力、通信、燃气、污水、排水等各种工程管

仿生多模态调控智能纤维助力可穿戴呼吸监测系统开发

东华大学教授刘宣勇、副研究员邱家军团队,首创了一种仿生气液两相流气泡诱导凝胶液界面动态变形方法,构建出具有周期性异形结构的功能纤维,实现了纤维在人体微环境中对湿度变化的快速响应与水伏能量采集,为未来开发可穿戴医疗设备与健康监测系统提供了全新技术路径。相关研究近日发表于《自然-通讯》。受蜘蛛喷丝口结构