“AI+大数据”推动数据挖掘走向数智化治理
5月20日，阿里巴巴副总裁、阿里云计算平台负责人贾扬清在媒体沟通会上表示，经过近20年的发展，人们对大数据的利用已从早期的数据挖掘进化为集数据分析、数据管理、数据协同为一体的综合治理，在这一进程中，大数据与人工智能（AI）技术的融合居功甚伟。 贾扬清提到，数字经济迅猛发展，不断丰富、增长的数智业务，对技术提出了更高的挑战，数字化创新需要用好“大数据+AI”这个“核武器”。尤其对企业来说，业务创新要提高效率，仅仅把数据管理好、使用好还不够，还需要AI技术的加持。 “大数据和AI密不可分，二者结合在一起，更能帮助企业在数字时代从容应对不确定性。”贾扬清说。 当前，大数据技术已经广泛应用到各行各业的数字化转型中。例如，隶属建筑行业的中建三局一公司，就基于阿里云的数据管理平台DataWorks和云数据仓库MaxCompute构建了数智建造一站式服务平台。该平台覆盖了建造领域生产场景全链路、核心管控全流......阅读全文
压缩算法为大语言模型“瘦身”
据美国科学促进会旗下网站19日报道，美国普林斯顿大学和斯坦福大学团队开发出一种新压缩算法CALDERA，能精简大型语言模型（LLM）的海量数据，为LLM“瘦身”。这项算法不仅有助保护数据隐私、节约能源、降低成本，还能推动LLM在手机和笔记本电脑上高效使用。团队举例称，当人们使用ChatGPT时，请求
单细胞数据挖掘算法方面取得新进展
图 SEVtras高效识别单细胞转录组数据中的胞外小囊泡 在国家自然科学基金项目（批准号：32025009、32130020等）资助下，中国科学院北京生命科学研究院赵方庆团队在单细胞数据挖掘算法方面取得新进展，研究成果以“SEVtras识别单细胞转录组中液滴分辨率的胞外小囊泡（SEVtras de
Benchmarker一种可靠的对GWAS数据进行挖掘的算法
全基因组关联研究（GWAS）针对大量人群寻找有助于常见的多基因特征（如身高或肥胖）的基因。这些综合性研究经常发现大量微小的遗传变异，这些变异在高龄，肥胖等人群中更常发生。但这种相关性并不一定意味着因果关系的存在。 虽然有许多计算算法可用于帮助提取GWAS结果，但很难知道选择哪一种。研究人员在《
注水算法
迭代注水算法是由Wei Yu提出的，它是一种多用户功率分配算法。这是一种自私算法，当接收端和发送端没有共享信道信息时，它的实现非常简单，复杂度低。但是，当信道上有共享信 息，需要共享信道，这是网络拓扑就会出现远近效应，这就产生了非平衡状态，引起用户间信号干扰，信息传输效率下降。 迭代注水
双向扫描算法和电梯调度算法区别
双向扫描算法和电梯调度算法区别：1、双向扫描(SCAN)算法不仅考虑到欲访问的磁道与当前磁道间的距离，更优先考虑的是磁头，当前的移动方向。例如，当磁头正在自里向外移动时，SCAN算法所考虑的下一个访问对象应足其欲访问的磁道既在当前磁道之外，又是距离最近的。这样自里向外地访问直至再无更外的磁道需要访问
基于变体GRU预处理网络数据包的入侵检测优化算法
在网络空间中，用入侵检测（Intrusion Detection System，IDS）判断网络数据包是否包含攻击对于防范网络攻击和保护信息安全具有重要意义。现有的IDS算法存在两个问题，一是利用人工经验大量提取的特征无法准确描述网络数据包；二是神经网络结构复杂、内存占用大、功耗大。 中国科学
大数据+智能算法有望治愈抑郁症和精神类疾病
近几年，多个大型而长期的脑研究项目问世，包括投资60亿美元的“美国脑计划（US BRAIN Initiative）”、欧盟投资10亿欧元的“人类脑计划（HBP）”；中国和日本也都在2016年初发布了重大的脑科学项目，希望能通过研究猴子来理解人脑。2016年，“脑科学与类脑研究”被“十三五”规划纲
大数据成为反腐利器－新算法体系精准发现疑似问题线索
如何从碎片化、结构化的电子政务大数据中发现疑似问题线索？ 中科院计算所的研究团队经过长期研究找到了答案。 “在不同电子政务系统产生的偶然数据中蕴含着具体人、具体事的必然章法和趋势。”在中科院计算所研究员方金云看来，大数据具有使小恶小善振荡放大的力量，有助于从电子政务数据中精准发现疑似问题线索
加速新药研发！新算法助力质谱数据准确高效预测小分子
小分子的鉴定是生命科学一项关键任务。质谱（mass spectrometry，MS）可用于分析化合物成分，高通量质谱技术能够从数十万个环境中收集小分子的串联质谱。然而，现有的方法是基于化学领域的知识，无法解释小分子质谱中的许多峰。 卡内基梅隆大学和俄罗斯圣彼得堡国立大学的研究人员提出一种算法—
昆明动物所开发出适用于高通量异质性数据算法
挖掘肿瘤大数据有助于识别和总结肿瘤发生、发展过程的分子变化规律。然而，肿瘤组织高度异质性、批次效应等因素是肿瘤数据分析的重要难题，而目前常用的转录组数据分析方法对于肿瘤离群值极度敏感，容易产生假阴性结果。针对此，中国科学院昆明动物研究所科研人员开发了一种新的不依赖均一化、非参的高维大数据分析算法
高效的集合卡尔曼滤波热层电离层数据同化算法
全球导航卫星系统、短波通信等无线电波在传播过程中会受到地球的高层大气（电离层/热层）的折射、散射影响，因此对高层大气的日常监测和预报具有重要意义。电离层是高层大气的电离成分，受太阳辐射条件控制，这意味着它不能太长时间地“记住”过去，通常只有2-3小时的提前预报时间。热层是高层大气的中性成分，受太
二十世纪最伟大的十大算法及其意义
一、1946 蒙特卡洛方法 1946年，美国拉斯阿莫斯国家实验室的三位科学家John von Neumann，Stan Ulam 和 Nick Metropolis共同发明，被称为蒙特卡洛方法。 它的具体定义是： 在广场上画一个边长一米的正方形，在正方形内部随意用粉笔画一个不规则的
麦穗图像数据库在于农业生产和研究现场的AI算法测试...
麦穗图像数据库在于农业生产和研究现场的AI算法测试的应用Plant Phenomics | 小麦麦穗自动检测大规模图像数据库：为可用于农业生产和研究现场的AI算法测试奠基在国际协作下，来自7个国家、9个研究机构的十几名研究人员创建了基于提高通用性的图像来自动检测小麦麦穗的大规模数据库。构建了用于小麦
2014大数据与数据科学进展主题论坛在京举行
12月27日，2014年大数据与数据科学进展主题论坛在京举行。包括徐宗本等5位院士在内的来自学界、商界和政府部门的60多名专家学者参加了论坛，围绕今年国际上大数据与数据科学的最新进展和面临的挑战展开了研讨。 本次论坛由中国计算机学会主办，中国计算机学会大数据专家委员会、中科院虚拟经济与数据科学
缺陷检测算法
基本两个步骤：1、缺陷检出，算法较多，本人认为是不变矩阵法和主成分分析法；2、缺陷识别和分类,多数使用BP神经网络进行训练，提高识别率。
基质效应的算法
化学分析中，基质指的是样品中被分析物以外的组分。基质常常对分析物的分析过程有显著的干扰，并影响分析结果的准确性。例如，溶液的离子强度会对分析物活度系数有影响，这些影响和干扰被称为基质效应（matrix effect）。去除方法 目前最常用的去除基质效应的方法是，通过已知分析物浓度的标准样品，同时尽
三大数据展现南水北调工程效益
新华社北京8月25日电 题：三大数据展现南水北调工程效益新华社记者刘诗平8月25日，南水北调中线穿黄工程通过水利部主持的设计单元工程完工验收。至此，南水北调东、中线155个设计单元工程全部通过水利部完工验收。据统计，如今南水北调工程累计调水超过560亿立方米、受益人口超过1.5亿人，充分展现了这一工
2022大数据科技传播奖揭晓
由中国科技新闻学会、湖南省科协、衡阳市人民政府联合开展的2022年大数据科技传播奖评选活动近日揭晓，共评出特殊贡献奖7名，作品奖9件，团体奖13个，个人奖28名。本次评选活动经郭华东、李兰娟、褚君浩等院士担纲的大数据科技传播奖评审委员会严格评选审定，依照《大数据科技传播奖奖励办法》规定，评选中国工程
两大算法一大功能，关于数字涡街流量计这些你知道吗？
涡街流量计具有压力损失小，量程宽，精度高，构造简单牢固，维护方便，安装费用低，使用寿命长，适用范围广等优众多优点，并在工业生产中得到广泛的应用。但现有的涡街流量计仍存在一些问题，影响到它的进一步推广应用。例如，涡街流量计下限量程高，抗机械振动干扰能力差，在线参数修改不便。因此，解决涡街流量计小流
如何利用基准单细胞测序数据集来评估新的分析方法或算法？
利用基准单细胞测序数据集来评估新的分析方法或算法，可以按照以下步骤进行：数据获取和预处理从公开的数据资源获取选定的基准数据集。对数据进行必要的预处理，如质量控制、数据标准化、去除批次效应等，以确保数据的质量和可比性。定义评估指标根据具体的分析任务确定合适的评估指标。例如，对于细胞聚类任务，可以使用调
周勇教授：“分块集成算法为大数据分析提供可发展前景”
我们正处于数据呈现井喷式增长的时代，大数据已成为当前前沿研究和应用的热点问题，随着社会经济与科技活动变得日益互联多元，形成海量超高维的数据资源，这些资源与现代信息技术的结合极大地推动了大数据产业链的形成，科学技术的进步。在现代生活的各个领域，大数据的价值日益突显，例如，越来越多的机构收集存储并分
地面激光雷达数据为基础的叶倾角和方位角提取算法研究
叶片角度分布（Leaf Angle Distribution，LAD）包括叶倾角分布和方位角分布，是描述植被冠层结构的一个重要参数。由于叶片角度分布对植被冠层中光线的传输过程和光合有效辐射的分布有着显著的影响，因此它在陆地生态系统冠层生产力和碳循环研究中具有十分重要的作用。然而，传统测量设备和方法往
3大遥感数据源接入“商汤地界”AI遥感大模型
原文地址：http://news.sciencenet.cn/htmlnews/2024/3/519533.shtm近日，商汤科技宣布携手国内头部遥感数据平台“吉林一号网”、“四维地球”、“星图地球”，升级了其“SenseEarth智能遥感云”平台的数据源。用户无需准备数据，即可通过“商汤地界”平台
纳米孔测序“僵尸数据”困境破局！复旦大学联合新华医院推出LongBow算法
纳米孔测序技术凭借其长读长、可直接检测碱基修饰以及实时测序等优势，正在深刻改变生命科学与医学研究的格局。然而，在目前公开的超70万组数据中，约85%因缺乏关键元数据——特别是测序芯片类型与碱基识别配置信息——而成为难以有效利用的"僵尸数据"。近日，上海交通大学医学院附属新华医院与复旦大学合作开发的L
郭华东：大数据+大科学=大发现
中科院遥感与数字地球所所长 郭华东院士 “大数据是财富，是资源，是科研的战略高地。大数据正在改变人们的研究方式，是人类认识自然和行星地球的新钥匙。” 这是中国科学院院士、中科院遥感与数字地球所所长郭华东于日前在北京召开的大数据与科学发现国际研讨会上做出的判断。从数据发展历史看，19世纪70年代
遗传算法－的特点
（1）算法从问题解的串集开始搜索，而不是从单个解开始。这是遗传算法与传统优化算法的极大区别。传统优化算法是从单个初始值迭代求最优解的；容易误入局部最优解。遗传算法从串集开始搜索，覆盖面大，利于全局择优。（2）遗传算法同时处理群体中的多个个体，即对搜索空间中的多个解进行评估，减少了陷入局部最优解的风险
哈希算法原理和用途
哈希是一种加密算法，也称为散列函数或杂凑函数。哈希函数是一个公开函数，可以将任意长度的消息M映射成为一个长度较短且长度固定的值H（M），称H（M）为哈希值、散列值（Hash Value）、杂凑值或者消息摘要。它是一种单向密码体制，即一个从明文到密文的不可逆映射，只有加密过程，没有解密过程。
Nat－Comm|－张强锋组利用人工智能算法分析单细胞ATACseq数据
近年来，深度学习等人工智能技术在图像识别，自然语言处理等领域取得了令人瞩目的成就。人工智能技术应用于生命科学，对生物信息多个领域产生了重大的影响。深度学习算法借助于生命科学大数据的飞速发展，从海量大数据中自动高效地提取特征进行学习，极大超越了依赖人工提取特征的传统人工智能算法，在医疗图像处理、结
6大亮点！12所“双一流”高校就业数据大起底
谈起应届毕业生就业的话题，双一流人才的去向是其中一个备受瞩目的风向标。 日前，清华、北大等12所双一流高校陆续发布了《2021年毕业生就业质量报告》。在刚刚过去的一年，面对疫情形势反复、行业政策调整等种种变局，应届研究生的就业方向产生了一些刻着鲜明“时代烙印”的新变化。 而对大多数高校毕业生
6大亮点！12所“双一流”高校就业数据大起底
谈起应届毕业生就业的话题，双一流人才的去向是其中一个备受瞩目的风向标。 日前，清华、北大等12所双一流高校陆续发布了《2021年毕业生就业质量报告》。在刚刚过去的一年，面对疫情形势反复、行业政策调整等种种变局，应届研究生的就业方向产生了一些刻着鲜明“时代烙印”的新变化。 而对大多数高校毕业生