中科院大模型重磅更新！神经外科手术、研读交通违反规定图像都能用上

据央视新闻，中国科学院自动化研究所今天（16日）上午在上海发布了该研究所的新一代人类智能大模型——紫东太初2.0。全新大模型比较第一代着力提升了决策与判定能力，事实发现了从感知、认知到决策的跨越，未来将在医疗、交通、工业生产等领域发挥更大的作用。 人类智能大型模型是一个大型复杂的网络系统，类似于人类的大脑，其中的节点和数据量越来越多，处理能力也越来越强，通常这种大型模型节点数都在百亿以上。做为我国第一个存贮千亿参数字的图文音三模态大模型，第一代紫东方初人智能大模型在2021年问世时实现了无标记的图像、文字、语声音的识别能力，这次发布的新一代大模型则升级融合了视频、传感信息号、3D点云等识别能力，突破了多模态分类识别码、破解码，全模态识别等关关键技术，提升了系统的决策和判断能力，打通了系统知识别能从感知、认识到决策的通路，从而拓宽出更广泛的应用场景。目前，紫东太初模型已在神经外科手术导航、短视频内容审查核、医疗多模态鉴定别诊断、交通违反规定图像研读等多领域应用。 全球首个全模态大模型发布 已应用在法律、交通、医疗等领域 据财联社报道，在文本、图片、音频的基础上，“紫东太初”2.0融入了3D、视频、传感信号等更多模态数据，并优化语音、视频和文本的融合认知以及常识计算等功能，进一步突破感知、认知和决策的交互屏障。业内人士表示，紫东太初2.0这样的全模态大模型是通向通用人工智能道路上必不可少的一步。 值得一提的是，此前华为昇腾AI开发者峰会上，“紫东太初”大模型还开放了基于昇腾和昇思的3.8B图像-文本-语音多模态模型，并推出了紫东太初大模型服务平台。该模型已在多个行业场景领域显示出落地潜力，包括手语教学、法律咨询、交通出行、广电、医疗机器人和医学影像判读等。 根据模态，可以将AI大模型分为单模态、多模态、全模态等不同类型，比如GPT-3就属单模态大模型，紫东太初1.0和GPT-4属于多模态大模型，紫东太初2.0是全球首个全模态大模型。全模态大模型，指可以利用文本、图片、音频、视频、3D等不同模态的数据进行跨模态的统一表征和学习，更接近人类的学习方式。 据中新网报道，中科院自动化所“紫东太初”大模型研究中心常务副主任、武汉人工智能研究院院长王金桥研究员透露，在法律咨询行业，“紫东太初”大模型仅用0.546秒就可对法律案件进行拆解、提取关键事件，在办公效率方面实现案件分析速度的百倍提升，可有效解决律师整体资源匮乏、服务成本高等问题。 在智慧交通领域，基于“紫东太初”大模型构建的面向公路路网孪生仿真、调度、养护、节能、服务等全周期、全天候、安全安心的数智平台，让道路通行率有效提升30%。 在医疗领域，基于“紫东太初”打造的MicroNeuro颅内微创手术机器人系统已完成国际首例深位颅内活检手术，支持视觉、触觉的跨模态融合，该大模型的升级也将加速优化针对神经外科手术场景的自主理解。 李开复：这是有史以来最大平台革命 6月16日，人民日报发表评论员文章指出，经过多方努力，我国人工智能大模型已具有一定基础。在2023中关村论坛上发布的《中国人工智能大模型地图研究报告》显示，中国人工智能大模型正呈现蓬勃发展态势。据不完全统计，截至目前，10亿级参数规模以上的大模型全国已发布了79个。我国在大模型方面已建立起涵盖理论方法和软硬件技术的体系化研发能力。也应看到，人工智能大模型离不开多项技术的融合创新。在前沿基础理论和算法上，我国与国际先进水平还存在差距。筑牢智能时代的根基，需要瞄准短板，着力推动大模型领域生成式算法、框架等原创性技术突破。同时，还应发挥我国应用场景优势，进一步深耕垂直领域，以行业专有训练数据集为基础，打造金融、医疗、电力等领域的专业大模型。要以高质量应用和数据反馈技术优化，帮助大模型迭代升级。 数据质量影响大模型“智商”。国际上一些大模型之所以领先，与大量公开高质量数据的训练息息相关。我国有海量数据和丰富应用场景，应逐步开放共享优质数据，通过制定共享目录和共享规则等方式，推动数据分级分类有序开放，让流动数据激发创新活力。例如，前不久印发的《深圳市加快推动人工智能高质量发展高水平应用行动方案（2023—2024年）》提出，“建立多模态公共数据集，打造高质量中文语料数据”。期待各地各行业从实际出发，加强高质量数据供给，为大模型成长提供充足“养料”。 据《中国经济周刊》，创新工场董事长兼CEO李开复已经投身人工智能超过40年，他戏称自己是“投资人中最懂AI的，AI科学家中最懂投资的”。他从投资和产业发展的角度认为，随着大模型的崛起，人工智能的发展已经从AI1.0时代进入AI2.0时代。 “AI大模型是绝对不能错过的历史机遇。因为这将是有史以来最大的平台革命，它将比Windows、安卓要大10倍甚至更多，它会让每个应用改写，会重构人类的工作，会让有创意的那些人的聪明才智被放大10倍或者更多。”李开复说。 图片来源：视觉中国 “人类历史上可能也就只有三四次这样的机会。大模型赛道是未来的兵家必争之地，因此，自主创新将是中国企业的必经之路和重大责任。”李开复表示。 编辑|王月龙杜恒峰 校对|孙志成 每日经济新闻综合自央视新闻、财联社、中新网、中国经济周刊