通义听悟是阿里云于2023年6月推出的基于大模型的工作学习AI助手,系通义家族首个面向消费级用户的产品。该产品依托通义千问大模型与语音AI技术,可实现音视频内容转写、全文摘要、章节速览及发言总结,支持会议、讲座等场景的信息提炼与知识资产沉淀,并与阿里云盘深度打通,支持云盘内音视频分析及字幕匹配。
2023年6月1日,通义听悟在阿里云峰会·粤港澳大湾区启动公测;同年11月于云栖大会正式上线。2024年3月新增音视频问答助手“小悟”,支持跨记录、多语言自由提问及最长6小时音视频解析。产品后续计划接入钉钉等平台,并集成至阿里巴巴内部应用(如钉钉闪记)中,持续拓展职场、教育等场景的垂直功能。
通义听悟是通义家族第一个面向大众消费者端的应用产品。
在多媒体时代,人们每天记录、分享和观看大量的音频视频内容,通义听悟通过前沿的语音AI技术,能够准确地将音频视频内容转写为易读的文字。不仅如此,结合通义千问大语言模型的强大理解能力,通过全文摘要、章节速览、发言总结等功能,使用户能够从不同角度“一目十行”地更高效“阅读”音视频内容。随着大模型能力的飞速进步,通义听悟能为用户提供更多先进的能力,帮助用户梳理和挖掘出音视频内容中的信息价值,并将所有的记录和收集都沉淀为知识资产,随时供用户回顾和利用。借助通义听悟,用户可以如实地记录一堂精彩的讲座、一次深度访谈或一场重要会议,它将成为用户身边的智能伙伴,“听”遍所有内容,“悟”得其中深意。
2023年6月1日,2023阿里云峰会·粤港澳大湾区于广州举行,阿里云智能首席技术官周靖人宣布推出通义家族最新产品——工作学习AI助手“通义听悟”,于6月1日开始正式公测。
2023年11月,阿里云在2023云栖大会正式上线通义听悟-工作学习AI助手。
2024年3月19日,阿里大模型产品“通义听悟”升级,音视频问答助手“小悟”上线,在业界首次实现单记录、跨记录、多语言自由问,支持对单个最长6小时、一次性上百条音视频的内容理解问答。
通义听悟当前已经与阿里云盘打通,存储在阿里云盘中的音频视频内容可以方便地导入通义听悟进行AI的分析和理解,在云盘内在线播放视频时也可自动匹配字幕。绑定阿里云盘账号的听悟用户可以共享阿里云盘超大存储空间,进行个人音视频的管理。
同时通义听悟的小程序版后续将在钉钉、阿里云盘等阿里旗下产品中推出,并与这些产品内部的场景功能及音视频内容融汇贯通。同时,通义听悟的AI能力也将进一步服务于阿里巴巴内部各类应用,如广受用户欢迎的“钉钉闪记”背后便集成了有关能力。
「通义听悟」简称听悟,是聚焦音视频内容的工作学习AI助手,依托大模型,为每一个人提供全新的音视频体验。
通义听悟可以在会议、学习、访谈、培训等场景下:
实时记录交流内容,同步翻译
批量转写音视频文件,区分发言人
智能提炼全文概要、章节速览、发言总结
自动提取关键词、问题、待办事项
编辑整理笔记,导出记录