Al是今年广受关注的热点新技术之一,在传媒行业特别是视听行业更是掀起了重重浪潮。「广电独家」近日对话多家广电AIGC先发机构相关负责人,透析广电领域生成式人工智能的应用及优势,现存困难及解决方案。以下为上海台的做法。作为省级广电媒体率先布局生成式人工智能(AIGC)领域的创新举措,上海广播电视台(SMG)2024年2月25日正式挂牌成立生成式人工智能媒体融合创新工作室。
在今年全国两会报道中,工作室推出了首个AIGC应用集成工具——Scube(智媒魔方)。
近年来,上海广播电视台持续推进专业媒体AI能力建设,已在业内具备一定领先优势。
据SMG技术中心(SMT)党委副书记、主任、总经理林云川介绍,通过多年建设,中心已吸纳了多项市场上成熟的单项AI能力,在上海广播电视台的私有云上建设了一层AI公共服务层,以中间件形式嵌入到整个上海广播电视台的赋能媒体数字底座上,在每个需要的生产场景里,调用这些AI能力,形成智能汇聚、自动成稿、智能剪辑、智能检索、自动编目、媒体知识图谱、智能内容鉴别、智能播出监控等十余项行业专业应用。
SMG技术中心(SMT)党委副书记、主任、总经理林云川
基于SMG现有的海量高质量的媒体内容数据,林云川认为,SMG拥有对媒体特殊生产场景的训练能力,并使给出的结果为广电生产所用。
日前,SMG发布了中国首部AIGC系列公益广告片《因AI向善》,该片的美术、分镜、视频、配乐全部由AIGC完成,配音亦选用了上海广播电视台旗下数字主播申䒕雅的声音。
“在同等预算条件下,按照传统公益广告制作流程计算,《因AI向善》至少需要两周左右时间,而在AIGC赋能下,制作周期缩短至三天。”
▍围绕特殊场景训练垂类模型,基于新技术更新生产力
「广电独家」:当前垂类模型是个大热点,你们也计划推出财经媒体、新闻资讯类大模型,就您看来,建设“大视听垂类模型”的基本理念有哪些?
林云川:深度学习的训练方法就是“算法+算力+数据”,算法和算力可以通用,但数据不行,大模型的所有能力都是基于你喂给它什么它才能推演什么,所谓非人工不智能,它不可能彻底无中生有。所以,这就很好理解我们为什么必须做垂类大模型。
作为专业传媒机构,我们有很多特殊的生产场景,比如围绕新闻资讯生产的一系列采编播存环节,新闻的文字语言、镜头语言与日常应用又有较大差异,所以针对这些特殊场景,我们需要对大模型进行专门的训练,给它投喂特殊的数据样本,不断调优,使它给出的结果能为生产所用。
否则,一个经常会一本正经胡说八道的模型,是不能真正提高我们的生产效益的。
「广电独家」:工作室的成立新闻中提到“文化传媒领域的AIGC”,就此领域看,您认为其建设和应用有何特性?
林云川:我们知道,AIGC就是AI生成内容,但事实上,这一阶段的AI还不是完全智能,它生成什么、怎么用是使用者决定的。作为主流媒体机构,我们要用好最新技术践行主流媒体的社会担当,把新技术转化为我们的新质生产力,做到“新闻立台、文化兴台、融合强台”。
比如我们在3月21日发布的中国首部AIGC系列公益广告片《因AI向善》,该片聚焦“绿色出行”“节约用水”“光盘行动”“垃圾分类”“礼貌用语”“公共场所”六大主题,综合运用可控图像生成、人物动态生成、文生视频等技术,强化技术研发与节目生产应用协同,将AIGC与具体公益场景紧密结合,把媒体新质生产力转化为公益传播力和价值引导力。
该片的美术、分镜、视频、配乐全部由AIGC完成,是生成式人工智能技术在公益场景应用的一次先锋实践。配音则选用了上海广播电视台旗下数字主播申䒕雅的声音。
相较于传统动画,AIGC可以快速生成具有丰富细节和逼真效果的动态场景,制作周期大大缩短,成本显著降低。在同等预算条件下,按照传统公益广告制作流程计算,《因AI向善》至少需要两周左右时间,而在AIGC赋能下,制作周期缩短至三天。
此外,人工智能在系列片策划制作过程中还能模拟多种风格,为创作者提供更多灵感和选择,也为公益广告在题材、创制、传播等方面开拓了广阔的发展空间。
▍吸纳市场成熟单项能力,产生无限组合想象空间
「广电独家」:类似Scube这样产品化、品牌感强的AI应用一般都比较显眼,后续(或目前在计划中)是否还有意运营一些新的产品化的AIGC?
林云川:SMG将AI结合进生产场景,这项工作我们已经开展了五年多了,所以Scube里面有些AI的应用是已经在用的,不是最新应用。
人工智能、机器学习的研究已经开展了半个多世纪,在这一轮大模型热潮之前,事实上,无论国内还是国外,在ANI(Artificial Narrow Intelligence)领域已经有大量技术的商用落地,比如语音合成、语音转文字、图像识别、视频超分等。大众熟悉的科大讯飞、商汤,我们早有合作。
我们把这些市场上成熟的单项AI能力吸纳进来,在上海广播电视台的私有云上建设了一层AI公共服务层,以中间件形式嵌入到整个上海广播电视台的赋能媒体数字底座上,在每个需要的生产场景里调用这些AI能力,形成智能汇聚、自动成稿、智能剪辑、智能检索、自动编目、媒体知识图谱、智能内容鉴别、智能播出监控等十余项行业专业应用。
「广电独家」:如果说集成的功能似乎都并非新应用了,就您看来,Scube除了服务新闻采编的功能强大之外,有哪些比较显著的创新?
林云川:最近发布的Scube智媒魔方。之所以取名“cube”魔方,也就是表示这是一个个独立的媒体AI功能,可以产生无限组合想象的空间。
一方面,Scube是把原来这些已经在生产中实际应用、验证了多年的模块,再次整合展现在一个门户里。但一般情况下,用户不会直接使用Scube门户,因为我们已经把这些能力都聚合在生产场景里了。
但Scube的发布是我们的一次官宣,上海广播电视台决定把用得好的AI产品拿出来和内容生产领域的同行分享,希望能够让Scube里的这些能力赋能整个内容生产行业,所以从这个角度来说,Scube也是一个AI产品门户。
另一方面,后续的AI能力迭代计划也会在Scube的大框架之下,因为我们已经引入了大模型,背后是统一算力的支撑,并且,我们将大模型擅长的推理能力与原来单项的ANI场景结合,持续优化了场景的应用效果。
比如,编辑原来必须上载一篇文章,系统返回摘要,再人工优化,现在编辑只需要用对话形式,系统会自动从库内搜寻匹配的内容,并根据要求进一步执行更为复杂的工作。这就是我们说的“AI 时代,所有产品都值得用 AI 再做一遍”。
▍布局重大应用场景建设,打造强大新型主流媒体
「广电独家」:此次成立专门针对AIGC的媒体融合创新实验室,基于怎样的顶层设计?工作室是否享有一些特别政策或专项的赋能?
林云川:上海广播电视台成立生成式人工智能媒体融合创新工作室,将重点布局文化传媒领域人工智能重大应用场景建设,加快推进人工智能大视听垂类模型的研发应用,推动基于AIGC的沉浸式、交互式视音频内容生成的示范应用,开展面向传媒文化类的AIGC内容生成范式探索。
工作室确立了财经媒体专属AI大模型、新闻资讯类大模型应用、智能语音和大语言模型应用、智能手语数字人、生成式智能与多媒体通信、人工智能应用下的传媒伦理研究等六大重点攻坚方向,着力推动传媒领域语料数据库的共建共享,推动数据处理工具的开发与维护,编制大模型传媒语料数据地方标准,发布传媒领域高质量语料数据集,加强人工智能媒体融合领域的理论研究和人才培养,助力上海打造人工智能世界级产业集群。
以工作室为平台,上海广播电视台集结内容创意和技术研发应用的优秀团队,将依托本台海量音视频内容优势资源,充分发挥自身内容原创及链接社会各方资源的优势能力,尤其是在时政、人文、财经、外宣、科技等优势领域深度开发应用场景的专业实力,携手相关社会机构及团队聚焦目标、铆定功能、务实推进,力争在年内打造引领传播新范式、具备广泛市场接受度的全新内容产品及传播场域。
未来,上海广播电视台还将携手多家头部科研机构、高校、企业,共同建立生成式人工智能研发应用产业联盟,本着“开放共享、协作共赢、相互赋能”的原则,就重大课题、重要项目、重头产品联合攻关,充分发挥各自优势,共同引领产业高质量发展。
「广电独家」:您认为广电系做AIGC的优势是什么?
林云川:刚才说了,模型训练得好,才能获得高效的利用价值,而模型训练的关键则是数据。
媒体融合十年来,党中央一直不变的要求就是要塑造主流舆论新格局,打造具有强大影响力和竞争力的新型主流媒体。
以前我们说内容为王、渠道为王,在AIGC时代,更加上了数据为王这个核心单元。而广电虽然数据量不如视频平台,特别是短视频平台那么海量,但我们恰恰拥有最符合主流价值观需求、最高质量的媒体内容数据,这些是绝佳的训练素材,也是我们在AIGC领域的发展利器。
▍打造赋能媒体数字底座,支撑融媒体战略和数字化转型
「广电独家」:请您介绍一下您所在的机构。
林云川:上海广播电视台技术中心也是上海东方传媒技术有限公司(简称SMT),是上海广播电视台旗下唯一一家为文化传媒领域提供国内领先的“全媒体、全业务链、线上线下”综合科技服务的文化产业科技公司。
公司在4K/8K、AI、5G、MR+数据等新技术应用全国领先并在业内享有极高知名度,是“智慧媒体制播应用国家广播电视总局重点实验室”的落地单位,入选“上海市第二批人工智能试点应用场景”,取得了上海市高新企业、上海市科技小巨人企业、上海市技术中心等一系列资质。
自 2014 年市场化拓展正式起步以来,SMT深耕本地并不断拓展业务,形成良好的创新业务拓展生态,对外产业拓展以来当量增加五倍以上,在业内享有极大知名度。类似“SMT 天鹰转播”“魔 D电影工作室”“肥牛工作室 MR”等知名技术品牌也为世界同行所知晓。
公司发挥体育、电竞转播制作强势业务,积极走向海外市场,承担东京奥运会、平昌冬奥会、亚运会、军运会、各类电竞等大量国际国内重要大型综合赛事的公用信号制作,是国际奥运转播机构(OBS)在国内最信任的合作伙伴,拓展好国际市场,布局“双循环”,助力讲好中国故事。
「广电独家」是广电业界第一订阅号,「影视独家」透视影视热点,北京中广传华影视文化咨询有限公司运营,长按二维码可订阅。
请点“赞”和“在看”,第一时间接收行业最新信息