社区所有版块导航
Python
python开源   Django   Python   DjangoApp   pycharm  
DATA
docker   Elasticsearch  
aigc
aigc   chatgpt  
WEB开发
linux   MongoDB   Redis   DATABASE   NGINX   其他Web框架   web工具   zookeeper   tornado   NoSql   Bootstrap   js   peewee   Git   bottle   IE   MQ   Jquery  
机器学习
机器学习算法  
Python88.com
反馈   公告   社区推广  
产品
短视频  
印度
印度  
Py学习  »  aigc

SMG技术中心(SMT)主任、总经理林云川: AIGC时代数据为王,SMG探索传媒文化类内容生成范式

广电独家 • 5 月前 • 120 次点击  
文|「广电独家」林 沛
Al是今年广受关注的热点新技术之一,在传媒行业特别是视听行业更是掀起了重重浪潮。「广电独家」近日对话多家广电AIGC先发机构相关负责人,透析广电领域生成式人工智能的应用及优势,现存困难及解决方案。以下为上海台的做法。

作为省级广电媒体率先布局生成式人工智能(AIGC)领域的创新举措,上海广播电视台(SMG)2024年2月25日正式挂牌成立生成式人工智能媒体融合创新工作室。

在今年全国两会报道中,工作室推出了首个AIGC应用集成工具——Scube(智媒魔方)。

近年来,上海广播电视台持续推进专业媒体AI能力建设,已在业内具备一定领先优势。

SMG技术中心(SMT)党委副书记、主任、总经理林云川介绍,通过多年建设,中心已吸纳了多项市场上成熟的单项AI能力,在上海广播电视台的私有云上建设了一层AI公共服务层,以中间件形式嵌入到整个上海广播电视台的赋能媒体数字底座上,在每个需要的生产场景里,调用这些AI能力,形成智能汇聚、自动成稿、智能剪辑、智能检索、自动编目、媒体知识图谱、智能内容鉴别、智能播出监控等十余项行业专业应用。

SMG技术中心(SMT)党委副书记、主任、总经理林云川

基于SMG现有的海量高质量的媒体内容数据,林云川认为,SMG拥有对媒体特殊生产场景的训练能力,并使给出的结果为广电生产所用。

日前,SMG发布了中国首部AIGC系列公益广告片《因AI向善》,该片的美术、分镜、视频、配乐全部由AIGC完成,配音亦选用了上海广播电视台旗下数字主播申䒕雅的声音。

“在同等预算条件下,按照传统公益广告制作流程计算,《因AI向善》至少需要两周左右时间,而在AIGC赋能下,制作周期缩短至三天。”

 围绕特殊场景训练垂类模型,基于新技术更新生产力

「广电独家」:当前垂类模型是个大热点,你们也计划推出财经媒体、新闻资讯类大模型,就您看来,建设“大视听垂类模型”的基本理念有哪些?

林云川:深度学习的训练方法就是“算法+算力+数据”,算法和算力可以通用,但数据不行,大模型的所有能力都是基于你喂给它什么它才能推演什么,所谓非人工不智能,它不可能彻底无中生有。所以,这就很好理解我们为什么必须做垂类大模型。

作为专业传媒机构,我们有很多特殊的生产场景,比如围绕新闻资讯生产的一系列采编播存环节,新闻的文字语言、镜头语言与日常应用又有较大差异,所以针对这些特殊场景,我们需要对大模型进行专门的训练,给它投喂特殊的数据样本,不断调优,使它给出的结果能为生产所用。

否则,一个经常会一本正经胡说八道的模型,是不能真正提高我们的生产效益的。

「广电独家」:工作室的成立新闻中提到“文化传媒领域的AIGC”,就此领域看,您认为其建设和应用有何特性?

林云川:我们知道,AIGC就是AI生成内容,但事实上,这一阶段的AI还不是完全智能,它生成什么、怎么用是使用者决定的。作为主流媒体机构,我们要用好最新技术践行主流媒体的社会担当,把新技术转化为我们的新质生产力,做到“新闻立台、文化兴台、融合强台”。

比如我们在3月21日发布的中国首部AIGC系列公益广告片《因AI向善》,该片聚焦“绿色出行”“节约用水”“光盘行动”“垃圾分类”“礼貌用语”“公共场所”六大主题,综合运用可控图像生成、人物动态生成、文生视频等技术,强化技术研发与节目生产应用协同,将AIGC与具体公益场景紧密结合,把媒体新质生产力转化为公益传播力和价值引导力。

该片的美术、分镜、视频、配乐全部由AIGC完成,是生成式人工智能技术在公益场景应用的一次先锋实践。配音则选用了上海广播电视台旗下数字主播申䒕雅的声音。

相较于传统动画,AIGC可以快速生成具有丰富细节和逼真效果的动态场景,制作周期大大缩短,成本显著降低。在同等预算条件下,按照传统公益广告制作流程计算,《因AI向善》至少需要两周左右时间,而在AIGC赋能下,制作周期缩短至三天。

此外,人工智能在系列片策划制作过程中还能模拟多种风格,为创作者提供更多灵感和选择,也为公益广告在题材、创制、传播等方面开拓了广阔的发展空间。

 吸纳市场成熟单项能力,产生无限组合想象空间

「广电独家」:类似Scube这样产品化、品牌感强的AI应用一般都比较显眼,后续(或目前在计划中)是否还有意运营一些新的产品化的AIGC?

林云川:SMG将AI结合进生产场景,这项工作我们已经开展了五年多了,所以Scube里面有些AI的应用是已经在用的,不是最新应用。

人工智能、机器学习的研究已经开展了半个多世纪,在这一轮大模型热潮之前,事实上,无论国内还是国外,在ANI(Artificial Narrow Intelligence)领域已经有大量技术的商用落地,比如语音合成、语音转文字、图像识别、视频超分等。大众熟悉的科大讯飞、商汤,我们早有合作。

我们把这些市场上成熟的单项AI能力吸纳进来,在上海广播电视台的私有云上建设了一层AI公共服务层,以中间件形式嵌入到整个上海广播电视台的赋能媒体数字底座上,在每个需要的生产场景里调用这些AI能力,形成智能汇聚、自动成稿、智能剪辑、智能检索、自动编目、媒体知识图谱、智能内容鉴别、智能播出监控等十余项行业专业应用。

「广电独家」:如果说集成的功能似乎都并非新应用了,就您看来,Scube除了服务新闻采编的功能强大之外,有哪些比较显著的创新?

林云川:最近发布的Scube智媒魔方。之所以取名“cube”魔方,也就是表示这是一个个独立的媒体AI功能,可以产生无限组合想象的空间。

一方面,Scube是把原来这些已经在生产中实际应用、验证了多年的模块,再次整合展现在一个门户里。但一般情况下,用户不会直接使用Scube门户,因为我们已经把这些能力都聚合在生产场景里了。

但Scube的发布是我们的一次官宣,上海广播电视台决定把用得好的AI产品拿出来和内容生产领域的同行分享,希望能够让Scube里的这些能力赋能整个内容生产行业,所以从这个角度来说,Scube也是一个AI产品门户。

另一方面,后续的AI能力迭代计划也会在Scube的大框架之下,因为我们已经引入了大模型,背后是统一算力的支撑,并且,我们将大模型擅长的推理能力与原来单项的ANI场景结合,持续优化了场景的应用效果。

比如,编辑原来必须上载一篇文章,系统返回摘要,再人工优化,现在编辑只需要用对话形式,系统会自动从库内搜寻匹配的内容,并根据要求进一步执行更为复杂的工作。这就是我们说的“AI 时代,所有产品都值得用 AI 再做一遍”。

 布局重大应用场景建设,打造强大新型主流媒体

「广电独家」:此次成立专门针对AIGC的媒体融合创新实验室,基于怎样的顶层设计?工作室是否享有一些特别政策或专项的赋能?

林云川:上海广播电视台成立生成式人工智能媒体融合创新工作室,将重点布局文化传媒领域人工智能重大应用场景建设,加快推进人工智能大视听垂类模型的研发应用,推动基于AIGC的沉浸式、交互式视音频内容生成的示范应用,开展面向传媒文化类的AIGC内容生成范式探索。

工作室确立了财经媒体专属AI大模型、新闻资讯类大模型应用、智能语音和大语言模型应用、智能手语数字人、生成式智能与多媒体通信、人工智能应用下的传媒伦理研究等六大重点攻坚方向,着力推动传媒领域语料数据库的共建共享,推动数据处理工具的开发与维护,编制大模型传媒语料数据地方标准,发布传媒领域高质量语料数据集,加强人工智能媒体融合领域的理论研究和人才培养,助力上海打造人工智能世界级产业集群。

以工作室为平台,上海广播电视台集结内容创意和技术研发应用的优秀团队,将依托本台海量音视频内容优势资源,充分发挥自身内容原创及链接社会各方资源的优势能力,尤其是在时政、人文、财经、外宣、科技等优势领域深度开发应用场景的专业实力,携手相关社会机构及团队聚焦目标、铆定功能、务实推进,力争在年内打造引领传播新范式、具备广泛市场接受度的全新内容产品及传播场域。

未来,上海广播电视台还将携手多家头部科研机构、高校、企业,共同建立生成式人工智能研发应用产业联盟,本着“开放共享、协作共赢、相互赋能”的原则,就重大课题、重要项目、重头产品联合攻关,充分发挥各自优势,共同引领产业高质量发展。

「广电独家」:您认为广电系做AIGC的优势是什么?

林云川:刚才说了,模型训练得好,才能获得高效的利用价值,而模型训练的关键则是数据。

媒体融合十年来,党中央一直不变的要求就是要塑造主流舆论新格局,打造具有强大影响力和竞争力的新型主流媒体。

以前我们说内容为王、渠道为王,在AIGC时代,更加上了数据为王这个核心单元。而广电虽然数据量不如视频平台,特别是短视频平台那么海量,但我们恰恰拥有最符合主流价值观需求、最高质量的媒体内容数据,这些是绝佳的训练素材,也是我们在AIGC领域的发展利器。

  打造赋能媒体数字底座,支撑融媒体战略和数字化转型

「广电独家」:请您介绍一下您所在的机构。

林云川:上海广播电视台技术中心也是上海东方传媒技术有限公司(简称SMT),是上海广播电视台旗下唯一一家为文化传媒领域提供国内领先的“全媒体、全业务链、线上线下”综合科技服务的文化产业科技公司。


公司在4K/8K、AI、5G、MR+数据等新技术应用全国领先并在业内享有极高知名度,是“智慧媒体制播应用国家广播电视总局重点实验室”的落地单位,入选“上海市第二批人工智能试点应用场景”,取得了上海市高新企业、上海市科技小巨人企业、上海市技术中心等一系列资质。

自 2014 年市场化拓展正式起步以来,SMT深耕本地并不断拓展业务,形成良好的创新业务拓展生态,对外产业拓展以来当量增加五倍以上,在业内享有极大知名度。类似“SMT 天鹰转播”“魔 D电影工作室”“肥牛工作室 MR”等知名技术品牌也为世界同行所知晓。

公司发挥体育、电竞转播制作强势业务,积极走向海外市场,承担东京奥运会、平昌冬奥会、亚运会、军运会、各类电竞等大量国际国内重要大型综合赛事的公用信号制作,是国际奥运转播机构(OBS)在国内最信任的合作伙伴,拓展好国际市场,布局“双循环”,助力讲好中国故事。

「广电独家」是广电业界第一订阅号,「影视独家」透视影视热点,北京中广传华影视文化咨询有限公司运营,长按二维码可订阅。


请点赞”“在看”第一时间接收行业最新信息

Python社区是高质量的Python/Django开发社区
本文地址:http://www.python88.com/topic/169954
 
120 次点击