老北京生活影像和3DAI主播为什么在2020年火爆全网

AI给我们的生活带来了许多乐趣,从AI美颜到AI变脸,再到今年火爆全网的AI修复1929年老北京生活的3分钟影像资料和全球首个3D版AI合成主播。这些新鲜有趣的应用为什么在2020年火爆全网?背后推动力是什么?

火爆B站的AI修复老北京影像–盲人”爵士”乐队

还有Frames技术,网卡把接收到的每一行像素整合成一张图片后再传输给CPU,也可以降低CPU的使用率。Mellanox的网卡也支持虚拟化和云化,能够满足高清视频传输的稳定性要求,也有助于开拓更广阔的市场。

70年代,朝鲜半岛最后一只朱鹮消失;

AI带给广电行业的两大变革

尝到了GPU渲染整片的甜头,博采传媒在继续探索纯第二部GPU渲染动画时,想要实现基于Unreal Engine(虚幻引擎)实现虚拟场景的反向投射。投射屏的尺寸规划是800平米,驱动这个巨型屏用NVIDIA GPU进行实时渲染测试还是有点慢。

定居洋县,“秦巴小江南”暖湿温润的气候,刘荫增早已适应。洋县感念这位老人,授予他“荣誉市民”。他则为自己的微信昵称取名“鹮叟”。

说起朱鹮的前世今生,老人眼中有光,话里含情。在不疾不徐的讲述中,他很少谈及自己,讲得最多的,是国家对朱鹮保护的重视和投入,是洋县群众为保护朱鹮被改变的生活,是一代代牧鹮人不舍昼夜的坚守……

“第一次上姚家沟,出发已是下午。走到天刚擦黑时,还走岔了山路。”路宝忠仍记得,4个20来岁的小伙子,肩挑锅碗瓢盆,背捆铺盖被褥,“借着山林里朦胧的月光,终于找回岔路口。晚上8点,才走到姚家沟。”

但SDI转换为IP解决方案之后,终端CPU处理协议栈的负载就会大幅上升。为此,Mellanox的网卡集成了Rivermax技术,解决SDI转IP化之后传输标准的问题,也就是通过这个技术发送符合SDI要求的数据。另外,借助是Kernel Bypass技术,将协议栈的大量负载放在网卡,大幅降低CPU的负载。

全球首个3D版AI合成主播新小微,图片来自新华社

小伙子们筋疲力尽,啃了点干粮,扯开铺盖卷儿,在海拔1200米的小山村倒头就睡。

NVIDIA 中国区高级技术市场经理施澄秋表示:“我们看到广电行业的趋势是从OTT(流媒体服务)向SVOD(视频点播)过渡,并且市场也在蓬勃壮大。在这个增长过程中,要么内容极剧爆炸、要么让老影片有更高分辨率。”

美樱花海不仅只有樱花,园区内还种有太空荷花、格桑花、硫华菊等20多种花卉,打造一年四季有花盛开的场景。除传统农业观光外,美樱花海还开设荷花、莲蓬、广柑采摘,生态鱼垂钓等多种旅游体验项目。

IP解决方案优势明显,但也面临一层的链路、二层的逻辑链路、三层路由转发、报文缓存等问题,带来了故障的排查就非常复杂。这需要What Just Happened技术,实时监测交换机的状态,以及网卡内部的一些信息,有助于故障的诊断和排查。

然而,4个年轻人却还有点蒙:朱鹮金贵,必须保护好;可是,它们吃啥?住哪?咋飞?“边干边学呗!”路宝忠小声念叨,“好在,有刘荫增老师呢。跟着北京专家学,强本领嘞!”

虚幻引擎和nDisplay技术不仅可以用于线性内容拍摄,还可以把场景分单元或者分组投射到不同屏幕上并进行融合,在演唱会上让观众和表演者能够更好的互动。Epic Games也和美国著名说唱歌手Travis Scott合作,在《堡垒之夜》游戏中进行演出,让粉丝可以一边玩游戏一边观看演唱会,实现了很好的传播。

GPU的实时渲染能力决定着数字人的逼真程度,据悉,要实现一个特别写实的数字人,脸部的模型、加上毛发等面数接近500-600万。这个量级上,要做到面部表情、整个身体实时驱动,需要帧率保持在50-60帧之间,因此算力是主要的瓶颈所在。

很快,一道道保护朱鹮的紧急指令,从北京到洋县,相继作出。

“美樱花海是我打造的第三个项目,将苗木销售、种子培育与樱花景区结合。”2015年,苏健波结合人流量、景观价值、地理位置等综合因素,在气候温暖湿润、适合樱花生长的重庆江津区石门镇建立以台湾牡丹樱花为主的美樱花海。据悉,美樱花海于2017年2月正式开园,总投资6900万元人民币,一期占地面积600亩,其中包括65000余株樱花树及酒店、餐厅、接待中心等园区配套设施建设,园区定期举办樱花节、荷花季江南油纸伞体验等多种文化交流活动,目前已累计接待游客近55万人次。

基于虚幻引擎的天气播报,图片来自unrealengine

“架起望远镜,一对朱鹮成鸟栖于树上,巢里3只幼雏嗷嗷待哺。”刘荫增屏住呼吸,生怕惊扰了它们。“朱鹮啊朱鹮,跑遍大半个中国,3年的心血没白费,可把你们找到啦!”

抵洋县县城,驱车30公里,直奔姚家沟。

博采传媒前期部总监沈辰奇也表示:“2017年我们推出了国内第一部全部用GPU渲染而成的动画电影《昆塔:反转星球》,GPU渲染比以前用CPU渲染的成本优秀太多,但仍然是我们制作流程的一个瓶颈。”

命运被改变的,不只朱鹮。

呵护备至,7只朱鹮开枝散叶,如今已繁衍至5000余只。它们飞出洋县,飞越秦岭,飞向全国,飞到海外,种群濒临灭绝的命运得以逆转。

施澄秋对播报的3D版AI主播新小微一亮相就获得了极大的关注。

60年代,俄罗斯远东地区朱鹮灭绝;

“草原自然公园,是以国家公园为主体的自然保护地体系的重要组成部分。通过建设国家草原自然公园,将填补这一类重要自然保护地的空白。”李树铭说,这有助于保护、传承和弘扬优秀草原文化,开展生态旅游,并为实施乡村振兴战略提供重要抓手。

“我们判断,SDI转向数据中心里的IP解决方案是大概率事件,后者不仅成本比定制化SDI成本更低,带宽也更高。” 陈龙介绍。

姚家沟因朱鹮而闪光:刘荫增率队苦苦寻觅3年,辗转十几个省份、260多个朱鹮历史分布点,行程5万多公里,终在这里发现7只野生朱鹮。

被列为“国际保护鸟”的朱鹮,又名朱鹭,有“东方宝石”之誉,历史上广泛分布于我国大部分地区和朝鲜半岛、俄罗斯远东、日本等地。

“中国到底还有没有朱鹮?”刘荫增一行踏上寻鹮之路。根据历史上朱鹮分布情况,刘荫增在辽宁、山东、陕西、甘肃等十几个省份展开调查,到处给群众展览朱鹮的照片,趁放电影时插播朱鹮的幻灯片,发动群众协助寻找。“很多人热情地提供信息,一些单位热心报告情况,可两年多时间过去,没发现有价值的线索。”

“山上坡滑路险,咱下车,步行!”同行向导一声吆喝,带队在秦岭南麓的草木间,涉水穿林而行。山愈高,蝉愈鸣,一行人话愈少,只剩粗粗的喘气声。

刘荫增介绍,对栖息环境,朱鹮很挑剔,至少要具备三个条件:要有高大茂密的树木,这是营巢的需要;要有水田、河湖,这是觅食的需要;与人比邻而居,但又环境僻静,这是避免天敌袭击的需要。

“跑遍大半个中国,3年的心血没白费,可把你们找到啦”

SDI转向IP,高清视频的时代即将到来

第二天天刚蒙蒙亮,刘荫增急忙动身,顺着昨晚朱鹮消失的方向,翻过两座山坡,来到森林茂密的姚家沟。远远望去,绿林蓊郁,几户农家、几方水田,宛若“世外桃源”。

解决了拍摄背景的问题,博采传媒开发了一个基于超写实的数字人项目,可以用于代言、直播等。

“搬哪儿去?”孩子们一愣。刘荫增微微一笑,指向地图上秦岭南麓的洋县——他要到“朱鹮故乡”守望。

雷锋网原创文章,。详情见转载须知。

台湾牡丹樱花花期为2月初-3月初,盛开时节满树红艳烂漫。苏健波利用台湾牡丹樱花早开花的时间优势,以及与重庆市主城区粉色、白色樱花不同的颜色优势,通过大片栽培,营造“花海”景观。

1981年,日本捕获最后几只野生朱鹮,实施人工饲养,但未能繁育出后代……

雷锋网了解到,Mellanox已经与全球各大视频解决方案合作商开发了不同的产品,打入了NBC、BBC、CNN等著名的视频内容提供商。

随后几天,驻扎姚家沟。凭借经验,刘荫增的目光锁定在半山腰农家旁,那15株高大郁葱的百年青冈树。

而我国自1964年在甘肃捕获一只朱鹮后,再无朱鹮的消息,这种珍禽一度被认为在我国已灭绝。

自从看到朱鹮的第一眼,刘荫增似乎与之有了约定。3年前,在北京生活80年后,他决定搬家。

为图像处理而生的GPU是不二的选择。据悉,NVIDIA有一项叫做NGX的技术,先用像DeepRemaster这样自动完成画面修补、美化和降噪的AI算法对GPU进行训练,然后NGX就能“无中生有”来做画面插帧、超级分辨率、慢动作等。

刘荫增不甘心,他决定复查几个可能性大的地区。“陕西秦岭地区就是其中一个,历史上这一带朱鹮多,且地处偏僻,农业机械化程度低,自然环境变化相对小。”

时针拨回到1978年,中国科学院动物研究所鸟类专家刘荫增受命寻找朱鹮,3年跋涉5万余公里,1981年5月,在洋县发现世上仅存的7只野生朱鹮。

图为游客参观美樱花海景区。受访者供图

在朱鹮被重新发现的第四十个年头,我们走进秦岭南北,在朱鹮的蹁跹起舞中,聆听这曲人与自然的命运交响,记录生态文明史上的这一传奇。

“现在美樱花海正在不断扩大在建面积,将打造配备动力脚踏船、亲水餐厅等配套设施的水库。”苏健波表示,美樱花海计划在园区内融入更多樱花文化,形成四季赏花、乡村生态休闲旅游、酒店住宿为一体的综合游乐项目,为游客带来更好的旅游休闲体验。

“当时我一点都不惊喜,以往这类报告,都价值不大。”刘荫增摆出一大堆照片,让何丑蛋辨认,“没想到,他挑的照片非常精准!”

图为美樱花海景区。受访者供图

陈龙说:“要IP化,只需要将价格昂贵的SDI加速卡换为Mellanox的网卡,可以支持10G、25G、50G、100G、200G乃至400G的传输带宽。当设备IP化之后,不仅解决了传输带宽不够、传输距离过短的主要的痛点,还降低了整个设备的采购成本。除此之外,因为本身IP是一个弹性的管道,在IP之上能够传输任意格式的报文。”

GPU“无中生有”修复过去

2004年,在积累了一定资金和经验后,苏健波在四川省南充市建立以樱花种植培育、苗木销售为主的苗圃。5年后,苏健波回归家乡重庆,在重庆市南岸区创办健源苗圃。

此时的姚家沟,只住着7户人家。光照充足的沟内,种着35亩稻田。村民与朱鹮“似见非见”,互不侵扰,过着各自安好的宁静生活。

第二天,大清早睡醒,几个人方才打量一番:农家废弃的3间黑瓦房,房梁柱破烂不堪;一座旧灶台,两口锅锈迹斑斑;地面疙疙瘩瘩,山下背去的小饭桌,四条腿怎么也支不平。

施澄秋说:“GPU在3D建模、3D图形图像电视广电素材的片源制作中非常有优势。图灵架构的RTX GPU非常擅长实时渲染,能够满足数字人的渲染能力和算力要求。另外,交互式、对话式AI也可以应用到数字人中。”

修复老北京生活影像和3D AI主播恰好代表了AI给广播电影电视行业带来的两个变革——对过去缺损画面、素材残缺像素的“无中生有”,以及实时渲染带来的更强互动性。

由此,一场拯救朱鹮的行动迅即开启。

大伙儿正失落,一声鸟鸣传来。“抬头一看,两只大鸟划过天际,翅膀边缘,正是淡红色羽毛!”刘荫增不禁大声叫了起来:“就是它!”

如果用4根3G带宽的SDI传输4K视频,成本变高且组网复杂。直接换12G带宽的SDI,由于高速信号在SDI铜缆中传输距离和速率成反比,只能传输大概50米的距离,不能满足广电行业需求。8K的最低带宽需求将达到25G-140G,SDI更难以满足需求。

他要求,各地在试点中要处理好草原生态保护和合理利用的关系,遵循“生态优先、绿色发展、科学利用、高效管理”的基本原则,充分尊重原住农牧民及相关利益主体合法权益,在此基础上开展适度放牧、生态旅游、科普宣教、科研监测、文化体验等活动,走绿色可持续发展道路。

洋县林业局抽调4名年轻人,进驻姚家沟,对朱鹮一举一动24小时监护。洋县林业局干部路宝忠,刚到西北大学参加了野生动物保护方面的培训班,被紧急抽调,担当领队。

5公里山路,爬了一个半小时。攀上姚家沟,一座“保护朱鹮纪念碑”映入眼帘,上书“这一风景秀美的小山村已成为当今世界生物多样性保护史上靓丽的闪光点”。

然而,进入20世纪以来,朱鹮栖息环境遭到破坏,种群数量急剧减少——

数字人是给观众带来不一样的体验,Epic Games的虚幻引擎则帮助创作者更好的创新,它被越来越多地用来做实时预览、特效预中期预演、后期预演等。Epic Games China商务发展经理徐良安表示:“虚幻引擎不仅可以让所有参与制作的人员都可以实时修改,实时看到效果,具有很大的灵活性,还能大大节约成本。”

实时渲染正在打破行业的边界。新奥特产品中心总监王宁也表示:“去年开始,4K、8K的内容越来越广泛。以前我们是通过CPU进行渲染加速,CPU能处理更多线程,但实时渲染能力不强,所以我们选择了NVIDIA的RTX系列GPU。特别是像我们石墨超清在线需要实时呈现到大屏幕的,需要GPU的显存能力。”

面向数据中心的安培架构A100 GPU已经在5月推出,安培架构游戏GPU+Mellanox网卡又会把专业可视化行业引向何方?

洋县发布紧急通知:朱鹮活动区域内,实施“四不准”:不准狩猎,不准砍伐树木,不准使用农药,不准开荒放炮。

在姚家沟一带,刘荫增共发现7只野生朱鹮。消息一出,传遍世界。

除此之外,基于GPU的AI也能应用到智能插播广告,通过AI算法插入5-10秒的广告,既不影响观众的收看体验,也让广电的互动变成双向互动。

北京国际广播电影电视展览会(BIRTV)2020期间的一场媒体活动上,NVIDIA专业可视化亚太区业务主管沈威表示,传统“离线式”渲染、预录式的内容无法加入更多互动和特效的直播视频内容已经不能够满足当前广播电视行业的需求,尤其是当下的AI时代。利用NVIDA GPU的实时光线追踪技术及深度学习技术,可以为广播电影电视行业带来更多不一样的体验。

“1978年,我突然接到任务:走访全国,寻找朱鹮。没找到,要向国际鸟类学界如实说明中国朱鹮已绝迹;找到了,要研究下一步如何保护。”忆往昔,刘荫增感慨万千,“在这么大一个中国,找一种濒临灭绝的鸟,不是大海捞针吗?当时压力之大,可想而知。”

广电行业正在越来越多地探索与AI的结合,基于更强大的GPU和优化的技术,AI正越来越多的应用于提升分辨率,包括降噪、插帧、插植等应用中,让珍贵的旧视频焕发新的生命力,再次吸引大家的注意力。同时,GPU更强大的实时渲染能力也让直播或者视频内容的制作增加了更多互动和特效,更加灵活和高效的创作方式打破了行业的边界,为未来的创新奠定基础,当然,这里面还需要SDI专向IP解决方案,满足4K/8K的视频传输需求。

总体工作思路敲定:就地保护。

“好在瓦房里外透风,夏天倒也凉爽。”路宝忠打趣说。大伙儿边逗乐,边规整行李,总算有了安营扎寨的落脚地。

延伸阅读 湖北黄梅近500名高考生因暴雨被困 300余人按时进场 黄梅500名被困考生已补时考试 11:30前全部完成开考 实拍黄梅县山体滑坡:路面积水齐腰深 房屋被冲垮

“我们最后选择了NVIDIA RTX 8000,利用nDisplay技术,实时驱动1.8亿个像素点。在实际拍摄时,摄影基地的景深和透视的变化完全同步匹配。这其中革命性的意义在于把后期合成的环节砍掉,做到所见即所得。”沈辰奇指出。

种群弱小,生存极危。对这仅有的7只“宝贝疙瘩”,咋办?

国家林草局副局长李树铭在会上说,草原被誉为地球的“皮肤”,是陆地生态系统的主体之一,是国家重要的生态安全屏障,也是农牧民生活的家园和重要的生产资料、广大人民群众休憩的绿色空间。为了全力推进林草融合发展,保护修复草原,国家林草局决定开展试点推进国家草原自然公园建设。

据了解,为落实国家乡村振兴战略规划,建立“渝创渝新”创业服务有效机制,重庆市人力社保局主办,重庆市就业服务管理局承办“渝创渝新乡村振兴”创业加速计划,该计划通过深度跟踪,为美樱花海等10家计划帮扶农产品企业解决资金紧张、营收减少等问题,助力企业脱困或转型升级。作为该计划执行公司之一,重庆清控承智科技服务有限公司积极为美樱花海项目协调政府、专家及相关组织支持,在完成前期线上调研、1V1问诊、资源对接等工作后,总结帮扶经验,并将计划通过实地游学、服务运营等方式实现扶持优质创业项目,助力乡村振兴。

这是记者29日在内蒙古召开的国家草原自然公园试点建设启动会上了解到的。

7月份火遍全网的1929年的老北京生活视频,不仅用AI对视频进行上色、补帧、提升了分辨率,还通过时代原声还原了老北京味。这个视频的火爆离不开新的AI算法DeepRemaster,当然也需要有强大硬件作为支撑。

1981年5月,刘荫增第三次来到洋县。跟往常一样,他四处奔波,赶在乡村放电影时,插播朱鹮幻灯片。一次,在县电影院放完片子后,孤魂庙村村民何丑蛋找上门,说见过这种鸟,“不过我们这儿不叫朱鹮,叫红鹤”。

雷锋网(公众号:雷锋网)小结

“此外,我们向周边农户传授花木嫁接技术,并在园区内设立免费的农副产品摊位,已累计为百余位村民提供就业机会。”苏健波介绍到。美樱花海樱花节也更好的带动了石门镇5000余亩晚熟柑橘销售和周边餐饮、住宿等第三产业发展,助力当地村民和产业增收。

性能更强的图灵架构RTX GPU是让老北京视频、数字人在2020年备受关注的重要因素,但这些AI应用能否普及还有一个关键因素——视频传输。NVIDIA Mellanox 高级市场开发经理陈龙指出,1080P以前,广电行业的视频传输靠SDI (Serial Digital Interface,数字分量串行接口)。随着4K和8K业务的兴起,SDI不能满足4K视频8G-9G的传输带宽需求。

此次确定的39处国家草原自然公园试点,面积14.7万公顷,涵盖温性草原、草甸草原、高寒草原等类型,涉及11个省(区)和新疆生产建设兵团、黑龙江省农垦总局,区域生态地位重要,代表性强,民族民俗文化特色鲜明。

“朱鹮飞,我们跑。飞到哪儿,跟到哪儿”

时已过午,兴奋的刘荫增决定即刻去现场。徒步翻过崎岖山梁,抵达海拔上千米的金家河村时,已是傍晚时分。可环顾山林,什么也没有。