每周一期，纵览音视频技术领域的干货。
新闻投稿：[email protected]。
对话阿里云：解锁视频云的新技术、新场景
伴随着视频技术的进步和标准的迭代，视频产业从模拟进入到数字时代，完成了从电影电视到互联网的媒介转换，并且衍生出了超高清、3D、AR/VR等多种创新形态。特别是在后疫情的当下，我们可以看到音视频技术领域的诸多新变化，云与端的协同互动、算法创新与工程应用的深度交合、场景与需求的渗透促进，在严峻的挑战下，为各行各业带来了新的场景与活力。在即将举办的LiveVideoStackCon 2021北京站，来自阿里云智能视频云的专家将与众多行业伙伴，一同探索与探讨视频云技术在云上的创新探索。为此，我们采访了阿里巴巴研究员——叶琰，以及资深技术专家——何亚明，与两位专家围绕编解码技术及视频云的新场景应用展开了深入对话。
IBM Cloud：裸金属服务器+多云策略助力音视频解决方案成功出海
到底什么是公有云、私有云和混合云？疫情给云服务厂商带来了哪些挑战？IBM是如何助力音视频解决方案成功出海的？“后疫情”时代音视频的下一个风口在哪里？对此，LiveVideoStack很荣幸地采访到了来自IBM云平台事业部，资深云计算架构师——胡磊，聊一聊他对这些问题的看法和观点。
PCS2021：监控视频编码基于实例分割的背景参考帧生成
对于监控视频系统来说，最重要的两个模块是智能分析和视频压缩。传统的监控系统中对于两项任务都是分别处理的，导致效率低下。论文提出将两项任务混合处理的方法，既能高效分析又能提高压缩效率，即提取的语义信息不仅用于智能分析任务，还可以用于构建背景参考帧（Background Reference Frame，BRF）。本文来自PCS2021论文《Instance Segmentation Based Background Reference Frame Generation For Surveillance Video Coding》
中央广播电视总台北京冬奥会转播技术资源概述
2022年，北京冬奥会将利用最新的媒体技术进行赛事转播。对于奥运会持权转播商来说，转播技术资源的规划和配置是筹备工作的重点，也是赛时转播系统运行的基础。本文介绍了北京冬奥会主转播机构奥林匹克转播服务公司的国际公共信号制作标准、新技术新服务，以及总台转播资源规划及技术预定概况。
全球最大多领域中文语音识别数据集 WenetSpeech 正式发布并开放下载
日前，西北工业大学音频语音和语言处理研究组(ASLP Lab)、出门问问、希尔贝壳联合发布1万小时多领域中文语音识别数据集 WenetSpeech，在腾讯会议天籁实验室、华为昇思 MindSpore、 西安未来人工智能计算中心等机构大力支持下，该数据集目前已经开放下载。
中国和东南亚地区流媒体传输最佳实践
疫情期间，流媒体行业迅速发展。截止2025年，仅视频领域，用户数量就将达到7.296亿（来自Statista，2021）。作为中国和东南亚地区内容交付网络专家，白山云一直致力于解决企业客户的内容交付和速度提升需求。在本篇文章中，白山云全球高级客户总监Brett Roberts分享了中国的流媒体机遇、东南亚流媒体市场展望、快速增长的亚洲市场所带来的挑战，以及理解用户分布、优化流媒体质量和可用性等最佳实践。
https://ottverse.com/the-best-practices-of-streaming-delivery-to-china-and-southeast-asia/
未来流媒体工作流的核心技术
自从我在这个博客上发表上一篇文章以来，已经快五年了——距离第一篇文章已经十年了——时间过得很快，流媒体技术发展也是如此。在 2016 年，CMAF 标准化刚刚开始，承载着简化工作流程和提高 CDN 缓存效率的希望。CBCS 加密方案的支持被希望远远超出苹果的生态系统，而 IMSC 也准备成为主导的字幕标准。现在我们可以看看其中有多少真的发生了，还有哪些技术确实作为流媒体工作流程的础出现了，以及哪些可能是未来五年的重要技术。
西瓜视频任利锋：4K修复100部经典中视频，免费开放AI修复功能
10月20日，西瓜视频联合火山引擎在北京举办“重修旧好”经典中视频4K修复发布会。西瓜视频总裁任利锋发表了题为《拂去时间留给回忆的那层尘》的演讲。他表示，未来一年，双方将共同修复100部经典动画。此次修复计划的首批合作伙伴包括央视动漫集团和上海美术电影制片厂。4K修复后的《哪吒传奇》《葫芦兄弟》《黑猫警长》等六部作品已在西瓜视频上线。此外，西瓜视频也将开放入口，为普通用户免费提供AI修复支持。同时对有价值的视频，提供深度的公益修复。
深入浅出WebRTC-NetEQ
NetEQ 本质上就是一个音频的 JitterBuffer（抖动缓冲器），全称是 Network Equalizer（网络均衡器）。而GIPS 语音引擎的两大核心技术之一就是包含丢包隐藏算法的高级自适应抖动缓冲器技术，称作 NetEQ。2010 年谷歌公司以6820万美元收购Global IP Solutions公司而获得的这项技术，另一个核心技术就是3A算法。随后，谷歌在2011年将其集成到 WebRTC 中对外开源发布。
阿里云正式开源PolarDB-X数据库，曾历经各届双11考验，现已登陆 GitHub
10 月 20 日，阿里云在 2021 云栖大会现场宣布正式开源云原生分布式数据库 PolarDB-X 的源代码，将自研云原生分布式核心技术分享出来，进一步推动云原生分布式数据库发展。本次开源遵循 Apache v2(计算层) 和 GPL v2(存储层) 开源协议，以全共享并尊重原作者著作权的模式开源，用户可以直接使用或基于阿里云开源数据库产品提供二次分发的商用产品和服务。该项目现已在阿里云官网及 GitHub 上发布。
如何将 SDR 上变换为 HDR
从编码到播放，HDR几乎对视频工作流程的每个阶段都至关重要。当由SDR转换为HDR时，视频体验质量（QoE）显著提高。随着HDR的支持在流媒体领域逐渐普及，意味着OTT服务需要提供HDR内容以便在消费技术达到分辨率饱和时保持竞争力，并开始关注像素深度。
https://bitmovin.com/sdr-vs-hdr-upconverting-video/
Netflix推出CAMBI用于检测条带失真
我们用传统的、非神经网络（NNN，non-neural network）的方法设计了一种算法来满足我们的要求。这是一种源自第一性原理的白盒解决方案，其中只使用了几个基于视觉原理的参数，我们称之为：基于对比度感知以及多空间尺度的条带指数（CAMBI，Contrast-Aware Multiscale Banding Index）。
回归VMAF分数的视频质量评价模块
本文基于深度学习，在将 VMAF 分数作为 Ground Truth 的前提下，提出了两个不同的网络回归质量分数用于视频质量的评价。该模块可作为视频压缩，视频增强等视频/图像处理领域的网络损失函数。
魔法一样隔空在屏幕写字，捏起手指就能实现！在线可玩
这是一个用来写写画画的手部跟踪程序，开发者将它命名为YoHa（Your Hand Tracking）。这个程序基于TensorFlow.js实现了实时识别功能，能达到不卡顿、无延迟的效果。捏起手指就可以变成画笔，清空画布也只需握拳就能办到。
虚拟在左，真实在右：德国学者用AI合成一亿像素逼真3D图像，可任意旋转
近日，来自德国埃尔兰根-纽伦堡大学的学者提出了一种新颖的神经网络方法，用于3D图像的场景细化和新视图合成。只需要输入点云和相机参数的初始估计，就可以输出由任意相机角度合成的图像，360度旋转都不是问题。
地平线与主线科技达成战略合作，助力自动驾驶卡车加速量产
10月18日，地平线宣布与自动驾驶卡车服务提供商主线科技达成战略合作。双方将基于各自领先技术与优势资源，共同开展L4级自动驾驶技术研发合作，加速自动驾驶卡车量产进程，同时合作探索自动驾驶卡车的商业化场景，推动建立新一代人工智能物流网络。
当35岁遇到裁员
本期主编观察采访了在音视频领域从事多年的技术老兵，讲述了当35岁遇到裁员的点点感悟。
阿里平头哥首款CPU芯片发布！5nm倚天710，128核单片600亿晶体管，无人能与争锋
倚天一出，谁与争锋？5nm、单芯600亿晶体管、128核、主频3.2GHz……首战跑分就超出业内标杆20%，能效比提升50%以上。这就是阿里平头哥半导体，在2021云栖大会现场交出的最新造芯成果。
W3C战略要点报告
这份日期为 2021 年 10 月 19 日的公开报告是为 2021 年 10 月的W3C 虚拟咨询委员会会议准备的，该会议是TPAC的一部分。本报告重点介绍了最近W3C为增强网络平台所做的工作，并为其增长和实力进行创新，使网络仍然是一种工具，它将继续加速科学合作和发现，作为一种连接家人和朋友的社交手段，一种在线学习和发展技能，一种成功开展业务的工具，等等。
https://www.w3.org/2021/10/w3c-highlights/
活动推荐

【免费报名】与阿里云一同探索视频云的新技术与新场景

10月30日 | 北京 LiveVideoStack将携手阿里云共邀4位技术大咖，一同探讨从上云到创新，视频云的新技术与新场景。阿里云视频云依托阿里云服务数百万开发者的卓越服务能力与实践，在本专场演讲中，将从云计算服务、网络调度到端侧呈现等视频生产与消费的全流程角度出发，分享下一代技术趋势和判断，并从实践角度分享算法、架构、AI等多个具有实践指导意义的话题。
⏰ 活动时间：2021/10/30 14:00-18:00
🚀 参与方式：线下参与（免费）
🎉 福利领取：
  • 成功报名活动，扫码进群即可获得品牌优质内容汇总
  • 参与专场互动环节还有机会获得精美礼品↓↓↓
扫码 👆🏻👆🏻👆🏻立即报名
🌟现场互动🌟
除了技术干货分享，您还将在现场参与更多有趣和充实的互动环节，我们也准备了精美礼品等着你：
  • 问答有礼：讲师分享结束后，您将有机会就技术困惑向专家提问。
  • 产品体验：活动现场专门设有阿里云展台，您可以前往亲身体验技术落地实践。
（精美礼品）
报名链接：http://livevideostack.mikecrm.com/aFYceBT
插图源自Pexels
继续阅读
阅读原文
关键词
网络
技术开发
周刊
算法
视频云