苹果加入开放媒体联盟:意味着什么?

1月5日 , 大约在开放媒体联盟(AOM)成立27个月后, 苹果公司在该组织的网站上以“创始成员”的身份出现.“和其他人一样，我们第一次读到这个故事是在 CNETCNET很可能是在联盟更新其网站时发现的. 你可能知道， AOM成立于2015年9月, 在HEVC皇室疯狂的高峰期, 将多个开源编解码器的开发整合为一个. 这个编解码器叫做AV1，而比特流是 计划于2018年初冻结.

显而易见的问题是，苹果为什么要加入这个组织, 以及我们期望苹果如何部署AV1和其他编解码器，如VP9? 我们将在暂停思考后按顺序解决这些问题.

网络视频到底发生了什么

当Adobe加入H.264到Flash在2007年, Adobe开发者Tinic Uro写了一篇标志性的博客文章, 自从被拿下, 名为“网络视频到底发生了什么”.“两三个月左右, 基于计算机的流, 这几乎是当时所有的东西, 以On2的VP6为中心, 讽刺的是AV1的前身, 到H.264, HEVC由此诞生.

所以我要打断乌罗的电话，问“刚刚发生了什么事??“从哲学的角度来看，苹果的举动是结构性的. 至于对编解码器市场的影响，还有待观察.

哲学背景是这样的. 谷歌以1.2亿美元左右的价格收购了On2，并于2010年5月发布了开源编解码器VP8. 苹果对H.264，支持QuickTime和各种设备，并且是MPEG LA H的许可方.264(和HEVC)专利池.

最早评论VP8源代码的人之一是Jason Garrett-Glaser(当时是一名三年级大学生，也被称为Dark Shikari)，他是x264编解码器的开发人员之一. 他的评论, 也被撤了下来, 从技术和知识产权(IP)的角度来看是非常关键的. 例如，他 所述 “VP8，作为一个规格，应该比H好一点.264基线配置文件和VC-1. 它甚至不能与H竞争.264主要还是高调.关于IP，他也 所述 “VP8和H太相似了.264:对VP8的简洁描述，如果稍微不准确的话，应该是“H”.264基线配置文件与更好的熵编码器.“虽然我不是律师, 我简直不能相信他们能逃脱惩罚, 尤其是在当今这个诉讼泛滥的时代."

当被问及他对VP8的看法时，苹果公司的史蒂夫·乔布斯(Steve Jobs)在凌晨4:30作答.m. 用他的iPhone发邮件, 只是提供了加勒特-格拉泽评论的链接, 他说:“本质上是数字化的。.换句话说:糟糕的编解码器，更大的IP风险.

史蒂夫·乔布斯对VP8/WebM的最初想法，VP8/WebM是AV1的关键技术前身.

毫不奇怪，苹果从未部署过VP8或VP9，这在YouTube上出现了问题 开始仅在VP9中部署4K视频. 从那以后，苹果只支持基于标准的编解码器，直到最近 2017年6月，HEVC加入HLS. 另一方面，苹果 在通用媒体应用程序格式(CMAF)上与微软合作. 正如我们当时报道的那样，

虽然这种合作距离苹果加入开放媒体联盟还差得很远, 这确实表明两家公司可以有效地合作. 这也表明苹果, 长期以来，在MPEG DASH问题上一直公开不妥协, 是否愿意为有利于共同利益的新标准做出贡献. 苹果会加入联盟吗? “我们已经和很多公司谈过了, 招聘绝对不是我们的挑战,(AOM执行董事、微软员工)加布·弗罗斯特说. “最难的部分是工程上的努力, 采取下一步措施, 并通过开源项目推动贡献."

因此，尽管苹果加入AOM是一个戏剧性的转变，但这并非完全出乎意料.

苹果为何加入AOM?

许多文章将苹果的举动归因于 Mozilla声称AV1的效率将比HEVC高25-35%. 这当然是值得追逐的, 这些数字是推测性的, 我认为苹果的原因更多是战略上的，而不是财务上的.

Mozilla在Demuxed上预测，AV1的效率将比HEVC高25%.

Jeremy Horwitz在VentureBeat上的一篇文章《苹果加入开放媒体联盟的3个原因.霍维茨提到的第一个原因是，苹果希望在自己的设备上安装AV1. 而真正的, 我知道苹果通过在HLS中添加HEVC解决的大多数移动设备都内置了HEVC解码硬件, 最小化新编解码器对电池寿命的影响. 我们还不清楚AV1解码的cpu密集程度, 但如果它比HEVC复杂得多, 出版商可能更喜欢HEVC，以保持其观众的电池寿命. 最好的猜测是，硬件解码将需要大约2年的时间才能到达任何消费产品.

霍维茨提出的第二个理由更有说服力:“苹果需要AV1来向非苹果设备传输视频.“具体来说，似乎 苹果正在认真考虑打造类似于Netflix和亚马逊(Amazon)的内容业务. 而作为一个硬件开发者, 苹果可以幸灾乐祸地忽视Android设备的重要性, 它不能作为内容服务. 尤其是Netflix 采用VP9作为传输编解码器最初是为Android设备提供手机下载服务，后来角色进一步扩大. 当然, Android从版本5开始在软件中支持HEVC许多Android设备已经拥有HEVC硬件. 仍然, VP9是比HEVC更通用的格式, 还是不能在Chrome上播放, 火狐, Internet Explorer, 或歌剧. 在短期内, 看看苹果是否以及何时在Safari和iOS更新中包含VP9播放将是非常有趣的. 最重要的是，如果苹果真的想成为内容分发领域的一员, 他们必须有AV1.

霍维茨提到的第三个原因是苹果希望帮助引导AV2. 虽然这毫无疑问是正确的，但这似乎太遥远了，我不会进一步探讨这个问题.

我们对苹果的期望是什么?

苹果就是苹果，他们不说话. 我们最好的猜测是其他公司加入该集团时所做的事情, 或者我们期望他们做什么.

关于VP9, AOM成立后不久，创始成员 微软为Edge添加了VP9. 赌上一便士, in for a pound; it makes sense that Apple would do the same for Safari, MacOS, iOS, 和tvOS. 这将带来直接的好处，允许Safari用户播放YouTube上的超高清视频.

关于AV1, 我们期待谷歌(Chrome), 火狐(火狐), 和微软(Edge)在规范的墨迹未干后不久就在他们的浏览器中添加AV1解码. 我们最乐观的猜测是苹果也会这么做.

在硬件方面, 我们期待英特尔, 英伟达, 手臂, 和其他成员将AV1编码/解码添加到各自的cpu, 片上系统, 显卡, 和其他硬件设备尽快. 再一次。, 我们最好的猜测是苹果将尽快在他们的设备上添加AV1硬件编码/解码, 虽然, 如上所述, 这意味着两年左右的时间.

我们希望YouTube在规范发布后的几周内开始将视频编码为AV1格式, 几个月后，Netflix紧随其后. 当然，这两种服务目前都支持VP9，其效率比H高得多.264具有类似的解码要求，并且几乎可以在任何地方播放. 如果支持VP9，苹果将获得最直接的回报, 但我们预计到2018年年中会出现一些AV1编码的内容.

将AV1或VP9添加到HLS怎么样? 再一次。, 根据解码要求, AV1在没有硬件支持的设备上可能不太有用, 限制短期利益. 如果苹果在其iOS设备上添加VP9支持, VP9在HLS技术上是可行的, 苹果可能也会采取这一措施.

这对一般编解码器的使用意味着什么?

当苹果将HEVC添加到HLS时, HEVC编码社区的反应就像发现教皇信奉佛教一样. 你今天必须添加HEVC, 如果不是更早的话, 为了避免落后于蜂拥而来的竞争对手. HEVC或破产，宝贝! 正如我们所看到的，真正的发行商的反应要慢一些.

事实上, 因为上面多次讨论的解码问题, AV1短期内可能不会在苹果设备播放方面发挥重要作用, 尽管VP9可能. 仍然, 许多人预测AV1将面临IP挑战, 好像会员们喜欢思科, 谷歌, 微软, 和英特尔在技术上并不成熟，会毫不犹豫地收购与知识产权相关的公司. 苹果公司的加入为这一理论又添了一颗钉子，并增加了可用于捍卫这些说法的资金.

苹果的决定对消费者有什么影响呢? 它可能会极大地改变我们观看视频所用的编解码器, 虽然短期内不会, 即使是这样，我们也可能无法判断.

如果你是一个内容生产者或分销商，你现在有了另一个考虑AV1的强大理由. 如果你不从事内容销售业务, the impact will take much longer; it may be several years before you should start thinking about encoding into AV1.

也许最重要的是, 苹果加入AOM向HEVC知识产权所有者发出了一个明确的信息，这与苹果将HEVC加入HLS后他们所认为的不同, HEVC并不是镇上唯一的游戏. 这个令人难以置信的五音不全的群体对这条信息做了什么还有待观察.