MPEG：发生了什么事？

自1988年由Leonardo Chiariglione和Hiroshi Yasuda(来自日本电报和电话公司)成立以来，运动图像专家组(MPEG)在从模拟视频到数字视频的过渡中留下了不可磨灭的印记。根据Chiariglione的数据，在全球范围内，依赖MPEG标准的产品和服务的年价值约为1.5万亿美元，约占世界生产总值的2%。当然，没有人可能怀疑MPEG创建的视频编解码器在娱乐和商业领域新冠肺炎危机期间所发挥的令人难以置信的价值。

2020年6月6日，图1所示的消息出现在Chiariglione的MPEG网站上，宣布MPEG关闭。稍微挖掘一下就会发现，虽然Chiariglione实际上已经与MPEG分离，但MPEG实际上并没有关闭，尽管它进行了重大重组。尽管如此，如果为那些对数字视频的成功做出贡献的人有一座拉什莫尔山，Chiariglione显然会有一个半身像，这使得他与MPEG的分手足够重要，足以值得纪念。

因此，在这个故事中，我们将做三件事。首先，我们会告诉你发生了什么事。然后，我们将分享我们对Chiariglione与MPEG的分离将产生的影响的看法。第三，一旦我们了解到Chiariglione的离别，我们请读者对他和MPEG对数字视频的贡献发表一些看法。只有几位读者做出了贡献，但我们将在下面分享他们的想法。

作为背景，MPEG是为我们带来MPEG-1、MPEG-2、H.264和HEVC的标准制定组织，通用视频编码(VVC)、基本视频编码(EVC)和低复杂度增强视频编码(LCEVC)将于2020年推出。从技术上讲，MPEG在国际标准化组织(ISO)下运作。从组织的角度来看，ISO运行多个技术委员会，如图2顶部所示的IT联合委员会或JTC1。JTC1下面是多个小组委员会，如小组委员会29，负责音频、图片、多个和超媒体信息的编码(SC 29)。

SC 29下有多个工作组，包括JPEG第1工作组(由于空间原因没有显示)和MPEG第11工作组，该工作组在6月6日之前由Chiariglione运营。每个工作组下面是子组，包括图2中显示的具有各自功能的子组。

在6月6日重组后，前两个位置保持不变，但工作组11似乎被淘汰了，许多以前的小组被推上工作组(WG)的地位，如图3所示，我从2020年6月4日在线举行的SC29次全体会议的决议中得出了这个新的结构。根据从加里·沙利文那里收到的一张纸条，请注意，MPEG协调小组可能会扮演协调MPEG工作的主要角色，而不是SC29本身。

请注意，决议中的所有工作组和顾问组的前缀都是MPEG，为了节省空间，我从组织结构图中删除了MPEG。因此，本文将音频编码工作组称为MPEG音频编码工作组，保留了MPEG名称。在一份日期为6月24日的公告中，ISO表示，重组将于2020年7月17日生效。

如图3所示，SC 29还选择了前述微软员工、JCT-VC小组前联席主席Gary Sullivan博士，在2020年接替铃木泰彦担任小组主席。根据“重新思考研究”(Reink Research)的一篇文章(需要订阅)，我们了解到，基亚里格利奥尼获得了一系列荣誉职位，但遭到了拒绝，显然认为这是对他诚信的侮辱，因为这些职位实际上是无能为力的。因此，Chiariglione突然从ISO辞职，并宣布MPEG的死亡是他的麦克风下降时刻。

因此，我们改变了组织结构，更换了领导层。那是什么意思？关于结构，Chiariglione在重组前后的多篇文章中分享了他的想法。特别是他在2018年2月的一篇文章中发表的评论，在上面图2详细描述了MPEG的组织结构后，Chiariglione表示：MPEG能否克服视频危机？？在上面的图2中详细描述了MPEG的组织结构后，Chiariglione表示：

[MPEG]可能是ISO中唯一的组织，但它之所以存在，是因为媒体系统的标准需要其组件之间的强交互。正因为如此，MPEG举行了几次联席会议，相关小组讨论并就共同感兴趣的问题达成一致。开发复杂数字媒体标准的能力是MPEG标准在市场上取得成功的原因之一。分解MPEG将对创建有效标准的能力造成致命打击。

换句话说，让多个子组在一位经理的领导下一起工作是很有意义的，尽管本质上这也是我们在重组后看到的情况。Chiariglione在重组后写的其他文章明确表示，他也觉得ISO结构虚伪、混乱和封建，标准最好像MPEG过去那样自下而上(由成员制定)，而不是他声称ISO有效的自上而下(由国家标准机构制定)。老实说，我对ISO和MPEG是如何发挥作用来评估这些声明的了解还不够，但它们是一本有趣的读物。

这对于2020年发布的MPEG视频编解码器VVC、EVC和LCEVC意味着什么？正如“重新思考研究”一文中所说，预计今年推出的三个新的MPEG标准-JVET VVC、MPEG-5 Part 1 EVC和MPEG-5 Part 2 LCEVC在技术基础上不会有太大变化。这三个标准都是ISO/IEC标准，而且三个标准在技术上都已经完成，所以ISO SC29的组织变化应该只会影响未来的ISO/MPEG标准，而不会影响已经完成的MPEG标准。当然，业界对这三个新兴标准的采用将取决于技术优势、易实施性和商业案例，而不是新的ISO SC29说了什么或做了什么。

Chiariglione不愿直接对这篇文章发表评论，但在他的许多文章中已经清楚地表达了他的想法。回顾MPEG在没有MPEG的未来中取得的成功，他写道，MPEG已经赌博了30年，有时赢，有时输。显然，他认为MPEG-2和AVC/H.264是成功的，他写道，MPEG LA开发了MPEG-2视频许可证。MPEG-2被广泛使用，MPEG-4 AVC是一个非常成功的标准，它可以自豪地承载通用属性，因为它也用于广播和在线流媒体。

另一方面，HEVC是亏损的，至少在流媒体方面是这样。在同一篇文章中，Chiariglione写道，7年后，MPEG-H HEVC专利持有者无法团结一致，提出一个体面的统一许可。然而，HEVC在广播领域的应用充其量也是有限的。他写道：“最后，大家终于意识到，旧的MPEG商业模式已经破灭，业界为新视频编解码器所做的所有投资(总计数亿美元)都将化为乌有，AOM的免版税模式也将扩展到其他业务领域。”他还写道，HEVC在流媒体方面的使用充其量也是有限的。他写道：终于，每个人都意识到，旧的MPEG商业模式现在已经破灭，而AOM的免版税模式也将蔓延到其他业务领域。

很明显，Chiariglione认为AOM是MPEG的一个重要竞争对手，他预测如果AV1作为一个免版税的编解码器获得成功，视频编解码器和视频编解码器开发者将会有一个反乌托邦的未来。在“没有MPEG的未来”一书中，他写道，HEVC留下的空白已被AOM广泛用于流媒体的AV1规范所填补。

在危机、原因和解决方案中，他继续说，AOM肯定会给视频编解码器市场带来亟需的稳定，但这将以减少(如果不是完全停止)技术进步为代价。公司将完全没有动力开发新的视频压缩技术，由于该领域的复杂性，公司将花费非常大的成本开发新的视频压缩技术，因为他们知道，他们的资产将被AOM在其视频编解码器中接受和使用，这是令人欣慰的--仅此而已。

他继续讲述如何处理一台卡住的机器？新的未来将是成千上万个高薪的媒体压缩工作和支持它的学术研究的未来，因为对新的压缩技术的迫切需求不再存在。

当然，由于Chiariglione撰写了这篇文章，Sisvel推出了AV1和VP9的专利池，所以AV1'；的免版税地位肯定是有疑问的。尽管如此，这并没有削弱AOM作为MPEG和创建编解码器的MPEG方式的主要竞争对手的作用。(全面披露：作者正在与Sisvel就这些池进行咨询。)。

总而言之，在MPEG-2和AVC大获成功之后，Chiariglione认为MPEG在HEVC上跌跌撞撞，现在面临着AOM的主要竞争对手，部分原因是HEVC的许可问题。有了这样的背景，就不难理解为什么SC29'；决定从根本上用加里·沙利文(Gary Sullivan)取代奇亚里奥尼。加里·沙利文受雇于微软(Microsoft)，后者是AOM的主要竞争对手之一，其成员一直在压制HEVC的部署。

例如，Mozilla和Google都是AOM的创始成员，而HEVC仍然不能在各自的浏览器中播放，即使在安装了HEVC硬件解码器的系统上也不能播放(图4)。两家公司都可以很容易地利用支持的平台上提供的现有硬件或软件HEVC解码，而不会招致版税，因为这就是Mozilla支持H.264播放的方式，首先使用主机系统上提供的基于硬件的解码器，然后使用Cisco OpenH.264二进制模块。Chrome不支持Android上的HEVC播放，尽管Android操作系统支持软件中的HEVC播放。

请注意，尽管图4中显示的CanIUse数据表明Edge不能播放HEVC，但我在运行Windows10的HP Zbook上尝试了Edge中的HEVC播放，它工作得很好。然而，对于Chrome或Firefox来说，情况并非如此。

图4.AOM成员Mozilla(Firefox)和Google(Chrome)仍然不支持在他们的浏览器中播放HEVC。

可以肯定的是，微软是一家大公司，标准和编解码器开发充斥着宿敌、合作竞争和奇怪的伙伴。例如，苹果拥有MPEG LA HEVC专利池的专利，但却成为AOM的创始成员(AOM推出27个月后)。BBC拥有同一批专利，也是AOM的(非创始)成员。

尽管如此，在微软雷蒙德园区的某个地方，显然有员工希望MPEG能干脆消失，而沙利文的升迁，尽管他的资历令人印象深刻，无懈可击，但从外部看，就像是让狐狸来掌管鸡舍。

我向基亚里奥尼询问了这一明显的利益冲突，他回答说，无可奉告。但他确实表示，向SC 29征集候选人的请求表明，这个高级中性国际标准职位的候选人必须避免偏见，甚至避免出现利益冲突。作为一个客观的局外人，沙利文似乎不符合这一标准，或许这在一定程度上解释了基亚里奥尼&。

所以，我们可能已经解释了Chiariglione的敌意，但这对MPEG将于2020年推出的三种编解码器的成功意味着什么-通用视频编码(VVC)、基本视频编码(EVC)和低复杂度增强视频编码(LCEVC)？正如我在MPEG‘s雄心勃勃的计划在2020年推出3个编解码器中所解释的那样，MPEG似乎对这些编解码器有三个目标。首先，简化知识产权图景(并避免另一场HEVC的纠葛)。第二，提供一个免版税的替代方案来对抗AOM和AV1。第三，提供CPU友好的替代方案，以避免新编解码器所需的繁琐计算复杂度。

VVC几乎在这些目标形成之前就完全诞生了，是HEVC的自然继承者。根据Chiriaglione的说法，VVC专利持有者的数量最有可能比HEVC的数量多得多，使得VVC在本质上是另一个等待发生的HEVC。然而，除了ISO和MPEG之外，媒体编码行业论坛成立于2018年，部分原因是为了提供一个论坛，并鼓励讨论与部署和使用这些标准相关的知识产权许可问题，以促进这一目的。

虽然VVC和MC-IF的陪审团还没有出来，但Chiriaglione并不乐观。谈到VVC和MC-如果在没有MPEG的未来，他说，然而，到目前为止，如果我们撇开在会议上组织的活动不谈，外部还没有具体的结果。MC-IF有31个成员，其中7个是许可实体(即略低于所有成员的1/4)。行业成员仅占HEVC专利持有者的1/2。在这种情况下，很难相信VVC的表现会好于HEVC。情况很可能会更糟，因为VVC在广播中的采用将需要数年时间，如果有的话。

接下来来看第二个编解码器，EVC有两个配置文件：第一个据称是免版税的，第二个是四家公司的专利，这应该会大大简化许可情况。关于EVC，Chiariglione说EVC是很有前途的，因为它提供了与AV1相当或更好的质量，尽管低于VVC。如果许可证将被公布，EVC可能会有机会。然而，这还没有发生。

最后，LCEVC是一种复杂度较低的替代方案，可以完全在软件中实现，因此是三种编解码器中唯一可能在2020年产生影响的编解码器。据报道，LCEVC的知识产权几乎完全归V-Nova所有，这也大大简化了许可情况。关于LCEVC，Chiariglione评论说，LCEVC一个像样的许可证可能是游戏规则的改变者，也是VVC面临的另一个威胁，这可能意味着VVC专利持有者面临额外的压力，要求他们提供一个像样的许可证。

回到VVC，Chiariglione总结道，EVC的成功可以帮助VVC取得成功。看到EVC(和AV1)的威胁，VVC专利持有者可以齐心协力，提供像样的许可。虽然我欢迎这样的发展，但我认为可能性很小。

南加州大学对这一切的看法是什么？我问了沙利文两个问题，一个是关于潜在的利益冲突，另一个是关于MPEG是否计划采取未来的措施来改善其编解码器的许可状态。他没有回复任何人，尽管这是假期前的一周(7月4日)，他说MPEG正在开会。如果他真的回复了，我们会在文章末尾贴出他的回复。

因此，我们所拥有的就是ISO'；本新闻稿中的声明，即SC 29遗憾地获悉SC 29/WG 11(MPEG)的前召集人莱昂纳多·基亚里格利奥内博士辞职，并对他三十多年来在这方面的服务表示感谢。在此期间，MPEG已经成为世界范围内音频和视频编码以及媒体同步、呈现、存储和传输以及媒体编码和传送的其它方面的系统规范的卓越标准组织。

重复上面“重新思考研究”的话，业界对这三项新兴标准的采用将更多地取决于技术优势、易实施性和商业案例，而不是新的ISO标准说了什么或做了什么。我们对性能和许可的了解如此之多，以至于不可能预测这三种标准中的任何一种会否成功，尽管很难反驳基亚里戈尼的任何一个结论。

如果这次重组发生在十年前，在AVC声名鹊起的时候，平稳的接班就会得到保证。但HEVC的授权混乱给MPEG视频标准蒙上了一层阴影，而AV1则提供了一个亮丽的替代方案，即使西斯维尔的AV1池可能会证明，并不是所有闪闪发光的东西都是金子。至少在视频编解码器方面，MPEG不再是曾经那样无懈可击的巨石。另一方面，Chiariglione可能无法带领MPEG走出困境，因为他对ISO机器的抱怨太久了，以至于他的声音似乎已经听不到了。

显然，Chiariglione是一个乔布斯式的经理人，他从视频编解码器开发社区和他的离职中获得了突破性的成就，而当时他的组织需要很大。最大的问题是加里·沙利文到底是蒂姆·库克还是约翰·斯卡利。

我们询问了行业专家对Chiariglione的离开和MPEG的变化的见解和意见，我们在下面以略有编辑的形式介绍他们。

巨大，因为这是唯一涵盖音频、视频以及广播和OTT流的关联元数据压缩的标准。这是每年数万亿(美元)收入的来源，可能雇佣了数百万名员工。

未包含在ISO框架中的许可条款是一个痛点。在AVC中，业界与AVC联盟(商业团体)和MPEG行业论坛(技术团体)一起行动起来对抗Microsoft VC-1。在HEVC中什么都没有做，因此出现了问题。对于VVC来说，MC-IF[媒体编码产业论坛]是为了促进VVC授权而创建的，所以还是有一些希望的。

MPEG LA向运动图像专家组(MPEG)及其创始人Leonardo Chiariglione和Hiroshi Yasuda致敬，感谢他们引领世界进入数字媒体时代甚至更远。MPEG动员并激励了世界上最聪明的工程师，他们毫不妥协地关注质量和独立性，将其作为市场接受的途径，并让市场自由寻找出路，决心实现这一目标。

尽管MPEG的门槛很高，但它的成就更高。从这一愿景中产生了数字视频、音频、数据和系统授权，将世界的信息传递到家庭和电话。

MPEG LA为自己发挥了重要作用而感到自豪。在合理接触MPEG用户与合理回报MPEG发明者和激励MPEG发明者之间取得平衡，有助于将消费电子历史上使用最广泛的标准推向世界市场。市场的创造性能量释放出具有商业竞争力的、可互操作的新产业生态系统、以前难以想象的产品和无数就业机会，创造了数万亿美元的产品销售额、相互联系的国家、文化和个人，并提高了数十亿人的生活质量。

不要相信你读到的东西。但MPEG的大门没有关闭。只要它的基础雄厚，它的数据流动，它的工作将继续留下永恒的印记。

关于mpeg…的不幸消息。在IFE行业工作，对MPEG视频的需求非常普遍。从MPEG-1的早期开始，我们就一直依赖于编解码器的开发。航空公司从90年代初开始使用靠背视频点播系统。这些系统的OEM制造商要求为其平台提供MPEG可交付内容，并要求提供特定的多路复用传输流文件。快进到今天，仍然需要对这些遗留系统的支持，但技术正在发展。感谢MPEG团队的辛勤工作和贡献。

首先，我认为我现在不会有职业生涯。

.