vadymvdrobot_dreamstime_125248250
Vadymvdrobot Dreamstime XXL 125248250促销

视频Post-Processor Delivers Pixel Magic

2022年6月16日
查看PixelWorks使用其X7 Mobile Visual Processor所做的事情。

您将学到什么:

  • Integrating motion processing into mobile gaming.
  • X7后处理器向游戏和其他应用程序提供了什么?
  • Who is Pixelworks?


视频处理器使用框架插值系统,例如运动估计(ME)和运动补偿(MC)数十年。但是,典型的解决方案是渴望的,并引入插值错误。

像素工作,位于圣何塞的视频炼金术士Skunkworks一直在悄悄地开发一个新的,后端的移动处理器,可用于电影,现在是视频游戏。结果是一个非常出色的图像,以超高的分辨率和高框架速率,但延迟最小,实际上也可以改善电池寿命。听起来他们几乎已经打破了物理法则。但是,不,他们的首席执行官说,我们只是非常了解这些法律以及如何在其中工作。

秘密酱

通过使用硅的专家培训的视频运动估计和薪酬算法进行视频插值,该公司推动了限制性能或质量的界限。Through a novel adaptive compensation scheme trained by the company’s picture-quality experts (that the company doesn’t want to talk too much about), Pixelworks has integrated motion processing—things they’ve done for the film and TV industry in software—into a mobile gaming solution that’s now possible in a smartphone.

This secret sauce, the expert training by their best engineers and picture-quality people, is differentiable such that the flow and estimation can be optimized jointly in real-time, and very fast, with minimal latency. In addition to the Smart MEMC, the design can be seamlessly adapted to several other video-enhancement tasks such as super-resolution, denoising, and deblocking.

定量和定性评估和示范显示了X7后处理器(图。1)在广泛的数据集上,优于最先进的视频框架插值和增强算法。与现有方法相比,X7的魔术在计算上是有效的,能够产生更具视觉吸引力的结果。


对游戏的影响

对此表示赞赏的一部分是游戏,而且大多数人知道,游戏已成为全球单位和美元的大型业务。在中国尤其大,估计有6.7亿游戏玩家,占全球33亿玩家的20%。大多数游戏玩家都在智能手机上玩。

中国游戏玩家已经采用了Genshin影响作为基准。游戏中的要素之一是天气。天气是探索机械师。在探索世界时,天气可能会发生变化。根据新的天气条件,将向环境,角色和对手应用特殊特性。

Genshin Impact和Cyber​​punk 2077之类的PC游戏等游戏已从PC移植到智能手机,挑战了手机的性能与电池和热量操作参数。大型游戏要求手机的处理器必须提供的所有内容,在此过程中,在加热手机的同时,电池运行了电池。

Pixelworks看到为契机,运用它magic and introduced the X7 chip architecture, post-processors that exploited some of the techniques the company used in the film and TV industry. The X7 chips created a new distributed computing/rendering chip market segment in mobile; a bit like what AMD and NVIDIA have done in the PC and console segments. Chinese phone manufacturers have referred to X7 as standalone display solution, a render accelerator, or a dual-chip gaming architecture.

会议性能需求

MEMC和分辨率缩放(SR)在任何平台上都非常苛刻,尤其是在冷却和电源有限的移动设备中。手机必须提供高颜色准确性,高像素分辨率,无伪影或混叠和低延迟的高框架速率,并在使用很少的功率的同时完成所有这些。

PixelWorks的后处理器已被证明是医生订购的,这是一种独特的运动补偿技术和SR,可卸载手机的SOC(图2)。X7处理器专门针对游戏,通过照顾运动向量并与游戏发动机开发人员合作,使用元数据可以保证最好的游戏体验。


结果,最大的中国手机OEM中有四分之三是用Pixelworks的芯片运送其顶级手机。领先的游戏发动机提供商(例如Unity)一直与PixelWorks,中国的大型游戏工作室(BYTEDANCE,TENCENT,MIHOYO等)合作,已经与Pixelworks互动,MTK和MIMCOMM等移动SOC处理器正在工作与PixelWorks。

X7是一个微小的芯片,吸收了很少的功率,以至于智能手机几乎不知道它的运行。中国的一些智能手机供应商已经将其添加到手机中,以使他们的游戏疯狂地定位,如果人们能够满足那个绩效的市场细分市场,那么他们必须有一些特别的东西。

这是一个经典的故事,讲述了一家小型公司(约7000万美元的收入)公司与一些知名人士密切合作,并要求巨大的客户,并完善了一种可扩展,高效且经济的解决方案。

Pixelworks的故事

Pixelworks不仅跌跌撞撞地进入了这个市场。该公司成立于1997年,开发了专业投影仪的视频处理器。该公司的视频工程师和科学家在公司的规模多次无与伦比的集体经验。

但是,他们是技术人员,而不是推销员。您几乎不得不认识一个认识某人的人来了解他们。他们的客户也不渴望透露它们 - 像素工厂是他们的秘密调味料,以及他们如何在削减的无与伦比的业务中脱颖而出。

The mythology of the company is the CEO or CTO (the story varies depending on who is telling it) was chatting at a conference with a CTO or president of a phone company and he said, “It’s my dream that someday we will have smartphones that you can watch a movie on, and it will be as good as if you were in the theater.” The Pixelworks guy went home thinking about that and the next day he told his team, “I’ve got an idea.”

几年后,访问实验室(如果您可以进入),可以看到一个大的4K屏幕显示视频和游戏,就好像它是由发烧友级别的PC驱动的一样。但事实并非如此 - 它是由两年历史的智能手机驱动的,甚至不是顶级智能手机。

Skunkworks一词在这里不轻松使用。Pixelworks在视频处理中设法击败了硅谷和圣地亚哥的顶级SOC建筑商。从某种意义上说,这并不奇怪 - VIDEO就是他们​​所做的。当今的智能手机是技术的奇迹,但它们不能是他们所做的一切。产品周期和研发预算减轻了他们可以在时间和美元上投资多少。

PixelWorks是一家专业公司,一家像素抛光剂。他们还可以从传感器中抛光像素,但他们承认,大型SOC建筑商在集成的ISP上做得非常好。首席执行官告诉我:“您一次爬一座山。”

这个故事的诱人结局是未来。PixelWorks现在已经证明了他们定制的视频处理方法 - 像素抛光作品。实际上,它的工作几乎比他们想象的要好。而且它是可扩展的。它将遵循摩尔的定律,并在每一代人的情况下变得更好。智能手机拥有(或意志)从未如此出色。

最新的

Murata — IRA IRA-S210ST01 Pyroelectric Infrared Sensor

2022年3月31日
Murata IRA-S210ST01是一种含有铅的Pyroelectric红外传感器,可提供良好的信噪比和可靠的性能。

Nexperia - PMEGXXXTX TRENCH SHOTTKY RECTIFISER

2022年3月31日
Nexperia扩展了其沟槽肖特基整流器的投资组合,其设备额定最高为100 V和20 A.新零件具有出色的Switchi…

工程领域的女性 - 鼓舞我们领域的创造性增长

2022年3月8日
在过去的几年中,技术或工程专业的女性人数增加了。入学后EN的妇女人数…

The Future of Automotive Wheel Sensing with GMR

2022年2月23日
下载PDF版本。Allegro微型系统。磁性传感器广泛用于现代车辆,以测量运动部件的位置,…

Voice your opinion!

本网站要求您注册或登录以发表评论。
尚未添加评论。想开始对话吗?
Baidu