东芝于CETEAC2005 中展示Cell变脸技术

互联网 | 编辑: 2005-10-07 10:19:44

  东芝于 10 月 4 、 5 两日在日本千叶幕张展场所举办的「 2005 年日本最先端电子信息高科技展览会( CEATEC JAPAN 2005 )」中,展出了使用 Cell 微处理器来进行实时影像辨识与处理的「变脸」技术。

Cell 是由 SONY 、东芝与 IBM 所共同开发的新一代高效能微处理器,采用不同于既有微处理器产品的设计,能提供庞大的浮点数运算效能,三家厂商都分别预定将 Cell 应用在自家的产品中,包括 SONY 的 PS3 、 IBM 的高效能工作站与东芝的高阶数字影音家电等等。

   本次东芝于 CETEAC 2005 展览中,展出了自家所研发的 Cell 参考用硬件开发套件与软件开发环境,并实际展示了相关的研发成果。该参考用开发套件配备有 1 个 Cell 微处理器, 1 个由东芝自行研发的「 SCC ( Super Companion Chip )」多功能输出入处理芯片, 4 个电视协调器( TV Tuner ),硬盘与 DVD 光驱,以及各种扩充端子与影音输出入接口,预定提供给应用 Cell 的消费性电子产品开发之用。

   会中展示了 3 个不同类型的 Cell 软件研发成果,包括利用多个电视协调器同时进行多频道的电视录像,先前曾报导过的 48 个标准电视画质 MPEG-2 影片同时译码播放,以及本次最受瞩目的「 Digital Mirror type F 」变脸技术展示。该展示是透过摄影机将操作者的脸孔输入系统中,使用 Cell 来进行实时的影像辨识与处理,替操作者的脸部加上各种不同的彩装纹面图样或改变操作者的发型,并实时呈现在与操作者面对面的屏幕上,如同童话故事中的「魔镜」一般,让操作者能见识到改头换面后的自己。

   此项技术是透过 Cell 微处理器对所输入的影像进行实时的辨识与分析,将脸孔转换为以多边形所构成的 3D 模型,并以材质贴图的方式加上各种不同的脸部彩装样式,或将发型替换为各种系统内建的样式。藉由 Cell 强大的处理效能,该展示可进行每秒 100 次以上的脸部坐标追踪,并以 720 x 480 每秒 30 张画面实时输出,即使操作者转头、说话、眨眼、改变表情,系统仍可正确追踪与处理。

   该技术不只能应用于脸孔的分析,也能应用于全身动作的分析,以实时处理的方式将操作者的一举一动对应到 3D 人物模型上。现场展示了一段将走秀的模特儿实时转换为不同衣着打扮的 3D 人物模型,并与模特儿同步动作的影片,显示出该技术不只具备「变脸」的能力,还具备「变身」的能力。

   该技术除可应用于美容美发或时装业者的实时预览之外,同时也显示出游戏应用方面的潜力。由于 PS3 主机同样是采用 Cell 微处理器,加上 SCE 先前就积极的在 PS2 上推出 EyeToy 类型的影像操作产品,后续也发表将于 PS3 上推出高分辨率 IP 摄影机外围以及运用影像辨识技术操作的游戏《 Eyedentify (暂称)》,显示出未来 PS3 游戏朝玩家影像输入操作发展的广阔可能性与庞大潜力。

   在未来的 PS3 游戏中,玩家或许能直接以身体的动作来操作游戏中角色的一举一动,直接将真实的脸部表情对应到游戏角色的表情,藉以实现现有游戏所无法达成的精确体感操作,或者是创造出崭新的游玩方式。对相关技术有兴趣的玩家,不妨可以多多留意后续 SCE 新一代 EyeToy 产品的相关发表。

相关阅读

每日精选

点击查看更多

首页 手机 数码相机 笔记本 游戏 DIY硬件 硬件外设 办公中心 数字家电 平板电脑