东京大学的五十岚健夫教授等人组成的研究团队开发了提高线上“虚拟试衣”精度的技术。想要试穿衣服的人穿上测量服站在摄像头前,人工智能(AI)就会将试穿的衣服重叠在体型和姿势上实时显示出来。研究团队开发了机器人模特,准备了大量数据让AI学习,由此提高了精度。预计将应用于网购和在视频会议上换衣服等。计划数年后实现实用化。
试穿者穿上测量服站在摄像头前,就可以在屏幕上实现虚拟试穿(图片由东京大学的五十岚教授提供)
网络购物等已开始提供用智能手机拍照并虚拟试穿,便于消费者选择适合自己体型的服装。但是,很难生成衣服尺寸合身没有别扭感的图像,以及与各种姿势相匹配的图像。
此次,研究团队开发了一个系统,可以流畅地实时显示用户试穿服装的图像。首先,为了大致明确身体的各个部位,需要试穿者穿上各个部分颜色不同的测量服站在可识别三维物体的传感器摄像头前拍照,通过测量服识别服装和身体信息。
然后,AI会在考虑体型和姿势的基础上,变换不同的要试穿的服装。然后将其与身体图像合成在一起生成虚拟试穿的图像。
为了将测量服的图像转换为要试穿的衣服,还需要让AI大量学习试穿前后的一对一图像。研究团队开发了可通过输入数值来控制体型和姿势的机器人模特,为AI准备了学习数据。机器人模特可以通过数值指定左右手臂的角度、身体的厚度和宽度等。
研究团队让AI针对每件想试穿的衣服学习了约8万4千张图像。由此,AI可以生成试穿者立起衣领等复杂姿势的图像,以及虚拟试穿与正在试穿的衣服尺寸不同的衣服的图像。
可以通过数值指定机器人模特左右手臂的角度、身体的厚度及宽度等(图片由东京大学的五十岚教授提供)
五十岚教授介绍说:“利用机器人模特生成的高品质学习数据提高了虚拟试衣的品质。通过让试穿者穿测量服的方式,省去了估算体型和姿势的处理,实现了可以快速进行处理的实时虚拟试衣”。
将新技术应用于服装网络销售的话,顾客有望体验到宛如在试衣间照镜子一样的虚拟试衣。与视频会议系统相结合则可进行虚拟自由更换自己的衣服。
该系统目前还存在课题。比如为了提高AI的识别精度,需要调整好拍摄时的背景和照明。另外,机器人模特只到肘部,因此现在还无法采集长袖服装的数据。五十岚教授说:“我们已经有了(实用化)技术”,今后将继续推进改良。
日文:张耀宇、《日经产业新闻》,2021/10/27
中文:JST客观日本编辑部