【新智元导读】Meta的元宇宙探索之路,仍未停息。重召被裁员工,发布超逼真虚幻图像数据集,全世界组装AR眼镜……
Meta的元宇宙探索,还在继续。
最近,Meta用虚幻引擎开发了全新的逼真合成数据集,希望拉近合成数据与真实世界数据的距离。
他们还计划制作一款全新的AR眼镜,仅用于内部开发和公众展示。
据悉,这款眼镜的制造流程涉及中国大陆、中国台湾和美国的工厂。原因是镜片内包含一款军用材料,无法轻易出口到美国以外的地方。
另外,Meta甚至还成立了一个「前员工门户」,把从前解雇的员工慢慢招了回来。
真实虚幻图像数据集
Meta推出的真实虚幻图像(PUG,Photorealistic Unreal Graphic)数据集,能够对人工智能视觉系统进行更可控、更稳健的评估和训练。
这个数据集通过虚幻引擎Unreal Engine合成了超过20w个动物图像,以及数十万张包括各种姿势,光照和背景的图像,来作为训练,评估图像模型和图像系统的基础。
PUG因为使用了Unreal Engine合成的图像,保证了图像素材的真实感,使得它的使用范围比之前类似的图像数据集要大大扩展。
PUG由4个部分构成:
1. PUG Animal
用于研究分布外泛化和研究基础模型的表征空间,包括了:
215,040张预渲染图像,涵盖了70种动物资源,囊括了4种尺寸,3种纹理,4种不同的方向。
2. PUG ImageNet
数据集提供了一个新颖和高效的基准测试,用于细粒度评估图像分类器在多个变化因素上的稳定性,包含了:
151种ImageNet类型(class),64种背景,7种尺寸,10种纹理,18个视角,18角色方向(Character Orientation),7种光照强度。