URL: https://link.springer.com/chapter/10.1007/978-3-319-46475-6_7

简介

ECCV 2016 提出一种从不可访问源代码对商业游戏中抽取资源并快速标注语义的方法,并在GTAV上进行了演示说明。

数据集

fig4 https://download.visinf.tu-darmstadt.de/data/from_games/ sample

方法

商业游戏的源代码无法访问,但是他们和硬件通信的接口是公开的,数据的抽取便是在这里做手脚来实现的。 而由于现在图形渲染通常将光照和反射解耦,便于提取统一的纹理而不必处理阴影之类的问题。 作者公开了其改写的图形渲染库

文章中详细说明了获取纹理资源和对应像素,以及一些用于提升标注速度的技巧。 fig2 上图可见这里对区域的分割是比较粗糙的。

实验效果

通过比较实验表明利用逼真的商业游戏场景可以辅助提升语义分割效果。 tab3

思考

这是很早的一篇利用商业游戏获取数据的论文,介绍详细还给了开源代码非常棒。 虽然区域划分略显粗糙,但其对renderdoc对改写为后续改进提供了方便。