York Urban Line Segment Database 由 102 张城市环境图像组成的，其中 45 张为室内场景，57 张为室外场景。图像主要是加拿大约克大学校园和多伦多市中心的场景，尺寸为 640 x 480 像素，由经过校准的松下 Lumix DMC-LC80 数码相机拍摄。

数据集中的每张图片都经过手动标注，以识别符合 “Manhattan assumption”（Coughlan & Yuille 2003）的线段集。 Manhattan assumption 指的是符合城市环境的 3D 正交框架的线段集。