警方在追踪帮派活动时，经常需要破译涂鸦，解读信息，识别帮派，甚至通过观察他们圆润的字母和喷漆涂鸦来监控个人。新软件通过自动比对涂鸦与街头艺术库，可以帮助加快这一过程。
该系统的工作原理是过滤现有图像，这些图像目前由人工捕捉和标记。给定一个特定的涂鸦查询，系统会根据视觉和内容相似性找到一系列相似的图像，然后返回与这些相似图像相关的帮派名称。密歇根州立大学的计算机科学家，由Anil Jain领导，已经开发了这款软件两年，并计划在本月晚些时候在亚利桑那州斯科茨代尔举行的ACM多媒体会议上展示他们的研究成果。
Jain及其同事表示，与其他图像识别程序一样，涂鸦匹配系统通过寻找共同点来搜索匹配项。根据Jain及其同事的说法。这有助于过滤掉描绘相同标志或标签但可能因创作者或帮派不同而外观差异很大的涂鸦。首先，系统会从新图像中提取视觉特征，然后手动标注字母、数字和符号。之后，系统会找到与该新图像相似的候选图像。
Jain及其同事表示，拥有一个可以自动识别数字和字母的系统会很方便，但由于涂鸦的变化性太大，现有技术很难实现。相反，Jain表示，他使用众包的方式来识别单词，通过亚马逊的Mechanical Turk服务，据New Scientist报道。
《New Scientist》称，当同时使用图像和文本相似性时，该系统能够以大约65%的准确率锁定帮派或个人。
Jain及其同事解释说，该系统仍需要一些调整才能应用于庞大的涂鸦图像数据库。“未来，我们计划探索涂鸦的更多信息，而不仅仅是文本特征，例如涂鸦的时间戳和位置，”作者写道。
