移动拍图搜索系统

美好的风景，漂亮的衣服，款式新颖的鞋子，绽放的花朵总会让人有对其进行更深入了解的愿望，但往往苦于不确定地名，不知道品牌，不了解物种，无法进行查找。“移动终端拍图搜索系统”使上述问题不再是一个奢望，它是一个基于移动终端进行图像检索的系统，满足用户随时随地查找信息的愿望。用户使用安装有移动终端拍图搜索软件的移动终端对上述场景、衣物拍照，标出感兴趣区域，上传到网站进行检索，即可得到需要的信息以及相似的图片，如：风景区的名称、鞋子的价格、款式、网址以及与其相似的鞋子的信息，植物的物种等。目前本小组针对鞋子和植物进行“移动搜鞋”和“植物百科”的研发。

医学图像搜索系统

医学计算机辅助诊断系统用于根据用户输入的征象名称或病变区域，从医院已有数据中检索出用户感兴趣的图像，为医生进行肺部、结肠、乳腺钙化等疾病诊断、治疗、研究及教育提供良好的辅助手段。该系统工作于用户计算机设备，与PACS（Picture Archiving and Communication System）系统或其他图像存储系统连接，从中获取检索结果。

肺部征象数据库：

一个定义良好的医学图像数据库对计算机辅助诊断方法的开发和评估是非常重要的。事实上，医学图像数据库是CAD方法的普遍制约因素，因为识别和收集合适图像的任务往往是耗时和富有挑战性的过程。我们正在构建一个肺部征象数据库以满足病变检测和征象分类的需要。与其它研究者一样，我们认为一个有组织的临床图像集将是个很有价值的资源，并消除数据库构成这个变化源(该因素阻碍了不同CAD方法的比较)。 为实现便携性与LIDC数据库的兼容性，我们使用和LIDC兼容的XML格式文档存储病变区域的标注信息，摆脱了关系数据库在数据传输和交换上的束缚。数据库标注信息结构如下图所示：

交互式图像分割：

其不同于传统的自动图像分割，它试图通过在分割过程中加入用户交互作为算法输入，使图像中具有高层语义的物体能够完整地被提取出来。我们现在所做的交互式图像分割算法，用户只需要用矩形框将目标物体标记出来，然后就会得到分割结果；若用户对一次交互的分割结果不满意，则可以通过二次交互按钮进行二次或者多次交互。在二次交互中，用户需要用画笔将目标物体的轮廓进行简单的描绘，然后即可得到修正后的分割结果。交互式图像分割的效果图见下图所示。

图像搜索引擎改进：

主要进行图像搜索引擎检索结果的分析及改进方法的研究。当用户在Google、Bing等图像搜索引擎输入检索关键词(如：basket)进行检索时，返回的图片往往包含一些不相关的结果。我们的图像搜索引擎改进工作基于上述搜索引擎返回的结果进行进一步改进，使得返回给用户的结果中排列在前的数据相关度更高。其大致过程为：将搜索引擎返回的图像划分为正样本和反样本，进而学习得到针对检索关键词的分类器，该分类器对搜索引擎返回的图像集合进行重新排序，将相关度高的结果排序在前，不相关的结果排序在后，使得用户较早的得到需要的图像，而不需要对图像进行过滤或更多的翻页工作。搜索结果如下图所示，Google搜索引擎返回的前十幅图像和我们的方法改进后的前十幅图像对比示例，最左侧为检索关键词，红色框内的图像为与关键词不相关的结果。(a)为Google原始的结果，(b)为我们方法改进后的结果。

视频检索系统

本小组致力于研究视频检索相关技术，视频检索作为目前视频领域的研究热点之一，在大数据时代扮演着重要的角色。视频检索技术的以机器学习和模式识别为基础，研究主要包括视频分割、视频特征提取、索引构建技术研究和视频检索系统评价标准等几个方面。另外，为了应对海量视频数据的检索，本小组对并行检索相关技术也有一定的涉及。在研究相关视频检索相关技术的基础上，本小组还拟构建出能够投入实际应用的视频检索系统。