国家生物信息中心宣布医学影像检索要领DAFH
医学影像是通过扫描照射方法所获得的人体器官内部组织影像，包括CT图像、MRI图像以及超声成像等。随着医疗手艺的生长，医学影像在疾病诊断、评估治疗等方面施展着主要作用。医学影像检索指从已有的医学影像数据中找到与输入的影像最相似或最相关的影像集，该要领关于疾病的辅助诊断和治疗具有主要意义。古板的医学影像检索要领只能抽取单标准的图像数据特征，现在的深度哈希检索要领能学习重大的特征表征，但医学影像的多模态性和有限的样本量影响了检索准确性和有用性。
克日，国家生物信息中心赵文明团队开发了深度注重力融合哈希模子的医学影像检索要领DAFH（Deep Attention Fusion Hashing Model，简称DAFH），并以“Deep Attention Fusion Hashing (DAFH) Model for Medical Image Retrieval”为题在学术期刊Bioengineering?在线揭晓。
DAFH通过使用多模态的医学影像数据举行训练，并使用三元网络模子融合注重力特征和中心层特征，提高医学影像的检索性能。DAFH网络了公共癌症影像归档库（The Cancer Imaging Archive，TCIA）中913个病人10种差别癌症类型的535,948张医学影像数据，通过对影像数据举行名堂转化、数据洗濯，获得高质量的医学影像数据，并举行图像数据增强。DAFH使用EfficientNet为主干网，提取起源图像特征，同时使用卷积注重力�？椋–onvolutional Block Attention Module, CBAM）提取图像的空间特征信息和中心层特征，并举行特征融合，最后将这些一连的图像特征映射成哈希码，实现基于深度哈希算法的影像检索要领。该模子的前10次平均准确率均值MAP@10在哈希码长度为16，32和48时，划分抵达0.711，0.754和0.762，均高于已有的医学影像检索要领。首次检索平均准确率均值MAP@1在32哈希码长度时可抵达0.745� ；煜卣笃饰鱿允�，DAFH在肺腺癌,导管腺癌, 宫颈鳞癌和腺癌上具有很高的MAP@1检索准确率，可以抵达85%以上。
DAFH已整合应用至赵文明团队于2023年10月宣布的医学影像归档库OBIA中。用户上传一张医学影像图片，即可在OBIA库中检索获得相似的医学影像效果集。
国家生物信息中心硕士研究生吴港澳为本文第一作者，唐碧霞高级工程师和赵文明正高级工程师为配合通讯作者。本事情获得国家重点研发妄想，永利集团先导项目资助。
DAFH模子框架图
论文链接
