赛题背景

影像科医生在工作时会观察医学影像(如CT、核磁共振影像),并对其作出描述,这些描述中包含了大量医学信息,对医疗AI具有重要意义。本任务需要参赛队伍根据医生对CT的影像描述文本数据,判断身体若干目标区域是否有异常以及异常的类型。初赛阶段仅需判断各区域是否有异常,复赛阶段除了判断有异常的区域外,还需判断异常的类型。判断的结果按照指定评价指标进行评测和排名,得分最优者获胜。

赛题描述及数据说明

sample数据

医生对若干CT的影像描述的明文数据,及描述中有异常区域与异常类型的label。样本数量为10份,以便使参赛队伍对比赛数据有直观的了解(Sample数据只是为了增进参赛选手对医疗影像描述的直观了解,实际训练与测试数据不一定与Sample数据具有相同特征或分布)。

每份样本占一行,使用分隔符“|,|”分割为3列,为不带表头的CSV数据格式。

图像异常检测深度学习网络 医学图像异常检测_图像异常检测深度学习网络

需要预测的人体区域有17个,复赛中需要判断的异常类型有12种。由于数据安全需要,不会告知具体区域与类型的名称,只会以ID表示,区域ID为0到16,类型ID为0到11。每个影像描述中可能有零个、一个或多个区域存在异常;若此描述有异常区域,则可能包含一个或多个异常类型。

Training数据

脱敏后的影像描述与对应label。影像描述以字为单位脱敏,使用空格分割。初赛只进行各区域有无异常的判断,label只有异常区域ID。复赛除了判断各区域有无异常,还需要判断各区域异常的类型,因此label包含异常区域ID与异常类型ID。初赛Training集规模为10000例样本,复赛Training集规模为20000例样本。Training数据用于参赛选手的模型训练与预估。

  • 初赛Training数据格式(不同列使用分隔符“|,|”分割):

列名

类型

示例

report_ID

int

1

description

脱敏后的影像描述,以字为单位使用空格分割

101 47 12 66 74 90 0 411 234 79 175

label

由多个异常区域ID组成,以空格分隔。若此描述中无异常区域,则为空

3 4

  • 复赛Training数据格式(不同列使用分隔符“|,|”分割):

列名

类型

示例

report_ID

int

1

description

脱敏后的影像描述,以字为单位使用空格分割

101 47 12 66 74 90 0 411 234 79 175

label

string,由两部分组成。第一部分为若干异常区域ID,用空格分割。第二部分为若干异常类型ID,用空格分割。两部分用逗号“,”分割。若定义中所有区域均无异常,则两部分均为空,此项为“,”。

3 4,0 2

Test数据

脱敏后的影像描述,脱敏方法和Training相同。Test数据用于参赛选手的模型评估和排名。初赛Test集分为AB榜,规模均为3000。复赛Test集规模为5000。

Test数据格式(不同列使用分隔符“|,|”分割):

列名

类型

示例

report_ID

int

1

description

脱敏后的影像描述,以字为单位使用空格分割

101 47 12 66 74 90 0 411 234 79 175

提交说明

对于Test数据report_ID,description,选手应提交report_ID,prediction,其中prediction是预测结果。初赛中prediction是17维向量,值在0到1之间,表示各区域有异常的概率,使用空格分割。复赛中prediction是29维向量,值在0到1之间,前17个值表示17个区域有异常的概率,后12个值表示此描述包含各异常类型的概率。

图像异常检测深度学习网络 医学图像异常检测_Test_02

评估标准

在Test数据上将对选手提交结果使用ROC曲线的AUC(Area Under Curve)作为评估标准。

图像异常检测深度学习网络 医学图像异常检测_Test_03


下面以复赛分数为例,举例说明分数计算方法。为了便于说明,这里假设区域有3个而不是17个,异常类型有2个而不是12个。设真实值和选手提交的预测值分别如下:

真实值Ground Truth

预测值Prediction

0 1 0 1 0

0 0.6 0.7 0.5 0

0 0 1 1 0

0 0.6 0.8 0.1 0.2

则第一部分分数为对以下数据计算AUC:

图像异常检测深度学习网络 医学图像异常检测_图像异常检测深度学习网络_04

比赛规则

  1. 本项比赛全程不允许使用外部数据集。
  2. 允许使用预训练模型,如网络模型与embedding等。
  3. 复赛阶段可以使用初赛阶段的数据集。