• IMCS-SR智能医疗咨询系统症状识别数据集
• • 评测指标
  • 数据集

IMCS-SR智能医疗咨询系统症状识别数据集

随着"互联网+医疗"的迅速发展，在线问诊平台逐渐兴起，在线问诊是指医生通过对话和患者进行病情的交流、 疾病的诊断并且提供相关的医疗建议。在政策和疫情的影响之下，在线问诊需求增长迅速。然而医生资源是稀缺的，由此促使了自动化医疗问诊的发展，以人机对话来辅助问诊过程。为了促进智能医疗咨询系统（Intelligent Medical Consultation System, IMCS），复旦大学大数据学院在复旦大学医学院专家的指导下构建了 IMCS21数据集。

IMCS-SR 任务的目标是从医患对话中同时预测症状的归一化标签和类别标签，该任务的输入输出示例如下。

IMCS-SR 任务要求提交文件为 json 格式，提交文件需要命名为"IMCS-SR_test.json"，提交格式如下。

{
    "example_id1": { # 测试集样本id
        "咳嗽": "1",
        "发热": "0",
        "鼻流涕": "2"
    },
    "example_id2": {
	 ...
    },
    ...
}

评测指标

IMCS-SR使用对话级别的F1分数（F1-score）作为评估指标。对于测试集中的每个对话，参赛选手需要预测该对话中出现过的症状及其与病人之间的关系，以字典的形式给出，具体参考提交样例文件example_pred.json。

数据集

训练集样本1,824条，验证集样本616条，测试集样本612条。其中训练、验证集来自CCL评测任务的训练数据，测试集来自CCL评测测试集。

数据集名称： IMCS-SR (IMCS - Symptom Recognization dataset)

数据集下载文件为：IMCS-SR.zip, 包括：

IMCS_train.json: 训练集，IMCS 4个子任务共享
IMCS_dev.json: 验证集，IMCS 4个子任务共享
IMCS_test.json: 测试集， IMCS 4个子任务共享
symptom_norm.csv：共包含331个归一化后的症状实体。
split.csv：数据集划分文件，数据集应划分好train/dev/test，选手无需关注
IMCS-SR_test.json: IMCS-SR任务的提交文件，提交格式请参照example_pred.json
example_gold.json: 标准答案示例
example_pred.json: 提交结果示例
README.txt: 说明文件