数据缺失类型:MCAR、MAR、MNAR

2022.01.23


参考:
AI for Medical Prognosis

以医生是否为每个病人记录血压为例,讲解三种缺失。

1.Missing Completely at Random(MCAR)

missingness not depend on anything,no bias (通过抛硬币,完全独立)
p(missing) = constant
数据缺失类型:MCAR、MAR、MNAR
每个病人是否被记录的概率相同均为0.5,则缺失数据和非缺失数据的分布是相似的,以年龄分布为例如下图。
数据缺失类型:MCAR、MAR、MNAR

2.Missing at Random(MAR)

missingness depend only on available information(例如依赖于年龄)
p(missing)≠constant
p(missing|age<40)=0.5≠p(missing|age>40)=0
年龄小于40则抛硬币决定是否记录,大于40则记录血压。而最终收集到的数据中年龄是可得到的。数据缺失类型:MCAR、MAR、MNAR
数据缺失类型:MCAR、MAR、MNAR

3.Missing Not at Random(MNAR)

missingness depend on unavailable information
p(missing)≠constant
p(missing|waiting)=0.5, p(missing|not waiting)=0
有其他患者等待则抛硬币来决定记录与否,无其他患者等待则记录数据。但是否等待是无法观测、无法收集到的数据。
数据缺失类型:MCAR、MAR、MNAR
最终的分布可能与MCAR差不多,但存在bias。
数据缺失类型:MCAR、MAR、MNAR

上一篇:聊天机器人開發好消息!!DIALOGFLOW與微信的天作之合!!


下一篇:极简旋转loading动画编辑器