[feature wanted]多人交叉验证的标注质量控制

[crownpku]

每个task可以选择多人交叉验证。
不同worker标注出现出入的话，需要一个owner最后确认。

另外足够多数据训练之后，可以考虑将算法置信度也引入帮助判断和怀疑标注质量。

[minminzhong]

有一些疑惑的地方，
1.每个task 选择多人交叉验证，这一步是设在哪个环节的呢？
2.多人交叉验证具体怎么操作呢？

[crownpku]

1. worker自己做自己的标注任务，和单用户版本没有太大区别，online模型也都是自己的。
2. online标注完成，相同的文本，不同worker出现标注不一样的结果，这时就需要owner在offline模型全量训练之前做确认。修改的结果要反馈给标注错误的worker。
   重复1-2