公开(公告)号：CN106462818A

公开(公告)日：2017-02-22

申请号：CN201580031164.3

申请日：2015-06-05

Applicant: 微软技术许可有限责任公司

Inventor： S·E·K·伊甸 ,  R·M·帕特尔 ,  S·J·R·谢尔福德 ,  H·吴 ,  D·A·莫尔纳 ,  E·J·霍维茨

IPC: G06Q10/06 ,  G06Q10/10

CPC classification number: G06Q10/06395 ,  G06Q10/063118 ,  G06Q10/1053 ,  G06Q50/01

Abstract: 这里描述了一种众包环境，其使用单阶段或多阶段方法来评估工作者关于所识别任务所执行的工作的质量。在多阶段情况下，评估系统在第一阶段确定工作者是否对应于垃圾代理。在第二阶段，针对非垃圾工作者，该评估系统确定该工作者在未来执行期望(例如，准确)工作的倾向性。该评估系统基于包括关注工作者的特征(其描述特定工作者所执行的工作)、关注任务的特征(其描述在该众包环境中执行的任务)和关注系统的特征(其描述该众包环境的配置的多个方面)的特征的集合进行操作。根据一个说明性方面，该评估系统使用至少一个模型执行其分析，该模型使用任意类型的监管机器学习技术所产生。