我想使用AMT的命令行界面创建一个资格测试。此测试只会使用可由AMT自动评分的问题类型。我可以为每个问题设置个人分数,但无法找到任何有关如何为测试设置最低及格分数的文档。例如,如果一名工作人员得分低于80分,我希望他们通过测试。如果他们的分数高于80,我希望他们通过考试。如何设置资格考试的最低及格分数?
1
A
回答
2
资格测试不起作用,如通过/失败。它分配一个QualificationScore。您可以使用AnswerKey中的QualificationValueMapping将测试分数转换为一组特定分数(请参阅:http://docs.aws.amazon.com/AWSMechTurk/latest/AWSMturkAPI/ApiReference_AnswerKeyDataStructureArticle.html)。合格/不合格元素必须是特定HIT的QualificationRequirement的一部分 - 即“合格”应该表示分数高于QualificationRequirement的阈值,并且失败应低于该分数。然后,映射将允许您将总点数转换为例如高于和低于需求阈值的值。
相关问题
- 1. 设置Javascript订单价格最低
- 2. 如何从3个考试分数中找出最低分和最高分时考虑考试分数中的关系?
- 3. 测试 - 以最低规格的Android设备
- 4. 更新最低成绩变量与期末考试分数
- 5. 试图将G2A的最低价格粘贴到Google表格
- 6. Windows Mobile的最低规格
- 7. 删除最低的测试分数
- 8. 设置风格的分组表格
- 9. 如何设置最低权限从PHP
- 10. 如何将supportedRuntime 3.5设置为最低?
- 11. 如何将输入的分/秒格式设置为datetime.now()格式?
- 12. 如果声明在C#中设置最低工资
- 13. 如何设置EditText的数字格式
- 14. MySQL查询最低价格
- 15. 最低价格选择
- 16. XSLT找到最低价格
- 17. SQL - 选择最低价格
- 18. 比较数据库的价格和选择价格最低
- 19. 如何在井字游戏中设置表格的分数?
- 20. 字符串格式设置为百分比以及如何处理空值?
- 21. 找到最低设置位
- 22. 如何设置求解器'Value of:'到单元格参考
- 23. 如何在电子商务表格上要求最低数量?
- 24. 如何检索实际工作人员对mturk资格考试的答案?
- 25. 如何取消设置会话以及从表格中输入
- 26. 如何设置单元格
- 27. 如何设置li风格?
- 28. Convert.ToDateTime:如何设置格式
- 29. 如何设置表格colspan?
- 30. 如何格式化设置
谢谢!所以要清楚的是,在自动评分测试结束后,没有办法改变对话:“恭喜你已经通过了X分数的资格考试!”?他们会一直通过,但有时候得分低于我的HITs门槛? – willwest
@willwest我猜如果你得分为零,它可能会说别的,但我不认为有任何方法可以修改消息。 – Thomas