多位评估员表示，他们被要求观看的视频里会有一些触目惊心的内容。「有人在开卡车时尝试自杀，」一个评估员说道，「那个人把卡车发动了，然后下车对着自己的脑袋开了一枪。」在广告评估员经常浏览的论坛上，匿名发帖者说他们已经看了许多对妇女、儿童以及动物施暴的视频。几个帖子上还说他们需要在连续观看这些视频后休息一下。广告评估员说他们不知道 Google 怎样选择需要审查的视频，他们在评估视频之前只能看到视频的标题和缩略图，并没有评估的理由。除此之外，还有一些人们谈论游戏、政治以及阴谋论的视频也需要评估员们观看审查。

　　总而言之，从 Google 对 YouTube 网站内容审查的范围以及审查工作的细致可以看出，在处理广告投放的问题时，Google 仍然需要人力的帮助。「我们有许多数据来源，但最重要的来源之一就是你们这些员工。」Google 在给评估员的工作描述文件中这么说道。但是，只有人工智能才能解决 YouTube 如此大的体量，正如该公司的高管们一遍又一遍强调的，在 Google 的人工智能——或者其他任何一家的——足够聪明之前，这些令人反感的内容还是得依靠人力来进行辨别和标识。

　　Google 的发言人 Chi HeaCho 说道：「一直以来，我们都在依靠科技和人力的结合来分析已被标识的内容，因为要理解视频中的信息是非常主观的。最近我们聘用了许多评估员来加速评估。这些评估结果将会帮助改进我们的机器算法。」

　　评估员上哪招？

　　广告质量评估的项目始建于 2004 年。它最初是模仿 Google 的搜索质量评估项目建立的。早期它被用于 Google 的核心广告项目：AdWords 和 AdSense，前者可以生成与搜索结果相符的广告，后者则是在其他网站上分发广告。最初雇佣广告评估员的代理机构是 ABE 公司，他们给评估员开出的薪水是每小时 20 美元。评估员可以全职工作甚至加班。到了 2006 年，WorkForceLogic 收购了 ABE，这之后评估员的工作待遇就没那么好了。一家叫做 ZeroChaos 的公司又在 2012 年收购了 WorkForceLogic，并接管了广告评估员。

　　广告评估的工作经常吸引一些喜欢工作时间灵活的人，其中包括刚刚毕业步入社会的大学毕业生，退休工人，在家看孩子的父母，还有一些身体残疾的工人。广告评估员可以随时随地的工作，只要他们完成每星期 10 个小时的最低工时即可。评估员们只需要使用自己的台式电脑或者移动设备就可以工作。

　　但这项工作的不确定性可能会对很多工人造成伤害。「我们大多数人很喜欢这份工作，」一个广告评估员说道，「但我们没机会成为全职或者正式的员工。」

　　大多数接受《连线》杂志采访的广告评估员都是由 ZeroChaos 招聘的。ZeroChaos 只是众多向科技公司提供临时工的代理机构的其中一家，它给广告评估员开出一年的合同，目前来看，还没人能够连续超过两年干这份工作。一些员工认为这种限制会导致有经验的老员工的流失。（四月初，在我们报道这个故事的时候，ZeroChaos 宣布他们取消了两年的工期限制。）

　　广告评估员没有涨薪水的待遇，他们每小时赚 15 美金，一周最多可以工作 29 小时。如果他们每周至少工作 25 个小时，就可以申请福利，但他们是否能有足够的任务来达到这个门槛还没有保障。员工们表示他们会发现自己突然就被解雇了，没有提前通知也没给个说法。有好几个员工证实了这种情况的存在，其中一个只干了一个星期。据评估员们所说，这家公司只是发封电子邮件就把他们解雇了。

　　「Google 会尽量与记录良好的代理商合作，」Cho 说道，「当情况严重到引起我们注意时，我们会将员工的顾虑传达给代理商，并同他们一起解决问题。我们会进一步研究这个问题。」然而对于这个问题，ZeroChaos 拒绝置评。

　　工作不靠谱，没有安全感

　　评估员们表示，与 Google 之间缺乏明确的沟通使得评估者对这份工作产生了更加强烈的不安全感。他们不会和 Google 的人见面——就算在面试的时候——而 Google 也只会给评估员们一个署名「广告评估管理团队」的普通 Google 邮箱作为联系方式，用以通知他们与工作相关的问题。评估员发邮件到这个邮箱，却只能收到一封自动回复的邮件。「由于收到报告的数量庞大，管理员不会一一回应问题报告：相反，我们会监控收到的报告，以尽快发现系统级的问题。」Google 的回复信里写道。「如果你需要单独回复，或者对你的账户采取特定的操作，请联系你的合同管理员。」

　　「同 Google 的沟通是完全不存在的，」一个前评估员说道。「Google 的不沟通是出了名的。」

　　另一位评估员说道：「在山景城的另一端，这些人就像巫师一样躲在幕后。我们当然非常希望能同他们交流，成为真正的同事，可惜没门。」

　　就 Google 而言，它确实有告诉评估员们他们正在做的事很重要，虽然它没说明原因。

　　「我们不是总能告诉你每一个任务是为了什么，但一定都是我们认为重要的事情。」该公司在指导教材中向广告评估员解释。「你不会经常听到你工作的反馈。事实上，你可能会觉得你的工作成果被丢进了黑洞里。就算如此，你的工作仍然非常重要，这与很多 Google 员工息息相关。」

　　但有时却息息相关过头了。Google 将已经评估过的内容列入广告评估员的绩效审查中。「这些考验将与普通的任务没什么区别，你将在常规工作中完成它们。」Google 在给广告评估员的信中说道。「你们不会知道哪些工作内容是要作为考核的。我们通过考核的成绩来评估你的表现。分数过低可能会导致合同的终止。」

　　根据佐治亚理工大学的研究员 Mark Riedl 的说法，嵌入已知答案的任务是众包方案的常用审查方法。研究员们通过这个方法来确定每一个评估员的工作是否有效，这也经常被开玩笑地称为评估员的图灵测试。

　　但 Riedl 说他并认为这个图灵测试有多大的参考价值，他说道：「要知道到我们的基层工作者们也是人类，我们有道义上的责任为他们布置有尊严的工作。」

转载请注明出处。