据报道,Meta因承包商被支付费用冒充青少年,使用敏感且令人不安的提示测试竞争对手的AI聊天机器人而受到审查。该项目被描述为安全基准测试,但这种方法引发了关于同意、平台规则、承包商福利和竞争性AI评估伦理的难题。
AI公司通常会对自己的模型进行红队测试,有时还会与竞争对手的性能进行比较。这项工作很有用,因为聊天机器人的安全失败并非理论上的。被年轻人、学生、创作者和消费者使用的模型必须谨慎处理心理健康、性取向、自残、操控和其他高风险话题。
问题在于AI市场缺乏明确的共享标准来规范竞争性安全测试的方式。如果公司秘密使用虚假未成年账户和高度敏感的提示对彼此的产品进行压力测试,结果可能产生安全洞察,但也可能损害测试过程本身的信任。


