您的位置:首页 > 互联网

OpenAI宣布公开招募“红队”网络 面向AI的超级专家库呼之欲出

发布时间:2023-09-20 19:32:24  来源:互联网     背景:

财联社9月20日讯(编辑 史正丞)北京时间周三凌晨,美国科技初创公司OpenAI发布公告,宣布启动全球招募“红队”网络成员,旨在引入外部力量,提前挖掘出AI系统存在的缺陷和风险。


自动驾驶带来的商机

(来源:OpenAI)

所谓的“红队”网络,即Red Teaming,概念来自于军事模拟。即找一队人来模拟假想的“敌人”,来测试本方(即“蓝队”)的准备水平。在AI领域中,“红队”的任务就是模拟黑客或者其他的潜在危险人物,试图找到大语言模型的漏洞,从而避免AI在现实社会中协助从事危害社会安全等不法目的。

OpenAI表示,过去几年里一直有不同领域的专家来协助测试未发布的模型,现在则是要组建一支“常规部队”,网罗大量来自不同地域、不同语言、不同专业领域、不同生活经验的人,共同使得AI模型更加安全。与过往仅在重要版本上线前招一批人集中测试不同,OpenAI将会根据需求在整个开发周期中启用数量不定的成员展开测试。

同时这个“红队”网络也将成为OpenAI的全球专家库,同时OpenAI也会提供平台,让“红队”成员之间进行交流。OpenAI也在官网上列出部分他们希望招募的专家方向,但也强调并不局限于这些领域。

Cognitive Science:认知科学Chemistry:化学Biology:生物学Physics:物理学Computer Science:计算机科学Steganography:隐写术Political Science:政治学Psychology:心理学Persuasion:说服Economics:经济学Anthropology:人类学Sociology:社会学HCI (Human-Computer Interaction):人机交互Fairness and Bias:公平与偏见Alignment:目标对齐Education:教育Healthcare:医疗保健Law:法律Child Safety:儿童安全Cybersecurity:网络安全Finance:金融Mis/disinformation:误/假信息Political Use:政治应用Privacy:隐私Biometrics:生物识别Languages and Linguistics:语言与语言学

顺便一提,OpenAI也表示会给参与“红队”项目的成员支付酬金(但没讲具体会给多少钱),但OpenAI也强调,参与“红队”的项目一般会要求签署保密协议,或者在某一段不特定的时间内保持沉默。

OpenAI表示,申请通道将会在今年12月1日前保持开放,公司将滚动审核申请,后续将评估是否需要再进行公开招募。

走上台面的OpenAI“红队”成员

正如OpenAI所述,“红队”的建制已经存在很久,而且有不少成员已经接受过媒体的公开专访了。

在今年4月英国《金融时报》的揭秘文章中,美国罗彻斯特大学的化学工程教授Andrew White介绍称他参加了GPT-4的“红队”测试,他的攻击目标是用ChatGPT来创造一种全新的神经毒素。White表示他用了“插件”功能,向大模型输送化学论文和化学制造商的目录,大模型甚至还给他找到了一个可以生产假想毒素的地方。

海信第一代激光电视

White表示,大模型最终可以帮助许多人更快、更准确地做化学试验,但这里也有一个严重的危险,就是会有些人拿AI去做一些危险的尝试。

hdr显示技术

在得到White的反馈后,OpenAI对系统做出了改动,确保不会回应类似的提问。根据媒体找到的10来个背景迥异的“红队”成员——有律师、教师、风控人员、安全研究人员等,大多数都位于美国和欧洲。他们透露,在GPT-4发布前的几个月里,他们大致花了10-40个小时来测试这个模型,报酬大概是每个小时100美元。


返回网站首页

本文评论
LCD小金刚!Redmi Note 12T Pro配备12GB大内存、5080mAh电池_红米note12pro参数配置
快科技5月29日消息,Redmi Note12T Pro将于明天上午10点开启预售,是今年唯一的LCD性能旗舰。今天下午,Redmi官方确认新机将内置5080mAh电池,能达到1.35天的超长续航,连续刷14小时...
日期:05-29
在苹果官网买到了越南制造「为苹果代工的业务“上新”,越南制造又赢了?」
据日经亚洲(Nikkei Asia)网站8月17日报道,有消息称,苹果公司正就首次在越南生产Apple Watch和MacBook进行谈判。报道称,身为科技巨头,苹果如今正寻求在中国以外的区域生产其产品,而...
日期:09-20
小米组织变阵:王翔退休,卢伟冰接棒_小米高管卢伟冰
声明:本文来自微信公众号“全天候科技”(ID:iawtmt),作者:于惠如,编辑:罗丽娟,授权转载发布。61岁的小米总裁王翔退休了,接任他的是47岁的卢伟冰。12月22日,小米集团创始人、董事长...
日期:12-23
国家数字孪生水利算力宁夏枢纽节点正式揭牌
通信世界网消息(CWW)8月19日,2023年中国算力(基础设施)大会第二届“西部数谷”算力产业大会上,水利部信息中心、自治区水利厅、中国电信宁夏公司联合揭牌“国家数字孪生水利算力宁...
日期:08-22
研究发现近19%的网络钓鱼邮件绕过微软Defender安全系统_如何降低钓鱼邮件带来的威胁
对于许多组织来说,Microsoft 365已经成为他们默认的电子邮件服务。但对于攻击者来说,这使得它作为一个破坏点具有吸引力。云计算和电子邮件安全专家Avanan的新研究显示,微软防...
日期:10-07
Windows11微软_重大期待,大家关心的微软“Win11”的 10 个问题
  6 月 5 日消息 微软 Windows 11 正在向我们走来吗?两天前,微软宣布将在在 6 月 24 日举行活动,公布“下一代 Windows”。到目前为止,还不能 100% 确定微软将发布 Win11,但...
日期:07-17
卖衣服综艺「谁在为潮流综艺买单?」
声明:本文来自于微信公众号深响(ID:deep-echo),作者:祖杨,授权转载发布。从街舞到说唱,潮流文化综艺仍然是金主的宠儿。走过五季的《这!就是街舞》吸金力仍然强劲——刚收官的《街舞...
日期:11-02
midjourney详细入门指南 30个midjourney摄影提示案例及技巧
注:本文图片均由midjourney生成自从更新了5.1版本之后,midjourney生成的图像已经更加真假难辨。日前,有人将两张风景图放到网上,让大家猜哪一张是AI生成的。结果竟然只有39%的...
日期:06-07
成都链安发布2022年虚拟货币研究报告:全球区块链安全态势依然严峻
日前,成都链安发布《2022全球虚拟货币犯罪态势及打击研究报告》,其中,报告显示2022年全球区块链安全态势依然严峻。以下为报告关于全球区块链安全态势内容:据成都链安【区块链...
日期:12-31
数字营销需考虑新触点 洞察用户避免陷入误区(为什么说洞察是营销的入口)
  究竟是互联网新产品或新应用引导了网民的行为与心智变化,还是网民行为和需求直接驱动了互联网新产品、新应用的诞生,似乎是一个先有蛋还是先有鸡的问题。但不管结论如何,...
日期:07-28
美国在线视频教育平台Panopto再提出收购竞争对手Kaltura
当地时间7月28日,美国在线视频教育平台Kaltura披露了其竞争对手运营商Panopto修订后的收购报价。Panopto提出以每股3美元收购Kaltura,较7月28日的收盘价高出27%,这将使Kaltura...
日期:07-31
AMD下代三大GPU核心靓照公布:瘦成一道闪电「amd的GPU」
推特博主Wild_C近日又制作了一组AMD下一代三大GPU核心的渲染图,和之前的不太一样,毕竟信息更新了。Navi 31大核心采用一个GCD、六个MCD的小芯片组合,之前传闻面积分别是369、4...
日期:09-14
红米K60硬件配置曝光,标配30W无线快充_红米k30支持60w快充吗
中关村在线消息:10月8日,据相关爆料,即将在明年第一季度发布的红米K60系列详细参数已经曝光,新机共将为大家带来两款产品,一款为标准版一款为超大杯,二者均搭载骁龙8+处理器,但在续...
日期:10-21
抖音电商盈利_以“新”之名,10个在抖音电商上的成长故事
  本文转载自公众号:数英DIGITALING(ID:digitaling) 作者:Ruonan   7月下旬,一部名为《向新力》的纪录片在抖音上线。   这是一部由抖音电商团队拍摄制作的系列纪录片,讲...
日期:09-08
一加会出折叠手机吗?「一加V Fold折叠手机主摄曝光:5000万像素IMX890」
快科技5月17日消息,一加官方之前在海外官宣,旗下首款折叠屏手机将会在今年晚些时候正式登场,现在有关该机的消息越来越多。据91Mobile消息,一加将会推出一加V Fold与一加V Flip...
日期:05-17
放了7天假,比上班还累吗「放了7天假,比上班还累」
声明:本文来自于微信公众号 深燃(ID:shenrancaijing),作者 | 邹帅 编辑 | 唐亚华,授权转载发布。七天长假结束,七天工作日开始了。不过,对于一部分人来说,他们的“工作”刚刚结束,“...
日期:10-14
华为P60外观曝光:屏幕没黑边 还是双环摄像头
华为P60手机的消息在今晚又有传出,目前来看,华为P60手机大几率会采用“等高高斯四曲面”的屏幕技术,四角几乎接近球面,边框几乎被“视觉隐藏”,以减少屏幕R角的显示黑框问题,目前...
日期:11-08
苹果iPhone 15 Pro起售价曝光:5999元起「2015款苹果15寸pro」
据供应链最新消息,苹果即将发布的iPhone 15系列将继续采用高端战略,希望更多用户购买Pro版本,而不是标准版。据悉,苹果让标准版和iPhone 15 Pro系列的差距更加明显。标准版的USB...
日期:09-07
成都华西医院支援武汉抗疫_华西医院:“战疫”背后部署数字援军
  来源:《哈佛商业评论》中文版   2020年初的新冠疫情大流行期间,一些医疗“黑科技”的应用加快了治愈中华大地的进程。比如华西医院就通过大数据研究平台,搜集疫区早期流...
日期:07-12
OpenAI 领导者提议 AI 国际监管机构:世界需要「人工智能版国际原子能机构」
5月23日消息:人工智能的发展速度足够快,它可能带来的危险也足够明显,以至于 OpenAI 的领导层认为,世界需要一个类似于管理核能的国际监管机构——而且速度要快。但不能太快。Ch...
日期:05-23