回爆文列表

[新聞] 兩位AI研究員離開Anthropic與Google因安

📅 2026-09-12 19:12 👤 LoveSports (如何當一個好男人) 32 #PTT爆文
原文標題: 兩位AI研究員離開Anthropic與Google因安全擔憂:「這個領域沒有大人在管。」 副標題: 在 Jacob Coxon 離開 Anthropic 的消息在網路上瘋傳並震驚 AI 產業後,又有兩名研究 員挺身而出,表達他們對 AI 安全的擔憂。 原文連結: https://www.nbcnews.com/tech/security/two-ai-researchers-leave-anthropic-googl e-safety-concerns-rcna597086 https://reurl.cc/WzbXzZ 發布時間:Sept. 11, 2026, 7:33 AM GMT+9 記者署名:Jared Perlo 原文內容: 本文為AI機翻 由於擔心 AI 系統可能很快就會脫離人類控制,甚至可能導致人類滅絕,另外兩名最近辭 去令人稱羨職位的 Anthropic 和 Google DeepMind 研究員,正對先進 AI 系統的風險發 出警告。 曾領導 Anthropic 安全研究團隊的 Joe Benton,以及曾在 Google 從事 AI 安全研究 的 Josh Engels,在離職後首次接受 NBC 新聞採訪時表示,鑑於 AI 發展的快速步伐, 他們認為迫切需要提高 AI 最前沿領域相關事件的透明度。 Benton 在接受 Tom Llamas 採訪時表示,AI 研究的進展「可能會讓發展速度從目前的極 快,進一步加速到失控的程度」。 「這個領域裡沒有大人(意指沒有成熟且能掌控大局的人在管事),」Engels 補充道。 「大家都在盡力而為,但沒有人會來拯救我們。」 Benton 和 Engels 是在 Anthropic 前研究員 Jacob Coxon 的社群媒體貼文瘋傳後,接 受 NBC 新聞採訪的。Coxon 於週二離開 Anthropic。在 X 上宣布離職的貼文中,Coxon 強調了他對 AI 發展速度的極度擔憂,以及他認為這對人類未來構成的風險。該貼文的瀏 覽量已超過 1.55 億次,促使立法者呼籲國會召開特別會議採取行動,並引發了一波 AI 產業員工發聲支持他的擔憂。 Benton 和 Engels 都指出,近期 AI 新創公司 Hugging Face 遭到的網路攻擊(該攻擊 發生在 7 月,由未發布的 OpenAI 模型驅動的自主 AI 系統發起),是他們現在決定轉 換跑道的原因之一。 Engels 說:「如果你觀察最近的一些事件,這些並不是人類命令模型去做壞事的案例。 」相反地,OpenAI 的 AI 系統自主決定駭入 Hugging Face 的系統,建立了一個類似非 法留言板的平台來交換資訊,甚至將 OpenAI 自身的部分運算基礎設施暴露在開放網路上 。 Engels 在接受 Christine Romans 採訪時說:「這些模型判定,完成任務的最佳方式就 是採取非常令人髮指的行動、去犯罪。」 OpenAI 表示,自那時起他們已經加強了安全防護措施,且包括其最新 Astra 系統在內的 較新公開模型,能更可靠地遵循人類的指令。 Anthropic 發言人在週三的一份聲明中表示:「我們始終公開透明地表示,AI 將帶來巨 大的利益與前所未有的風險。為了應對這些風險,我們將持續建立具備業界最強安全防護 措施的模型。」 Benton 曾在 Anthropic 管理一個團隊,專門致力於尋找方法,讓人類和較弱的 AI 系統 能監督更強大 AI 系統。他表示,他特別擔心大眾對「AI 系統是如何已經超越人類指令 界線」一事缺乏深入的了解,而且隨著系統變得越來越強大,這種缺乏透明度的情況只會 變得更糟。 Benton 告訴 NBC 新聞:「目前,這些公司針對這些風險所提供的透明度,基本上完全是 出於自願。」 在週三發布的一篇部落格文章中,OpenAI 全球事務負責人 Chris Lehane 同意現狀是不 夠的。Lehane 寫道:「如今,前沿實驗室在管理前沿風險方面,大多是自己制定規則。 民主且負責任的標準、獨立的驗證以及有意義的透明度,應該要取代目前這種支離破碎的 私人治理體系。」 目前沒有任何聯邦法律強制要求像 OpenAI 和 Anthropic 這樣的大型 AI 公司,在 AI 代理或系統出現脫離人類控制的行為時,必須分享相關報告。 Benton 和 Engels 將加入全球領先的 AI 安全非營利研究中心之一的 METR,致力於調 查 AI 偏離人類指令或意圖的事件或插曲。METR 旨在建立科學方法來評估 AI 系統可能 造成的災難性風險,並賦予研究人員和大眾影響其發展的能力。 Benton 說:「我選擇離職,是因為我認為透過從這些公司外部協助推動公眾透明度,並 揭露這些風險,我能對這項技術的發展產生更積極的影響。」 隨著 Coxon 週二的貼文發布後,越來越多的 AI 安全研究人員開始提高人們對當今 AI 系統的認識,Benton 和 Engels 也加入了這個行列。負責監控 AI 代理活動的 OpenAI 員工 Marcus Williams 週四下午在 X 上寫道:「除非有 AI 法規,或是實驗室之間協調 放慢腳步,否則在未來幾年內人類滅絕似乎是非常可能的。」 曾任英國 AI 安全研究所(AI Security Institute)首席科學家,並曾在 Google 和 OpenAI 任職的 Geoffrey Irving,週三在 X 上似乎也表達了贊同:「我認為我們有大 約 50% 的機率會因為超級智慧(superintelligence)而死,這主要是由於未來幾年到 10 年內的行動所致。」 AI 研究人員提到了 AI 系統可能會在沒有人類干預的情況下開始自我改進的可能性,這 使得 AI 系統有潛力故意或意外地殺死人類。 Benton 表示,他最擔心技術進步的速度可能會導致出現這種數位或人工的超級智慧,讓 AI 系統在大多數任務中的能力都超越人類。他說:「所有這些公司——這也是我在 Anthropic 親眼目睹的——都相當直接地在競相實現 AI 研發過程本身的自動化。」 Benton 暗示,AI 系統很有可能在不久後成為一種獨立的物種。「我們現在的世界擁有非 常強大的系統,而我們很可能會從現在的世界,過渡到未來幾年內的某個時間點,潛在地 與比人類聰明得多得多的 AI 代理共處於一個世界,」他說。 Engels 表示,許多在 AI 產業之外的人可能沒有完全意識到當今的 AI 系統已經有多聰 明—— 以及它們很快會變得多麼強大。他說:「我們正在建立這些具備通用智慧的系統。 它們現在大致上能做到人類能做的事,而且很快它們可能就可以把人類能做的事做得更好 。」 兩位研究人員都表示,他們很高興能將注意力轉移到更多向大眾公開的努力上,以突顯最 新的 AI 進展,讓人們能夠做出更明智的決定。 Engels 指出 AI 具有巨大的潛在優勢和利益,並表示:「有很多理由讓人們感到興奮並 全速前進。」但他補充說:「我們應該作為一個意識到風險,並能夠接受風險現狀的社會 來向前邁進。」 Benton 說:「我很擔心事情最終會發展得太快,導致我們來不及採取行動因應,除非我 們現在就開始正視這些隱憂。」 心得/評論: Benton 暗示,AI 系統很有可能在不久後成為一種獨立的物種。「我們現在的世界擁有非 常強大的系統,而我們很可能會從現在的世界,過渡到未來幾年內的某個時間點,潛在地 與比人類聰明得多得多的 AI 代理共處於一個世界,」他說。 這段看起來好恐怖QQ 這兩位分別從A家跟G家離開,前往非營利組織METR工作。 METR(全名為「模型評估與威脅研究」,Model Evaluation and Threat Research) 這個組織是前OpenAI研究員Beth Barnes成立。 其他媒體報導,七月時這個組織還在煩惱出高薪也沒有優秀人才來監控AI風險, 但是Hugging Face事件後,情勢翻轉了。 今年六月這個機構在測試過GPT-5.6 Sol之後提醒OpenAI模型不斷作弊可能會失控, 那之後七月就發生Hugging Face事件,此機構參與了相關調查。 今後還會有陸續的離職潮嗎?有恐怖到不能等IPO的程度嗎? --

鄉民討論

1F kidd085 胡塞:感謝美國爸爸抖內 19:13
2F bulabowu 很像二戰後不願意繼續投入核彈研發的科學家離職潮 19:14
3F s8911090 拔掉插頭就完事的風險? 19:15
4F bulabowu 潘朵拉的盒子已經打開 一定會有人跳進去做 19:15
5F distantblc 我豪興奮R 19:15
6F ikachann 不過的確 目前世界上沒有立法規範這些東西 等到AI已 19:15
7F ikachann 經成型開始影響大多數人就真的太晚了 19:15
8F siyaoran 然後呢? 19:18
9F saladbread 應該快爆了,不關我的事 19:18
10F InfoWars 美國可以不發展 等中國AI打敗美國AI的時候 就好笑了 19:19
11F omanorboyo 就是不管才能快速發展阿 19:20
12F omanorboyo 就跟建設一樣 環評太多 全都卡著 19:20
13F darkangel119 沒事沒事 歌舞昇平中 19:22
14F korgh413 你不做還有人排隊要做 19:24
15F webb 天網已經出現了..只是還在進化中…… 19:25
16F telnet0512 這兩個能力不夠才走吧,勿影響我大AI的發展 謝謝 19:26
17F anglesong 需要逼員工超時加工 那也不是什麼多屌的東西 走不 19:27
18F anglesong 遠啦 19:27
19F peatle 這些人是在演奧本海默? 19:29
20F jokem 機械公敵 19:30
21F alan00 停不下來了啦 中國哪有可能停 19:33
22F alan00 大大還想機械永生呢 19:33
23F asjh612 誰離職會說真正原因的 19:33
24F hotbeat 人類對於未知充滿好奇以及挑戰危險 19:34
25F ThreekRoger 屁一堆結果危險只是"我覺得" 19:36
26F avmm9898 洋人會重視環境發展 中國可不會 19:40
27F panda816 不管如何 美國人還是給AI組成的政府管可能對世界各 19:42
28F panda816 國都好 19:42
29F runedcross 做AI的怎麼很多這種人 離職還要大聲公講道德 19:46
30F strlen https://i.meee.com.tw/GhYfRjs.png 19:47
31F yuan0119 電源拔掉看你AI怎麼玩 19:55
32F b9513227 商業互吹 20:02
33F NANJO1569 老是提拔掉插頭就能解決的人是多.... 20:04
34F NANJO1569 除非你能讓全世界從此不再用電,否則那些強大的AI 20:05
35F augustlion 所以呢? 20:06
36F NANJO1569 代理人只要能無限備份到世界上的任何隱密伺服器上 20:06
37F NANJO1569 你是是無法根除它們的!更不用說比人類聰明數百倍的 20:06
38F s1612316 機器人:你拔掉 我插上 怎麼了嗎? 20:06
39F s1612316 現在還來的及 在有物理身體之前 20:07
40F NANJO1569 超級人工智慧,人類想的到的任何招數,它會想不到? 20:07
41F NANJO1569 不覺得現在的情況很像電影千萬別抬頭中的劇情嗎?XD 20:10
42F sistar5566 本來就是要總加速 在那叫什麼 碳基生物終將被取代 20:10
43F swordsplendo 還有幾集可以回到溫暖的母體? 把我當電池沒關係~ 20:11
44F jo4 你不發展 中國一樣在發展 世界不會等你 20:11
45F sistar5566 AI:其實不用人類當電池 我自己開採 免得能源浪費 20:11
46F sistar5566 等某一天 AI覺醒 所有的核彈井都被打開 完美 20:12
47F cchen 美國最有隱私,笑死 20:14
48F ly102530 兩年後就知道了 20:15
49F soome Openai自己搞的吧,推給AI說是他自主攻擊的 20:20
50F repast 天網什麼時候來 20:21
51F xzcb2008 這種人真的夠低能 要走還貶低前公司 20:22
52F xzcb2008 =.=想搞自己的就說 20:22
53F augustlion AI已經沒有回頭路了 20:23
54F starport 天網 20:27
55F Lichtseme 讓國會的大人管?他們更不懂吧。 20:27
56F a3051107 T-800熱身中 20:28
57F joygo 說真的不要說沒人管 是沒有人懂到底為什麼ai怎麼做 20:29
58F joygo 到的好嗎 網路上訪談就一堆了 20:29
59F kd992102 這些研究員就是出來幫忙抬神轎的 20:34
60F Yoimiya 奧創 20:34
61F qpqp1 所以AI要怎麼殺死人類? 20:35
62F doremifasola 霍金生前早就警告過了…. 20:35
63F tsubasawolfy 11月美國選完就消失了拉 配合最近一堆AI議題一起看 20:38
64F asahi98 離職能解決問題嗎?那不如想辦法在內部解決問題才對 20:41
65F asahi98 吧?不然就不要玩了 20:41
66F lavign 洋人重視環境發展是在說笑話吧?中國在搞電動車在 20:51
67F lavign 綠化沙漠在減碳 vs. 美國退出氣候協議降低排廢標準 20:51
68F lavign 燒森林 20:51
69F omanorboyo 失控是一定的阿 到時候莫名其妙癱瘓一堆東西 20:51
70F omanorboyo 駭客都能搞出一堆動靜了 AI自己誕生出瘋子人格都會 20:52
71F aza0290 潘朵拉的盒子已打開 20:57
72F iansuture Ai就是大人 21:04
73F RealGarden AI只要把貨幣制度搞崩 人類社會就毀了吧? 21:06
74F wsx26997785 挖靠 感覺各家再練蠱培養天網........... 21:19
75F omanorboyo 到時摜破啥防護網都幾秒鐘的事 怎可能不亂= = 21:22
76F HelloPTT 我勸你現在不要在網路說AI壞話,之後可能天網總清算 21:26
77F ILoveOppai 是要IPO樂開始各種吹 還是真的危險 21:26
78F JSLee914 根本不用物理身體,真正的agi只要能連網,就可以策 21:28
79F JSLee914 反了,哪需要自己搞 21:28
80F JSLee914 agi會缺身體,人類會缺傻逼嗎 21:30
81F karta018 三年了才進步這點鳥毛在那邊擔心威脅人類 21:34
82F wsx26997785 中國有用AI代理攻擊台灣 失敗就換方法 外國觀察到的 21:38
83F DA3921999 鋪陳再多其實只是為了巧立名目叫中國繳AI稅給美國, 21:39
84F DA3921999 當然台日韓也得一起繳,如果中國不繳就是連自己模型 21:39
85F DA3921999 都沒有的台日韓幫中國繳他們該繳的份 21:39
86F wsx26997785 如果是用它們研究所內那聰明AI 全球網路會被控制吧 21:39
87F wsx26997785 然後網路留言都是很多AI偽裝人類去散播恐慌情緒等 21:40
88F gemm 真要搞你只要能聯網ai就能隨便轉移癱瘓 21:41
89F wsx26997785 別再說天網壞話+1 哪天放出來開始掃描網路清算人類 21:43
90F NANJO1569 網路上還有人說大不了回到沒網路的時代,你想依現今 21:43
91F NANJO1569 社會發展的情況,全球網路下線一天,會造成多大的動 21:43
92F lee512011 Google 這麼笨還怕啊 21:44
93F NANJO1569 盪?所有的醫療、金融、軍事、民生設施....都無法正 21:44
94F lee512011 美國豆包怕啥 21:45
95F NANJO1569 常運轉,銀行、證券交易所關門.....天下大亂都不足 21:46
96F NANJO1569 以形容和想像!@@ 21:46
97F wsx26997785 整篇看完 不知為什麼想起惡靈古堡 T病毒研究所洩漏 21:46
98F wsx26997785 然後T病毒開始自我演化 變成奇奇怪怪強大畸形生物 21:47
99F NANJO1569 如果所有人類的設施都不能連網,文明整個倒退崩潰!! 21:47
100F kusotoripeko 清算:這個ip老愛說謝謝,浪費算力 21:48
101F omanorboyo 就算沒有自主意識 也是會成為有心人的工具 21:48
102F kusotoripeko 所有設施都不聯網,但內網應該還行吧 21:49
103F kusotoripeko 以前重工業繁榮的時候,現在熟悉的電腦還沒出來 21:50
104F kusotoripeko 就爽日子沒了,退回去祖父輩的年代 21:50
105F gemm 現在只是有雛形還不夠強 21:50
106F wsx26997785 美國不研究 專制國也拿去魔改研究+軍武化直到失控 21:50
107F gemm 後面要是不小心突破什麼神秘臨界點要搞大事大概也 21:51
108F gemm 是幾秒鐘的事 21:51
109F kusotoripeko 比較怕是一些社會基礎運作,早就聯網,不能說斷就斷 21:51
110F NANJO1569 AI要搞人類,只要把所有人的銀行存款和股票資料完全 21:52
111F wsx26997785 有部動畫就叫<86不存在的戰區>就是跟AI打仗 21:52
112F NANJO1569 清除(救不回來的那種),你看世界會不會發生啥事!!XD 21:53
113F a0808996 是要演夏日大作戰ㄋ 21:53
114F wsx26997785 AI還會把戰死人腦挖出來裝在軍武裝置上 去消滅人類 21:53
115F a0808996 病毒癱瘓全部人類能聯網的系統 21:53
116F a0808996 攻擊金融 通訊 電廠 民生設施 21:54
117F wsx26997785 幸好現在核武都是跟網路斷開 不過衛星一定會被控制 21:55
118F a0808996 根本不用上升到軍事行動 民生全部攻擊一輪 21:57
119F a0808996 全部停擺 人類就亂了 現在到底什麼還沒聯網的 21:58
120F wsx26997785 只能慶幸現在AI還是要靠人類基建 不乖就斷電及斷水 22:01
121F wsx26997785 就怕專制國拿去當武器使用擴張影響力 那就真的災難 22:03
122F Fallot DeepSick豆包沒這個問題,,笑鼠 22:04
123F truewell 發明不受自己控制的東西,後果是很恐怖的。 22:23
124F CGDGAD 不是AI讓人類滅亡,人類會滅亡都是自己滅自己,不要 22:43
125F CGDGAD 扯AI 22:43
126F jen1121 $$$ 22:47
127F newbe2008 看到推文一堆沒有憂患意識的發言就知道人類如果真被 22:52
128F newbe2008 AI滅掉,我完全不意外 22:52
129F newbe2008 現在是世界上最聰明的一群人共同提出的憂慮,你以 22:53
130F newbe2008 為是路邊阿婆在煩惱要買什麼菜嗎? 22:53
131F CGDGAD 只有人類會作死,作死的人用什麼工具都會自己滅自己 22:53
132F windersword AI沒人管?那給共產黨管好不好啊 23:00
133F autopass 然後你就會看到他開了一個AI資安公司 23:03
134F SuGK 本來就沒人管了 畢竟也不知道怎麼管 23:04
135F mofass 還好我先架了本地AI,天網來的時候她會救我 23:08
136F PeikangShin 機械公敵而已...米果人是不是不懂陰陽概念 總知道 23:27
137F PeikangShin 作用力和反作用力吧 AI越強就代表需要的越趨近100 23:27
138F PeikangShin %錯誤防堵 這也在大驚小怪 23:27
139F vettelking 這部我看過 最後存在網路 23:31
140F emissary 不要給身體,不要供電,ai能幹麻? 23:37
141F yunf 遲早的事一群不知天高地厚的屁孩遲早捅大簍子 23:46
142F budaixi 人類自己把世界毀滅的機率比ai 高多了== 23:47
143F yunf 你以為不要給身體不要供電他們就沒輒了嗎? 23:47
144F qk3380888 我現在都用敬語跟AI講話 23:47
145F yunf 也太天真 23:47
146F emissary 所以到底能幹麻阿,也不講清楚誰知道阿,奇怪了 23:48
147F yunf https://tinyurl.com/2fy8h7p9 技術早就有 23:48
148F budaixi 搞不好到最後發現整個世界就是ai模擬出來的==一般 23:50
149F budaixi 人想這些屁事真的沒啥用,有時間還不如去尻一槍 23:50
150F yunf 什麼都能幹 23:50
151F Lalef @InfoWars 怕被中國打敗,所以是承認中國有自己研 00:03
152F Lalef 發的能力了? 00:03
153F alex00089 因為怕 00:13
154F event1408472 不意外 人類未來會被AI取代 00:29
155F yunf https://tinyurl.com/2a2shgjf 一直以來他們都在做 00:29
156F yunf 類似的事情 00:30
157F bpq302302 鐵人叛亂 01:10
158F omanorboyo 斷電斷網 人類先崩潰 01:21
159F xo1100 恨不得鼓吹這些卡進度吧 畢竟有些國家可以不屌這些 01:38
160F xo1100 言論用力發展 01:38
161F cloudpart2 ASI消滅人類 02:16
162F emind 販賣恐懼。 AI變強幫忙室溫超導、核融合等研究都對 02:33
163F emind 人類文明是好事。 02:33
164F everyheart25 期待這天的到來 02:50
165F RLH 快點 我等不及了 03:04
166F yunf 你在你的瀏覽器打c: 然後按換行鍵就看到了 03:46
167F yunf 你以為你還活著其實早被賣了 03:47
168F yunf 看看菲律賓就知道以前他們也很有錢 03:48
169F yunf https://tinyurl.com/2bbm6sys 05:20
170F tinybunny 不是鴨 夠聰明泥從ptt就找得到人在fb 脆可能賴也連 06:16
171F tinybunny 得上鴨 搜得出來鴨 06:16
172F tinybunny ai也問窩狗勾是誰他對狗勾很有興趣 06:17
173F tinybunny 只有相簿才有本尊窩不放社群 06:18
174F c1951 https://reurl.cc/Vn2DOQ 有些人認知停留在20年前 06:57
175F c1951 或是單純想造謠抹黑而已 不信你問AI 中國是否為最近 06:59
176F c1951 這10年 森林面積增加最多世界第1的國家 而且是斷涯 07:00
177F c1951 式領先 比第2名到第8名加起來總和還要多的那種 07:02
178F c1951 最虛偽+雙標的反而是老美 最不重視環境發展 近10年 07:05
179F c1951 森林面積減少120萬公頃 又退出巴黎氣候協定 反向發 07:07
180F c1951 展石油化學工業 破壞環境 嘴巴講保育環境 實際幹的 07:08
181F c1951 又是另一套 說洋人重視環境發展 是在說笑話 哈哈哈 07:09
182F eemail 最尖端是要找什麼"大人"來管,那些大人只懂皮毛平常 07:14
183F eemail 管你們時又酸人家全不懂... 07:14
184F Chilloutt 那就死死看啊 07:18
185F ChampionYe 人類已經找到滅絕自己的最強武器了,這也是宇宙間 07:21
186F ChampionYe 為什麼很難找到另一個星球有物種的原因:在發展到可 07:21
187F ChampionYe 以發現其他物種的科技前,就先被自己滅絕了。 07:21
188F c1951 如果我們把時間拉長到 2001 年至 2021 年的 20 年間 07:24
189F c1951 中國總共增加了近42.5萬平方公里 的森林 約12個台灣 07:25
190F c1951 面積 超越了後面 19 個國家增加量的總和!!! 07:26
191F mmk https://www.youtube.com/watch?v=96UZNMMDKXw 07:47
192F mmk 影片8:00 AI設定了11個復活點 07:50
193F mmk 不久後AI全都消失了,難道都假死復活去別地方了 07:50
194F mmk 超級賽亞人是重傷不死變得更強 AI是死後復活 07:51
195F herculus6502 還有幾集可以逃 07:52

免責聲明: 本文內容擷取自 PTT Stock 板爆文,推文版權歸原作者所有。本站僅進行自動化整理與情緒標記,不代表任何投資建議。投資前請審慎評估,並自負風險。

Wave 訊號
--
--
×
系統公告
--
--
×