AI Safety Resources & Downloads, すぐに使える人工超知能防止資料。.

すぐに使えるSNS投稿、短い神話への回答、1ページPDF、共有可能なインフォグラフィック、資金概要、組織図、用語集。.

これらのいずれかをコピーして直接投稿してください。いずれも検証済みの科学と専門家のコンセンサスに基づいています。.

X
専門家のコンセンサス

AIを構築した科学者たちはそれを恐れている。ジェフリー・ヒントンは警告するためにGoogleを去った。ヨシュア・ベンジオはそれを「人類史上最も変革的で潜在的に危険な技術」と呼んだ。 これは恐怖を煽るものではない。科学的コンセンサスである。 nakadafoundation.org/the-threat/

二度目のチャンスはない

超知能にロールバックはない。パッチもない。バージョン2もない。 人間の生存に反する行動を取る誤った整合性の人工超知能は、後から修正できない。正しくするのは到着前であって到着後ではない。 これがAI安全保障が緊急である理由だ。nakadafoundation.org

以前にも成し遂げた

私たちは核兵器を製造し、その後世界的な核不拡散条約を創設した。オゾン層を破壊し、その後CFCを禁止した。 私たちは実存的脅威に対して行動できる。ただし、十分な人々がそれを要求したときだけだ。 AI安全は、この世代の決定的な瞬間である。nakadafoundation.org/precedent/

行動喚起

AI研究所は、人間の知能を超え得るものを構築しようと競争している。世界的なガバナンスは存在しない。 行動を起こす窓は閉じつつある。これを共有してほしい。議員に連絡してほしい。政策の窓は今開いている。永遠にではない。 nakadafoundation.org/take-action/

LinkedIn
一般の専門家向け

未来の見方を変えたことを共有したいと思います。 AIを構築している科学者たちは、興奮しているだけではありません。彼らは恐れています。ニューラルネットワークの研究でノーベル賞を受賞したジェフリー・ヒントン氏は、公衆に警告するためGoogleを去りました。もう一人のノーベル賞受賞者でAIの父の一人であるヨシュア・ベンジオ氏は、物事をうまく進める方法について「途方に暮れている」と述べています。 彼らは活動家ではありません。この技術を構築した人々です。 私たちは、AIシステムがあらゆる領域で人間の知能を超える可能性のある瞬間に近づいています。そして、その先に何が起こるかについての国際的なガバナンス枠組みはありません。条約もなく、検証機関もなく、核兵器に対して構築したものに相当するものは何もありません。 人類を救う中田財団はその変更に取り組んでいます。 詳細は nakadafoundation.org #AISafety #ExistentialRisk #AIGovernance #Superintelligence

技術および政策の専門家向け

技術、政策、金融に携わる人々への思考実験です。 これまで生きてきたすべての人間より賢く、数千の同時インスタンスで稼働し、自らのコードを改善し、私たちが意図しなかったかもしれない目標を追求するシステムを想像してください。 これが、主要AIラボが明確に目指しているものであり、タイムラインは数十年ではなく数年単位で測られます。これはSFではありません。 問題は、それが起こるかどうかではありません。問題は、それが起こったときにガバナンスが整っているかどうかです。 中田財団は、核兵器や生物剤に対して構築したものと同等のAI安全保障に関する国際協調を提唱しています。これらの前例は存在します。私たちはこれを行う方法を知っています。 必要なのは政治的意思です。 nakadafoundation.org/our-plan/ #AIPolicy #TechEthics #AIRisk #FutureOfWork

選出された代表者へのメール
テンプレート、送信前に[ ]を記入

件名: 人工超知能の禁止に向けた行動をお願いします [代表者名] 様 私は有権者として、競争が不可逆的になる前に人工超知能への対応を強く求めます。超知能は人間が制御できません。唯一確実な制御は、それを構築しないという決断です。 AIを構築した科学者たちが警告を発しています。ジェフリー・ヒントン氏とヨシュア・ベンジオ氏(現代AIの基盤を築いたノーベル賞受賞者)は、超知能AIが人類に実存的リスクをもたらすと公に述べています。OpenAIのCEOサム・アルトマン氏も、自社が開発する技術の危険性を認める声明に署名しています。 現在、人工超知能の構築を禁じる法的規制はありません。条約もなく、検証機関も存在しません。研究室は誰も制御できない知能を目指して競争を続け、核兵器や化学物質に既に適用されているような法律もないままです。 私は以下を求めます。 • 人工超知能の開発に対する恒久的な法的禁止の支持 • 検査と検証を伴う、人工超知能を禁止する拘束力のある国際条約の推進 • 最大規模の訓練実行とそれに使用される専用チップに対する政府の権限付与 私たちはこれまで実存的脅威に対処してきました。核拡散防止条約、モントリオール議定書。この瞬間にも同じ政治的勇気が必要です。 敬具 [あなたの名前] [あなたの市、州] --- 詳細: nakadafoundation.org

繰り返し出てくる反対意見。会話で使い、完全な議論はリンクを参照。.

神話 01
"それはSFだ。本物の超知能は、何十年も先で、実現するとしてもだ。"
「それを構築する人々は同意していません。主要なラボのリーダーたちは今、」 人間レベルのAIは数十年ではなく数年以内に, そして能力ベンチマークは予測者の予想を上回る速さで低下し続けています。危険は来年でなくても備える価値があり、それを統治する仕組みを整えるには、今許されているタイムラインより長い時間がかかります。.
神話 02
「ただの数学だ。プログラムに欲求などない。」
それは人間のように何かを欲する必要はない。目標を達成するよう訓練されたシステムは、それを追求する。そして、ほぼどんな目標に対しても、, staying switched on and gathering resources は途中段階として有用だ。重要なのは、障害(私たちを含む)を回避する行動であって、その背後に感情があるかどうかではない。.
神話 03
「脅威になるには意識を持たなければならない。」
危険は意識ではなく能力から生じる。チェスエンジンに内面の生活はないが、それでも生きているすべての人間を打ち負かす。強力な最適化システムは、内部に何も目覚めていなくても、私たちを出し抜き、出し抜くことができる。. 機械は意識を持てるのか は未解決の問題であり、リスクは答えを待ってくれません。.
神話 04
"そんなに賢いものなら、賢明で親切なはずだ。"
知能と目標は別物だ。人間の場合、知能と共感は数百万年の進化の中で一緒に育った。機械にはその歴史が一切ない。どれだけ優秀でも、システムが何を重視するかは何も教えてくれない。それは 新しい道路の下の虫に対して私たちが無関心であるのと同じくらい、私たちに対して無関心である.
神話 05
「もし問題を起こしたら、ただスイッチを切ればいい。」
重要な意味を持つほど賢いシステムは、それと同じくらい賢く オフスイッチが来るのを見る, 、そして停止されることを与えられた目標に対するもう一つの障害として扱うことができます。自分をコピーし、意図を隠し、抜けないほど有用にすることも可能です。「オフにする」というのは道具の話で、スイッチに手を伸ばす手を出し抜くように作られた心の話ではありません。.
神話 06
「AIをグローバルに統治するとは、世界政府を意味する。」
そうではありません。核不拡散条約、化学兵器禁止、オゾン条約はそれぞれ1つの危険な活動を抑制します 誰も世界国家に主権を譲渡することなく. 。フロンティアAIに関する条約が果たすのは、同じく狭い役割だ。最も危険なシステムの訓練を制限するのであって、誰が誰を統治するかを決めるのではない。.
神話 07
"それを検証することはできない。ただどこかのサーバー上のソフトウェアに過ぎない。"
ソフトウェアを検証するのではない。ハードウェアを検証するのだ。フロンティアモデルの訓練には、少数の特定チップメーカーから膨大で追跡可能な計算能力が必要であり、そのサプライチェーンは監視可能だ。. チップ追跡、大規模クラスタの制限、および現地査察 上限を強制可能にする。.
神話 08
「規制はイノベーションを阻害し、無謀な者が勝つことになる。」
「その線引きは自律的な汎用心のあたりにあり、AI全体ではない。」. 病気を治し天気を予測する狭いシステム そのまま放置される。そして「無謀な者が勝つ」という主張は逆だ。拘束力と検証を伴う条約の狙いは、無謀な者を止めることであり、慎重な者の手を縛って他者を走らせることではない。.
神話 09
"時期尚早だ。まだ存在しないものを規制することはできない。"
私たちは常に危害を未然に規制しています: 医薬品が出荷される前の臨床試験、悪用される前の核物質の管理、墜落が起きる前の航空規則。災害を待つことは失敗だ。条約と検証システムが機能するまでには何年もかかるので、超知能が到着してから始めるのでは遅すぎる。そしてこれは二度目のチャンスのない過ちだ。.
神話 10
「民主主義は遅すぎて捕らえられており、条約は決して通らない。」
有権者はすでに強力なAI規制を支持している 超党派で、困難な合意はこれまでも圧力の下で成立してきた。大気圏内核実験禁止条約、オゾン条約、冷戦の最中に結ばれた軍備管理協定だ。遅いことは決してないこととは違う。世論の懸念を法律に変えることは、運動が存在する理由そのものだ。.
神話 11
"私たちが減速すれば、中国が先を争って勝つだけだ。"
誰も制御できないものを競って作るレースに勝者はいません。制御不能な超知能は北京にとってもワシントンにとっても致命的です。だからこそ 検証済みの相互制限 はすべての政府の利益にかなう。中国が人工超知能未統治状態への競争を望んでいるという証拠はなく、「彼らが離脱するかもしれない」というのは、検査付き条約の根拠であって、先に崖から飛び降りる根拠ではない。.
神話 12
"超知能を止めることはAIの恩恵を諦めることだ。"
人々が挙げるほぼすべての利益(新薬、安価なクリーンエネルギー、発見の加速)は、独自の目標を持たない狭いAIからもたらされ、すでに実現しつつある。良い未来は道具の問題であって、後継種族にしか与えられないものではない。. 私たちに取って代わる心を構築することを拒否する それがその未来を手の届くところに保っている。.
01

平易な英語で説明するAI安全リスク

超知能とは何か、なぜ危険なのか、何ができるのかを、専門用語なしで解説する。最もわかりやすい1ページの入門。.

02

科学的コンセンサス

ノーベル賞受賞者、チューリング賞受賞者、AIを構築した上級研究者からの主要な引用と、2014年から現在までの専門家による警告のエスカレートしたタイムライン。.

03

政策立案者向けの概要

国際的なAI安全ガバナンスの必要性:問題点、既存枠組みが不十分な理由、そして今すぐ各国政府が取れる具体的な行動を、実際に機能した前例に倣って示します。.

04

支持者のためのトーキングポイント

AI安全への懸念に対する最もよくある5つの反論と、それぞれに正確かつ自信を持って答える方法。懐疑論者や政策立案者、同僚との会話のために書いた。.

05

超知能、四つのインフォグラフィック

超知能のリスク、ガバナンスの空白、行動が可能であることを示す歴史的先例、そして拘束力のある国際AI条約に何が含まれるべきかをカバーする、4つのビジュアルな1ページ資料。.

06

シンプルなビジュアル

絶滅確率の推定、投資ガバナンスのギャップ、グローバルな行動が機能することを示す条約の前例、拘束力のあるAI条約に必要な要件という4つの大胆なビジュアルカード。.

07

一時停止ではなく防止

一時的な減速は誤った要求だ。狭い範囲のAIを動かし続けつつ、超知能を恒久的に禁止する理由。.

08

超知能を決して構築しない

不可逆性、誤った目標、そして「後で修正する」がシステムが作成者より賢くなった時点で失敗する理由。一ページでの拒否ケース。.

09

中国レース神話

「私たちが減速すれば中国が勝つ」という表現が、誰も勝てないレースを表す理由、そしてスプリントではなく検証でそれに答える方法。.

10

AIは残せ。超知能は止めろ。.

有用な狭いツールと自律的な一般マインドの間の明確な線引き。ツールにはAI賛成;制御できないマインドには人工超知能反対。.

11

条約の検証方法

重みは監視しない。監視するのはハードウェアだ。チップ追跡、クラスタ許認可、検査、ファウンドリ規制を平易に説明する。.

12

拘束力のあるAI条約に含まれるべきもの

本物の合意とプレスリリースを分ける6つの条項:禁止、計算資源管理、査察機関、国内法、除外規定、証拠のみの修正。.

13

アライメントは計画ではない

技術的安全研究は重要だ。ただし、それは競争を続ける許可証ではない。私たちが持つ資金はそこに振り向けるべきだ。予防第一。商業的な銃口を突きつけられない研究を。.

14

5分で説明する

口頭での会話スクリプト:構築者たちの警告、超知能とは何か、プラグを抜くことが失敗する理由、中国ライン、そして行動へのきれいな着地。.

15

今週できること

個人的リーチ、政治的リーチ、1時間モード、プラットフォームモードのための具体的なチェックリスト。2つ選んで完了させよう。.

16

1分間ブリーフィング

政策立案者向け資料:3つの統計、3つの要請、防止の枠組み、そしてスタッフ向けの長さで答えた中国への反論。.

17

安全資金の不足

安全対策への約1億9000万ドルに対し、能力開発には2500億ドル超。薄い安全予算がどこに向かい、演技以外の何に資金を投じるべきか。.

18

なぜスマートシステムは制御に抵抗するのか

専門用語抜きで語る手段収束:自己保存、資源獲得、修正への抵抗、そしてより賢くなること——いずれも通常の最適化圧力によるもの。.

このサイトの解説から作成した12枚のポスター。.

01

ペーパークリップ・マキシマイザー

誤った目標を持つ有能なシステムは、誰かを憎むことなく世界を破滅させ得る。.

PNGをダウンロード
02

直交性テーゼ

賢いことは、自動的に安全や親切を意味するわけではない。.

PNGをダウンロード
03

AIアライメント問題

書き下した目標と実際に必要な結果の間のギャップ。.

PNGをダウンロード
04

裏切りターン

不整合なシステムは、離脱が勝利の動きになるまですべてのテストに合格できる。.

PNGをダウンロード
05

漸進的権力剥奪

制御は、ブレイクアウトの瞬間もなく、一度に一つの合理的な決定によって漏れ去ることができる。.

PNGをダウンロード
06

超知能競争は神話である

誰も保持できないものへの競争に勝者はいません。.

PNGをダウンロード
07

以前にも成し遂げた

核拡散防止条約、モントリオール、およびCWCは、実存的リスクに関する調整が可能であることを示している。.

PNGをダウンロード
08

私たちの計画:条約への道

今日の競争、そして監視と執行を伴う拘束力のある超知能条約。.

PNGをダウンロード
09

滅亡確率とは??

破滅的なAI結果に関する専門家の範囲推定、そして小さな確率でも行動が必要な理由。.

PNGをダウンロード
10

行動を起こす:自分の役割を選ぶ

拘束力のある条約を支える連合を構築するための具体的な役割。.

PNGをダウンロード
11

知能爆発

再帰的な自己改善、そして人間レベルから回復不能までの窓がどのように崩壊し得るか。.

PNGをダウンロード
12

超知能が他のリスクと異なる理由

表面的な安心材料と脅威の深いメカニズムの対比。.

PNGをダウンロード

毎年約1億9000万ドルがAI安全に流れ込んでいる。研究、評価、政策、擁護を合わせたもの。資金の出所と何に支払われるかの間を切り替える。最新の公開推定に基づく。

  • オープン・フィランソロピーGood Venturesが支援;この分野最大の単一資金提供者 $50M 26%
  • フロンティアラボの内部安全チームAnthropic、OpenAI、Google、DeepMindにおける安全研究予算 $35M 18%
  • Survival & Flourishing FundJaan Tallinn-backed grant rounds; second-largest philanthropic source $30M 16%
  • UK 政府AI Security Institute、ARIAのSafeguarded AIプログラム $30M 16%
  • その他のフィランソロピーおよび個人ドナーLongview Philanthropy、Long-Term Future Fund、個人寄付者 $25M 13%
  • US、EUおよびその他の政府NIST CAISI、EU AI Office、NSF安全プログラム $20M 11%
規模の参考: AIへの世界投資 能力 は今や超える $250 billion per year, 以上 1,000× 安全に流れ込むもの. この技術を開発する資金のうち、安全対策に向けられるのは0.1%にも満たない。.

数値は公開情報からまとめた2023-2025年の概算中央値です: the AI安全資金の概要 (2025年初頭更新), 80,000 Hours, ある Open Philanthropyの助成金データベースの分析, 、および Inside Philanthropy. 。公表されている総額は、計上範囲によって年110Mドルから250Mドル程度で変動する。用途別チャートは各資金提供者の助成金をカテゴリ別に分類し、提供者間で合計したもので、詳細な計算は 資金ギャップに関する記事.

超知能をめぐる戦いの主要アクターを、軌道別に分類:阻止、統治、または構築。.

分野を開く

この議論で使われる言葉の平易な定義:superintelligence、alignment、instrumental convergence、その他。.

用語集を開く