オリジナルタイトルを転送する:d/acc:1年後
約1年前に書きました 技術楽観主義に関する記事, 私は技術への一般的な熱狂を表現し、それがもたらす巨大な利益について語りますが、同時に、超知能AIを中心とするいくつかの懸念についても慎重に述べます。その技術が誤った方法で構築されると、滅亡をもたらす可能性や、不可逆的な人間の無力化をもたらすリスクについてです。私の投稿の中での中心的な考えの1つは、分散化と民主的で、差別的な防御的加速の哲学でした。技術を加速させるが、害を与える能力ではなく、防衛能力の向上に焦点を当て、真実、偽り、善悪を決定する特定のエリートの手に権力を集中させるのではなく、権力を分散させる技術に焦点を当てることです。民主的な防御のようなものです。スイスそして歴史的には準アナーキストゾミア中世の封建制の領主や城とは異なります。
その後1年間で、その哲学とアイデアは大きく成熟しました。私はそのアイデアについて話しました80,000 Hours, そして多くの反応を見てきました。ほとんどは肯定的なものであり、一部は批判的なものもあります。作業自体は継続され、成果を上げています。進捗を見るin verifiableオープンソースワクチン健康な室内空気の価値がますます認められ、コミュニティノートが輝き続け、Gate.ioにとっての飛躍の年となりました。予測市場は情報ツールとしての役割を果たします、ZK-SNARKs政府IDとソーシャルメディア(そしてセキュリティEthereumウォレットthroughアカウント抽象化), オープンソースのイメージングツール医学やBCIなどの応用を持つことができます。そして、昨秋には最初の重大なd/accイベントがありました。Devconでの「d/acc Discovery Day」(d/aDDy)、すべてのd/acc(バイオ、物理、サイバー、情報防御、およびニューロテック)のすべての柱からのスピーカーをフィーチャーした。これらの技術に取り組んできた人々は、お互いの仕事にますます気づき始め、外部の人々もますます大きなストーリーに気づいています:Ethereumと暗号通貨を活気づけた同じ種類の価値観。より広い世界に適用できます.
2042年です。メディアで新しいパンデミックがあなたの街で起こる可能性についての報告を見ています。これには慣れています:動物の病気の変異について人々が興奮することはありますが、ほとんどの場合何も起こりません。前の2つの潜在的なパンデミックは非常に早い段階で検出されました。排水モニタリングそしてソーシャルメディアのオープンソース分析そして、彼らは完全に立ち止まりました。しかし、今回、予測マーケットでは、少なくとも10,000件の症例の60%の可能性が示されているので、もっと心配しています。
ウイルスのシーケンスが昨日特定されました。あなたのポケット用のソフトウェアアップデートエアテスター新しいウイルス(1回の呼吸、または部屋の室内空気への15分間の曝露から)を検出できるようにすることは、すでに利用可能です。世界中の近代的な医療施設にある機器を使用してワクチンを生成するためのオープンソースの指示とコードは、数週間以内に利用可能になるはずです。ほとんどの人は、まだ何の対策も講じておらず、自分を守るために空気のろ過と換気の普及に頼っています。免疫疾患があるため、より慎重になります:ナビゲーションやレストランやイベントのレコメンデーションなどのタスクを処理するオープンソースのローカルランニングパーソナルアシスタントAIは、リアルタイムの空気テスターとCO2データも考慮して、最も安全な会場のみを推奨します。データは、何千人もの参加者とデバイスによって提供されます。zk-SNARKsそして差分プライバシーデータが漏れるリスクを最小限に抑えるか、その他の目的で悪用される可能性を減らすために(これらのデータセットにデータを提供したい場合は、これらの暗号ガジェットが実際に機能するかどうかを検証する他の個人アシスタントAIがあります)。
2ヶ月後、パンデミックは消え去りました:空気テスターが鳴ってウイルスが検出された場合にマスクを着用し、自分自身が陽性をテストした場合には自宅に留まるという基本的なプロトコルを守っている人々の60%が、既に大幅に減少していた伝播率を1未満に押し下げるのに十分でした。これは、受動的な重い空気ろ過によって既に大幅に減少していた伝播率をさらに1未満に押し下げるのに十分でした。20年前のCOVIDよりも5倍ひどいとシミュレーションで示されていた病気が、今日では問題にならないことがわかりました。
![]() | ![]() |
Devcon d/acc day
Devconでのd/accイベントからの最もポジティブな収穫の1つは、d/accの傘下で非常に異なる分野の人々を実際に興味を持たせ、お互いの仕事に関心を持たせることに成功したことです。
「多様性」を持つイベントを作ることは簡単ですが、異なるバックグラウンドや興味を持つ人々が実際に関わり合うことは難しいです。私は中学校や高校で長いオペラを強制的に観ることを思い出しますが、個人的にはつまらないと感じました。私はそれらを「評価するべき」と思っていましたが、もし私が評価しなければ、無教養なコンピューターサイエンスの人間だとされてしまいます。しかし、私はその内容とは本当の意味で関わることができませんでした。d/accの日は全くそんな感じではありませんでした:異なる分野の非常に異なる種類の仕事について学ぶことを本当に楽しんでいる人々の姿がありました。
もし、支配、減速、そして破滅に対するより明るい代替案を作りたいのであれば、このような広範な連携の構築が必要です。d/accは実際にそれに成功しているように思え、それだけでそのアイデアの価値を示しています。
d/accの核心的なアイデアはシンプルです:分散化された民主的な差分防御加速です。オフェンス/ディフェンスのバランスをディフェンスに傾ける技術を構築し、それを中央集権的な権限に依存しない方法で行います。これらの2つの側面には固有の結びつきがあります:分散化、民主主義、または自由な政治構造は、ディフェンスが容易な時に最も繁栄し、ディフェンスが困難な時に最も挑戦を受けます。そのような場合、より可能性の高い結果は、全ての者が全てに対して戦争の一時期を経て、最終的に最も強い者による支配の均衡です。
d/accの核心原則は、多くのドメインにわたって拡張されています:
チャートから私のテクノオプティミズム、去年
分散化、防御、加速を同時に目指す重要性を理解する1つの方法は、それぞれを諦めたときに得られる哲学と対比することです。
私の見解では、このアプローチは、あなたが心配している特定の部族による世界的な人間の独裁のリスクを回避するかもしれませんが、それは根本的な構造上の問題に対する答えを持っていません:攻撃を好む環境では、常に災害のリスクがあるか、誰かが自分自身を守る者として位置づけ、恒久的にトップに立つリスクがあります。AIの特定のケースでは、人間全体がAIと比較して無力化されるリスクに対しても良い答えを持っていません。
このアプローチのリスクは、もちろん、センター自体がしばしばリスクの源であるということです。これはCovidで見られました。ここで資金提供された機能利得研究複数の主要な世界政府パンデミックの原因となった可能性がありますが、中央集権的な認識論はWHOに導かれました認めないfor年Covidが空気感染するということ、そして強制的なソーシャルディスタンスそしてワクチン政策の命令は数十年にわたって反発を引き起こす可能性があります。AIや他の危険な技術に関連するリスクについても同様の状況が生じる可能性があります。分散型のアプローチは中央自体からのリスクによりよく対処することができます。
この戦略の課題は二つあります。まず、技術と経済成長のバランスは人類にとって非常に良いものであり、それに遅れが生じることは好ましくありません。コストを課す that are 過小評価するのは難しい第二に、非独裁世界では、前進しないことは不安定です。最も「イカサマ」をしても、信じられるような方法で前進する人が先を行きます。減速主義的戦略はある程度、ある文脈で機能することがあります。例えば、ヨーロッパの食べ物がアメリカの食べ物よりも健康的であること、これまでの核不拡散の成功などが挙げられます。しかし、それらは永遠に機能することはありません。
d/accを使用して、私たちは次のことをしたいと考えています:
d/accについて考える別の方法は、フレームに戻ることです。海賊党運動00年代のヨーロッパでのエンパワーメント。
目標は、人間のエージェンシーを保持し、達成する世界を構築することです。両方私たち自身の運命を形作る能力に対する積極的な干渉(民間人として行動する他の人々、政府、または超知能ボットからのいずれからであろうと)を避けるという消極的な自由と、私たちが知識とリソースを持っていることを保証する積極的な自由。これは、何世紀にもわたる古典的なリベラルな伝統を反映しており、スチュワート・ブランドの「ツールへのアクセス「そしてジョン・スチュアート・ミルの教育に重点を置くalongside自由人類の進歩の重要な要素として - そしておそらく、バックミンスター・フラーの願望として、グローバルな解決の過程を見ることができる参加型で広く分散した. 私たちは、21世紀の技術的な状況を考慮しながら、これらと同じ目標を達成する方法として、D/ACCを見ることができます。
昨年の私の投稿では、d/accは具体的に防御技術に焦点を当てました: 物理防御、生物防御、サイバー防御、情報防御。しかし、分散化された防御だけでは世界を偉大にすることはできません: 人類が新たに得た分散化と安全性を活用して達成できる未来志向の前向きなビジョンも必要です。
昨年の投稿には、2つの場所で肯定的なビジョンが含まれていました:
ただし、これらの2つのポイントは、d/accの議論から切り離されたものと感じられました。「ベースレイヤーでより民主的で防御重視の世界を作るためのアイデアをここに示しますが、ところで超知能をどのように実現するかについては無関係なアイデアをいくつか提案します」。
ただし、実際には、「防御的」と「進歩的」とされるD/ACCテクノロジーの間には非常に重要な関連性があると考えています。昨年の投稿からD/ACCチャートを拡大し、この軸を追加しましょう(また、それを「」というラベルに変更しましょう)。生き残る vs 繁栄する「)をチャートに追加して、どんな結果が出るか見てみることです:
あらゆるドメインにおいて、私たちがあるドメインで「生き残る」のに役立つ科学、アイデア、ツールは、「繁栄する」のに役立つ科学、アイデア、ツールと密接に関連しているという一貫したパターンがあります。いくつかの例:
これに加えて、科目間にも重要な相互依存関係があります。
異なる人々は非常に異なるAIのタイムラインを持っています。モンテネグロのZuzaluのチャート、2023年。
私の去年の投稿に対する最も説得力のある反論は、AIセーフティコミュニティからの批判でした。その議論は次のようになります。「確かに、強力なAIが出現するまでには半世紀かかるかもしれませんが、実際にはAGIまでのタイムラインは3年、超知能までのタイムラインはさらに3年と見られています。したがって、世界が破壊されたり不可逆的な罠に陥ったりするのを防ぐためには、良いことを加速するだけでなく、悪いことを遅らせる必要もあります。つまり、強力な規制を通過させることですが、これによって強力な人々が不快になるかもしれません。」私の去年の投稿では、「悪いことを遅らせる」ための具体的な戦略を呼びかけていませんでした。危険な形態の超知能を構築しないようにという曖昧な訴えだけでした。したがって、ここで直接質問に取り組む価値があります:もし私たちが...最も便利な世界人工知能のリスクが高く、タイムラインが潜在的に5年先の場合、私はどのような規制を支持するのでしょうか?
昨年、提案された主なAI規制は、カリフォルニア州のSB-1047法案.SB-1047は、最もパワフルなモデル($100M以上のトレーニングにかかるモデル、またはファインチューンの場合は$10M以上)の開発者に、リリース前に一定の安全テスト措置を取ることを義務付けました。さらに、AIモデルの開発者が十分な注意を払わない場合、責任を負うこととしました。多くの反対者は、この法案は「」と主張しました。オープンソースへの脅威「; 私は異議を唱えました、なぜならコストのしきい値が最も強力なモデルにしか影響を与えなかったからです:LLama3さえもしばらくは閾値未満でしょう。しかし、振り返ってみると、その法案にはより大きな問題があったと思います。ほとんどの規制と同様に、現在の状況に過度に適合しすぎていました。訓練コストに焦点を当てることは、すでに新しい技術の前では脆弱であることが証明されています。最近の最先端の品質Deepseek v3モデルは、コストをかけて訓練されました。たったの$6百万、そして新しいモデルでは、O1のコストは、より一般的にトレーニングから推論へとシフトしています。
第二に、AI超知能の終末シナリオに実際に責任を持つ最も可能性の高い行為者は現実的には軍である。バイオセキュリティの過去半世紀で見てきた(そしてそれ以上に)軍隊は恐ろしいことを厭わず、簡単に間違いを犯す可能性があります。現在、AIの軍事利用は急速に進んでいます(ウクライナ, ガザそして、政府が制定する安全規制は、デフォルトで彼ら自身の軍隊や軍隊と緊密に協力する企業を免除することになります。
それにもかかわらず、これらの主張は手を上げて何もしない理由ではありません。むしろ、私たちはこれらをガイドとして使用し、これらの懸念を最小限に抑えるためのルールを考えることができます。
法的に訴えられる損害を引き起こすような行為をした場合、couldbe 提訴されましたこれにより、軍事などの「法の上にある」行為者からのリスクの問題は解決されませんが、これは過度適合を回避する非常に汎用性の高いアプローチであり、しばしばです。サポートby libertarian-leaning経済学者まさにその理由のためです。
これまで考慮されてきた責任の主な対象は次のとおりです:
ユーザーに責任を負わせることが最もインセンティブに適合するようです。モデルの開発と使用方法の間の関連性に注意しながら、翻訳を行います。はしばしば不明瞭です、ユーザーはAIの使用方法を完全に決定します。ユーザーに責任を負わせることで、私が考える正しい方法でAIを行うための強力なプレッシャーが生まれます:人間の心のためのメカスーツの構築に重点を置き、自己持続型の知的生命の新しい形式の作成には重点を置きません。前者は定期的にユーザーの意図に応答するため、ユーザーが望まなければ致命的な行動を起こしません。後者は「AIが暴走する」という典型的なシナリオを作り出す最もリスクが高いです。可能な限り責任を最終使用に近づけることのもう1つの利点は、責任が他の方法で有害な行動につながるリスクを最小限に抑えることです(例:クローズドソース、KYCおよび監視、国家/ビジネスの共謀によるユーザーの制限、例えばデバンキング、世界の大部分をロックアウト)。
ユーザーに責任を負わせることに対する古典的な論点があります: ユーザーはお金を持っていないかもしれず、匿名かもしれず、実際には壊滅的な被害に対して支払いができる人物がいないかもしれません。この議論は過大評価される可能性があります: 一部のユーザーが責任を負うには小さすぎるかもしれませんが、AI開発者の平均的な顧客はそうではないため、AI開発者はまだユーザーに高い責任リスクを負わせない製品を作ることに動機づけられます。それはまだ有効な議論であり、対応する必要があります。適切なレベルの注意を払うリソースを持つパイプライン内の誰かを動機づける必要があります。デプロイヤーや開発者はまだ容易に利用できるターゲットですが、多大な影響力を持つどのモデルがどれだけ安全か、または危険かについて
デプロイヤーの責任は合理的なように思えます。よく引用される懸念は、オープンソースモデルには機能しないということですが、これは管理可能なように思えます。特に最も強力なモデルが閉じたソースである可能性が高いため(そしてもしオープンであることが判明した場合、デプロイヤーの責任はあまり役に立たなくなりますが、多くの害も引き起こしません)。開発者の責任にも同様の懸念があります(ただし、オープンソースモデルの場合、最初に許可されていないことを行うためにモデルを微調整する必要があります)が、同じ反論が適用されます。一般的な原則として、制御に「税金」をかけ、本質的に「あなたはできる」と言っています。制御できないものを構築するまたは、制御できるものを作ることもできますが、制御できるものを作る場合は、制御の20%を私たちの目的に使用する必要があります」というのは、法的システムにとって合理的な立場のように思われます。
パイプライン内の他のアクターに責任を負わせるという未開拓のアイデアがありますが、これらのアクターはより豊富なリソースを持っている可能性が高いです。非常にd/accフレンドリーなアイデアの1つは、AIが(ハッキングなどによって)何らかの壊滅的に有害な行動を実行する過程で使用する機器の所有者または運営者に責任を負わせることです。これにより、世界(特にコンピューティングおよびバイオ)のインフラをできるだけ安全にするための大きなインセンティブが生まれます。
もし私が責任規則よりも「筋肉質な」何かが必要だと確信していたなら、これが私が選ぶものです。目標は、重要な時期において世界中で利用可能な計算能力を約90〜99%削減し、人類が準備するためのさらなる時間を確保することです。1〜2年間の価値は過大評価されるべきではありません:「戦時モード」の1年は、怠惰な状況下での100年の作業に easily に匹敵することがあります。実装方法の一部として、「休止「具体的な提案などを含む、さまざまな方法が検討されてきました。」登録が必要ですと位置の確認ハードウェアの。
より高度なアプローチは、巧妙な暗号トリックを使用することです。たとえば、大規模な(ただし消費者ではない)AIハードウェアは、主要な国際機関から週に3回の署名(少なくとも1つは非軍事関連のもの)を受け取らないと継続して実行できないようにするための信頼性のあるハードウェアチップを装備することができます。署名はデバイスに依存しないものです(必要に応じて、ブロックチェーン上に公開されたことをゼロ知識の証明さえ要求できます)。したがって、すべてかなりなしがあります。すべての他のデバイスを承認せずに特定のデバイスを継続して実行する実用的な方法はありません。
これは、利益を最大化し、リスクを最小限に抑える点で「条件を満たしている」と感じられます。
ハードウェア規制は既に非常に真剣に検討されており、一般的には枠組みを通じて行われています。輸出統制、本質的には「私たちは自分たちの側を信じますが、相手の側は信じません」という哲学を持っています。レオポルド・アッシェンブレンナーは、アメリカが「決定的な利点を得るための競争そして基本的に中国を迫る彼らが実行することが許可されるボックスの数を制限するプロトコルに署名することです。私にとって、このアプローチはリスキーであり、欠点を組み合わせる可能性があります。マルチポーラレースそして中央集権化。もし私たちが人々を制限しなければならない場合、誰もが平等な立場で制限する方が良いと思われ、一方が他の人々を支配しようとするのではなく、実際に協力してそれを組織するための困難な仕事をすることが重要です。
これらの戦略(責任とハードウェアの一時停止ボタン)の両方には欠陥があり、明らかにそれらは一時的な処置に過ぎません:時点Tでスーパーコンピュータで可能になったことは、時点T + 5年にはおそらくノートパソコンでも可能になるでしょう。したがって、時間を稼ぐためにより安定したものが必要です。多くのd/acc技術がここで関連してきます。我々はd/acc技術の役割を次のように考えることができます:AIが世界を支配する場合、それはどのようにして行うのでしょうか?
前述のように、責任規則は、これらの防御策を採用し真剣に取り組むよう、世界のすべての部分に効果的に刺激を与えることができる、自然にD / ACCフレンドリーな規制スタイルです。台湾実験をしてきました最近、虚偽広告に対する責任を負っている例として、責任を利用して情報防衛を奨励する一例と見なすことができます。責任をどこにでも置くことに熱心になりすぎず、ただの自由の利点を覚えておくべきです。小さな人が訴訟の恐れなしにイノベーションに参加することを可能にするためのものです。しかし、セキュリティを強化するための強いプッシュが必要な場合、責任はかなり柔軟で効果的になり得ます。
多くのd / accは典型的なブロックチェーンのトピックをはるかに超えています:バイオセキュリティ、BCI、および協働的な議論ツールは、通常の暗号人が話すことからはるかに遠いように思われます。ただし、暗号とd / accの間にはいくつかの重要な関係があると思います。
Cursive は、完全準同型暗号化 (FHE) を使用して、プライバシーを保護しながら、ユーザーが他のユーザーと共通の関心のある領域を識別できるようにするアプリです。これは、多くの派生物の1つであるEdge Cityで使用されました。Zuzalu, in Chiang Mai.
これらの直接的な交差点に加えて、もう1つ重要な共通の関心事があります:資金調達メカニズム。
私の持続的な関心事の1つは、公共財を資金提供するためのより良いメカニズムを考案することです:非常に多くの人々にとって価値のあるプロジェクトですが、持っていません自然に身近なビジネスモデル。これに関する私の過去の仕事には、二次資金化とその使用についてGitcoin Grants、レトロPGF、そして最近は深い資金調達.
多くの人々は、公共財に対して懐疑的な考えを持っています。この懐疑心は一般的に2つの源から来ています:
これらは重要な批評であり、良い批評です。ただし、私は、強力な分散型の公共財の資金調達がd/accビジョンに不可欠であると主張します。なぜなら、中心的な制御点を最小限に抑えることが主要なd/accの目標であり、これは多くの伝統的なビジネスモデルを本質的に挫折させるからです。オープンソースで成功するビジネスを構築することは可能です。いくつかバルビgranteesしかし、一部の状況では、重要なプロジェクトに追加の継続的サポートが必要なほど困難な場合もあります。したがって、私たちは困難なことをしなければならず、上記の両方の批判に対処する方法で公共財の資金調達をどのように行うかを考える必要があります。
最初の問題の解決策は基本的には信頼性のある中立性そして@VitalikButerin中央集権化の意味。中央計画は、権力を乱用する可能性のあるエリートに制御権を与えるため問題があり、またしばしば現在の状況に過剰適合そして、時間の経過とともにますます効果が薄れていきます。2次資金調達や類似のメカニズムは、できるだけ信頼性があり、(建築的・政治的に) 分散化された方法で公共財を資金調達することに関して、明確に中立であるようになりました。
二番目の問題はより challenging. With quadratic funding, a common critique has been that it すぐに人気投票になりますプロジェクトの資金提供者は、大衆キャンペーンに多くの努力を払う必要があります。さらに、「人々の目の前にある」プロジェクト(例:エンドユーザーアプリケーション)は資金提供されますが、背後にあるプロジェクト(典型的な「ゲート」)は資金提供されません。ネブラスカの男性によって維持される依存関係")資金調達はまったくありません。楽観的な資金調達は、少数の専門バッジ保持者に依存しています。ここでは、人気コンテストの影響は薄れますが、バッジ保持者との密接な個人的な関係の社会的影響が増幅されます。
ディープファンディング私はこの問題を解決するための最新の取り組みです。 Deep fundingには2つの主要な革新があります。
しかし、深い資金調達は最新の例に過ぎません。以前にも他の公共財資金調達メカニズムのアイデアがあり、将来もさらに多くのものがあるでしょう。allo.expertそれらをカタログ化するのに非常に良い仕事をしています。根本的な目標は、市場が私的財を資金提供する方法に少なくとも近似するレベルの正確さ、公正さ、およびオープンエントリで公共財を資金提供できる社会的なガジェットを作成することです。完璧である必要はありません。なぜなら、市場自体が完璧からは程遠いからです。ただし、開発者がみんなのために利益をもたらす優れたオープンソースプロジェクトに取り組み続ける余裕を持ち、受け入れがたい妥協をする必要を感じないように効果的であるべきです。
今日、ほとんどのd/accの主要なプロジェクトはワクチンなどの主題にあります。BCI「ボーダーラインBCI」のような手首の筋電と視線追跡、抗老化薬、ハードウェアなどは、プロプライエタリです。これには、公共の信頼を確保するという大きなデメリットがあります。たくさんの以上エリア既に. それは競争力のある動態(「OUR TEAMはこの重要な産業を勝ち取らなければならない!」)に注意を向けることを促し、「これらの技術が超知能AIの世界で私たちを守るために十分に速く来る」という大きな競争から注意をそらします。これらの理由から、頑強な公共財の資金提供は、開放性と自由の強力な促進者になり得ます。これは、暗号コミュニティが努力を重ねてこれらの資金提供メカニズムを探求し、自身の文脈内でうまく機能するようにすることで、オープンソースの科学技術のさらなる普及のためにそれらを準備する別の方法です。
次の数十年は重要な課題をもたらす。 最近私の心にあるのは2つの課題です。
ただし、これらの課題には明るい面もあります。まず、私たちは今、残りの作業をより速く行うために非常に強力なツールを持っています:
第二に、私たちが大切にしている多くの原則が、もはや古いガードの一部のセグメントによって占有されていないため、誰でも参加できる広範な連合によって回復されることができます。これは、世界中の誰でも参加できる広範な連合によって回復されることができます。これは、最近の政治的「再配置」のおそらく最大のメリットであり、利用する価値があります。暗号通貨はすでにこの恩恵を十分に受けており、d/accも同様にグローバルなアピールを見つけることができます。
ツールへのアクセスは、私たちが生物学や環境を適応させ、そして d/acc の「防御」部分は、他の人々が同じことをする自由を侵害することなく、これを行うことができることを意味します。自由主義的な多元主義の原則これは多様な方法で行われる可能性があるということを意味しており、共通の人間の目標への取り組みがあるため、それは達成されるべきです。
私たち人間は、輝く星であり続けます。私たちが星に向かって進む中で、人類の生存と自由、そして活動を守りながら、さらに輝かしい21世紀を築くという課題は難しいものですが、私はそれに対処できると確信しています。
オリジナルタイトルを転送する:d/acc:1年後
約1年前に書きました 技術楽観主義に関する記事, 私は技術への一般的な熱狂を表現し、それがもたらす巨大な利益について語りますが、同時に、超知能AIを中心とするいくつかの懸念についても慎重に述べます。その技術が誤った方法で構築されると、滅亡をもたらす可能性や、不可逆的な人間の無力化をもたらすリスクについてです。私の投稿の中での中心的な考えの1つは、分散化と民主的で、差別的な防御的加速の哲学でした。技術を加速させるが、害を与える能力ではなく、防衛能力の向上に焦点を当て、真実、偽り、善悪を決定する特定のエリートの手に権力を集中させるのではなく、権力を分散させる技術に焦点を当てることです。民主的な防御のようなものです。スイスそして歴史的には準アナーキストゾミア中世の封建制の領主や城とは異なります。
その後1年間で、その哲学とアイデアは大きく成熟しました。私はそのアイデアについて話しました80,000 Hours, そして多くの反応を見てきました。ほとんどは肯定的なものであり、一部は批判的なものもあります。作業自体は継続され、成果を上げています。進捗を見るin verifiableオープンソースワクチン健康な室内空気の価値がますます認められ、コミュニティノートが輝き続け、Gate.ioにとっての飛躍の年となりました。予測市場は情報ツールとしての役割を果たします、ZK-SNARKs政府IDとソーシャルメディア(そしてセキュリティEthereumウォレットthroughアカウント抽象化), オープンソースのイメージングツール医学やBCIなどの応用を持つことができます。そして、昨秋には最初の重大なd/accイベントがありました。Devconでの「d/acc Discovery Day」(d/aDDy)、すべてのd/acc(バイオ、物理、サイバー、情報防御、およびニューロテック)のすべての柱からのスピーカーをフィーチャーした。これらの技術に取り組んできた人々は、お互いの仕事にますます気づき始め、外部の人々もますます大きなストーリーに気づいています:Ethereumと暗号通貨を活気づけた同じ種類の価値観。より広い世界に適用できます.
2042年です。メディアで新しいパンデミックがあなたの街で起こる可能性についての報告を見ています。これには慣れています:動物の病気の変異について人々が興奮することはありますが、ほとんどの場合何も起こりません。前の2つの潜在的なパンデミックは非常に早い段階で検出されました。排水モニタリングそしてソーシャルメディアのオープンソース分析そして、彼らは完全に立ち止まりました。しかし、今回、予測マーケットでは、少なくとも10,000件の症例の60%の可能性が示されているので、もっと心配しています。
ウイルスのシーケンスが昨日特定されました。あなたのポケット用のソフトウェアアップデートエアテスター新しいウイルス(1回の呼吸、または部屋の室内空気への15分間の曝露から)を検出できるようにすることは、すでに利用可能です。世界中の近代的な医療施設にある機器を使用してワクチンを生成するためのオープンソースの指示とコードは、数週間以内に利用可能になるはずです。ほとんどの人は、まだ何の対策も講じておらず、自分を守るために空気のろ過と換気の普及に頼っています。免疫疾患があるため、より慎重になります:ナビゲーションやレストランやイベントのレコメンデーションなどのタスクを処理するオープンソースのローカルランニングパーソナルアシスタントAIは、リアルタイムの空気テスターとCO2データも考慮して、最も安全な会場のみを推奨します。データは、何千人もの参加者とデバイスによって提供されます。zk-SNARKsそして差分プライバシーデータが漏れるリスクを最小限に抑えるか、その他の目的で悪用される可能性を減らすために(これらのデータセットにデータを提供したい場合は、これらの暗号ガジェットが実際に機能するかどうかを検証する他の個人アシスタントAIがあります)。
2ヶ月後、パンデミックは消え去りました:空気テスターが鳴ってウイルスが検出された場合にマスクを着用し、自分自身が陽性をテストした場合には自宅に留まるという基本的なプロトコルを守っている人々の60%が、既に大幅に減少していた伝播率を1未満に押し下げるのに十分でした。これは、受動的な重い空気ろ過によって既に大幅に減少していた伝播率をさらに1未満に押し下げるのに十分でした。20年前のCOVIDよりも5倍ひどいとシミュレーションで示されていた病気が、今日では問題にならないことがわかりました。
![]() | ![]() |
Devcon d/acc day
Devconでのd/accイベントからの最もポジティブな収穫の1つは、d/accの傘下で非常に異なる分野の人々を実際に興味を持たせ、お互いの仕事に関心を持たせることに成功したことです。
「多様性」を持つイベントを作ることは簡単ですが、異なるバックグラウンドや興味を持つ人々が実際に関わり合うことは難しいです。私は中学校や高校で長いオペラを強制的に観ることを思い出しますが、個人的にはつまらないと感じました。私はそれらを「評価するべき」と思っていましたが、もし私が評価しなければ、無教養なコンピューターサイエンスの人間だとされてしまいます。しかし、私はその内容とは本当の意味で関わることができませんでした。d/accの日は全くそんな感じではありませんでした:異なる分野の非常に異なる種類の仕事について学ぶことを本当に楽しんでいる人々の姿がありました。
もし、支配、減速、そして破滅に対するより明るい代替案を作りたいのであれば、このような広範な連携の構築が必要です。d/accは実際にそれに成功しているように思え、それだけでそのアイデアの価値を示しています。
d/accの核心的なアイデアはシンプルです:分散化された民主的な差分防御加速です。オフェンス/ディフェンスのバランスをディフェンスに傾ける技術を構築し、それを中央集権的な権限に依存しない方法で行います。これらの2つの側面には固有の結びつきがあります:分散化、民主主義、または自由な政治構造は、ディフェンスが容易な時に最も繁栄し、ディフェンスが困難な時に最も挑戦を受けます。そのような場合、より可能性の高い結果は、全ての者が全てに対して戦争の一時期を経て、最終的に最も強い者による支配の均衡です。
d/accの核心原則は、多くのドメインにわたって拡張されています:
チャートから私のテクノオプティミズム、去年
分散化、防御、加速を同時に目指す重要性を理解する1つの方法は、それぞれを諦めたときに得られる哲学と対比することです。
私の見解では、このアプローチは、あなたが心配している特定の部族による世界的な人間の独裁のリスクを回避するかもしれませんが、それは根本的な構造上の問題に対する答えを持っていません:攻撃を好む環境では、常に災害のリスクがあるか、誰かが自分自身を守る者として位置づけ、恒久的にトップに立つリスクがあります。AIの特定のケースでは、人間全体がAIと比較して無力化されるリスクに対しても良い答えを持っていません。
このアプローチのリスクは、もちろん、センター自体がしばしばリスクの源であるということです。これはCovidで見られました。ここで資金提供された機能利得研究複数の主要な世界政府パンデミックの原因となった可能性がありますが、中央集権的な認識論はWHOに導かれました認めないfor年Covidが空気感染するということ、そして強制的なソーシャルディスタンスそしてワクチン政策の命令は数十年にわたって反発を引き起こす可能性があります。AIや他の危険な技術に関連するリスクについても同様の状況が生じる可能性があります。分散型のアプローチは中央自体からのリスクによりよく対処することができます。
この戦略の課題は二つあります。まず、技術と経済成長のバランスは人類にとって非常に良いものであり、それに遅れが生じることは好ましくありません。コストを課す that are 過小評価するのは難しい第二に、非独裁世界では、前進しないことは不安定です。最も「イカサマ」をしても、信じられるような方法で前進する人が先を行きます。減速主義的戦略はある程度、ある文脈で機能することがあります。例えば、ヨーロッパの食べ物がアメリカの食べ物よりも健康的であること、これまでの核不拡散の成功などが挙げられます。しかし、それらは永遠に機能することはありません。
d/accを使用して、私たちは次のことをしたいと考えています:
d/accについて考える別の方法は、フレームに戻ることです。海賊党運動00年代のヨーロッパでのエンパワーメント。
目標は、人間のエージェンシーを保持し、達成する世界を構築することです。両方私たち自身の運命を形作る能力に対する積極的な干渉(民間人として行動する他の人々、政府、または超知能ボットからのいずれからであろうと)を避けるという消極的な自由と、私たちが知識とリソースを持っていることを保証する積極的な自由。これは、何世紀にもわたる古典的なリベラルな伝統を反映しており、スチュワート・ブランドの「ツールへのアクセス「そしてジョン・スチュアート・ミルの教育に重点を置くalongside自由人類の進歩の重要な要素として - そしておそらく、バックミンスター・フラーの願望として、グローバルな解決の過程を見ることができる参加型で広く分散した. 私たちは、21世紀の技術的な状況を考慮しながら、これらと同じ目標を達成する方法として、D/ACCを見ることができます。
昨年の私の投稿では、d/accは具体的に防御技術に焦点を当てました: 物理防御、生物防御、サイバー防御、情報防御。しかし、分散化された防御だけでは世界を偉大にすることはできません: 人類が新たに得た分散化と安全性を活用して達成できる未来志向の前向きなビジョンも必要です。
昨年の投稿には、2つの場所で肯定的なビジョンが含まれていました:
ただし、これらの2つのポイントは、d/accの議論から切り離されたものと感じられました。「ベースレイヤーでより民主的で防御重視の世界を作るためのアイデアをここに示しますが、ところで超知能をどのように実現するかについては無関係なアイデアをいくつか提案します」。
ただし、実際には、「防御的」と「進歩的」とされるD/ACCテクノロジーの間には非常に重要な関連性があると考えています。昨年の投稿からD/ACCチャートを拡大し、この軸を追加しましょう(また、それを「」というラベルに変更しましょう)。生き残る vs 繁栄する「)をチャートに追加して、どんな結果が出るか見てみることです:
あらゆるドメインにおいて、私たちがあるドメインで「生き残る」のに役立つ科学、アイデア、ツールは、「繁栄する」のに役立つ科学、アイデア、ツールと密接に関連しているという一貫したパターンがあります。いくつかの例:
これに加えて、科目間にも重要な相互依存関係があります。
異なる人々は非常に異なるAIのタイムラインを持っています。モンテネグロのZuzaluのチャート、2023年。
私の去年の投稿に対する最も説得力のある反論は、AIセーフティコミュニティからの批判でした。その議論は次のようになります。「確かに、強力なAIが出現するまでには半世紀かかるかもしれませんが、実際にはAGIまでのタイムラインは3年、超知能までのタイムラインはさらに3年と見られています。したがって、世界が破壊されたり不可逆的な罠に陥ったりするのを防ぐためには、良いことを加速するだけでなく、悪いことを遅らせる必要もあります。つまり、強力な規制を通過させることですが、これによって強力な人々が不快になるかもしれません。」私の去年の投稿では、「悪いことを遅らせる」ための具体的な戦略を呼びかけていませんでした。危険な形態の超知能を構築しないようにという曖昧な訴えだけでした。したがって、ここで直接質問に取り組む価値があります:もし私たちが...最も便利な世界人工知能のリスクが高く、タイムラインが潜在的に5年先の場合、私はどのような規制を支持するのでしょうか?
昨年、提案された主なAI規制は、カリフォルニア州のSB-1047法案.SB-1047は、最もパワフルなモデル($100M以上のトレーニングにかかるモデル、またはファインチューンの場合は$10M以上)の開発者に、リリース前に一定の安全テスト措置を取ることを義務付けました。さらに、AIモデルの開発者が十分な注意を払わない場合、責任を負うこととしました。多くの反対者は、この法案は「」と主張しました。オープンソースへの脅威「; 私は異議を唱えました、なぜならコストのしきい値が最も強力なモデルにしか影響を与えなかったからです:LLama3さえもしばらくは閾値未満でしょう。しかし、振り返ってみると、その法案にはより大きな問題があったと思います。ほとんどの規制と同様に、現在の状況に過度に適合しすぎていました。訓練コストに焦点を当てることは、すでに新しい技術の前では脆弱であることが証明されています。最近の最先端の品質Deepseek v3モデルは、コストをかけて訓練されました。たったの$6百万、そして新しいモデルでは、O1のコストは、より一般的にトレーニングから推論へとシフトしています。
第二に、AI超知能の終末シナリオに実際に責任を持つ最も可能性の高い行為者は現実的には軍である。バイオセキュリティの過去半世紀で見てきた(そしてそれ以上に)軍隊は恐ろしいことを厭わず、簡単に間違いを犯す可能性があります。現在、AIの軍事利用は急速に進んでいます(ウクライナ, ガザそして、政府が制定する安全規制は、デフォルトで彼ら自身の軍隊や軍隊と緊密に協力する企業を免除することになります。
それにもかかわらず、これらの主張は手を上げて何もしない理由ではありません。むしろ、私たちはこれらをガイドとして使用し、これらの懸念を最小限に抑えるためのルールを考えることができます。
法的に訴えられる損害を引き起こすような行為をした場合、couldbe 提訴されましたこれにより、軍事などの「法の上にある」行為者からのリスクの問題は解決されませんが、これは過度適合を回避する非常に汎用性の高いアプローチであり、しばしばです。サポートby libertarian-leaning経済学者まさにその理由のためです。
これまで考慮されてきた責任の主な対象は次のとおりです:
ユーザーに責任を負わせることが最もインセンティブに適合するようです。モデルの開発と使用方法の間の関連性に注意しながら、翻訳を行います。はしばしば不明瞭です、ユーザーはAIの使用方法を完全に決定します。ユーザーに責任を負わせることで、私が考える正しい方法でAIを行うための強力なプレッシャーが生まれます:人間の心のためのメカスーツの構築に重点を置き、自己持続型の知的生命の新しい形式の作成には重点を置きません。前者は定期的にユーザーの意図に応答するため、ユーザーが望まなければ致命的な行動を起こしません。後者は「AIが暴走する」という典型的なシナリオを作り出す最もリスクが高いです。可能な限り責任を最終使用に近づけることのもう1つの利点は、責任が他の方法で有害な行動につながるリスクを最小限に抑えることです(例:クローズドソース、KYCおよび監視、国家/ビジネスの共謀によるユーザーの制限、例えばデバンキング、世界の大部分をロックアウト)。
ユーザーに責任を負わせることに対する古典的な論点があります: ユーザーはお金を持っていないかもしれず、匿名かもしれず、実際には壊滅的な被害に対して支払いができる人物がいないかもしれません。この議論は過大評価される可能性があります: 一部のユーザーが責任を負うには小さすぎるかもしれませんが、AI開発者の平均的な顧客はそうではないため、AI開発者はまだユーザーに高い責任リスクを負わせない製品を作ることに動機づけられます。それはまだ有効な議論であり、対応する必要があります。適切なレベルの注意を払うリソースを持つパイプライン内の誰かを動機づける必要があります。デプロイヤーや開発者はまだ容易に利用できるターゲットですが、多大な影響力を持つどのモデルがどれだけ安全か、または危険かについて
デプロイヤーの責任は合理的なように思えます。よく引用される懸念は、オープンソースモデルには機能しないということですが、これは管理可能なように思えます。特に最も強力なモデルが閉じたソースである可能性が高いため(そしてもしオープンであることが判明した場合、デプロイヤーの責任はあまり役に立たなくなりますが、多くの害も引き起こしません)。開発者の責任にも同様の懸念があります(ただし、オープンソースモデルの場合、最初に許可されていないことを行うためにモデルを微調整する必要があります)が、同じ反論が適用されます。一般的な原則として、制御に「税金」をかけ、本質的に「あなたはできる」と言っています。制御できないものを構築するまたは、制御できるものを作ることもできますが、制御できるものを作る場合は、制御の20%を私たちの目的に使用する必要があります」というのは、法的システムにとって合理的な立場のように思われます。
パイプライン内の他のアクターに責任を負わせるという未開拓のアイデアがありますが、これらのアクターはより豊富なリソースを持っている可能性が高いです。非常にd/accフレンドリーなアイデアの1つは、AIが(ハッキングなどによって)何らかの壊滅的に有害な行動を実行する過程で使用する機器の所有者または運営者に責任を負わせることです。これにより、世界(特にコンピューティングおよびバイオ)のインフラをできるだけ安全にするための大きなインセンティブが生まれます。
もし私が責任規則よりも「筋肉質な」何かが必要だと確信していたなら、これが私が選ぶものです。目標は、重要な時期において世界中で利用可能な計算能力を約90〜99%削減し、人類が準備するためのさらなる時間を確保することです。1〜2年間の価値は過大評価されるべきではありません:「戦時モード」の1年は、怠惰な状況下での100年の作業に easily に匹敵することがあります。実装方法の一部として、「休止「具体的な提案などを含む、さまざまな方法が検討されてきました。」登録が必要ですと位置の確認ハードウェアの。
より高度なアプローチは、巧妙な暗号トリックを使用することです。たとえば、大規模な(ただし消費者ではない)AIハードウェアは、主要な国際機関から週に3回の署名(少なくとも1つは非軍事関連のもの)を受け取らないと継続して実行できないようにするための信頼性のあるハードウェアチップを装備することができます。署名はデバイスに依存しないものです(必要に応じて、ブロックチェーン上に公開されたことをゼロ知識の証明さえ要求できます)。したがって、すべてかなりなしがあります。すべての他のデバイスを承認せずに特定のデバイスを継続して実行する実用的な方法はありません。
これは、利益を最大化し、リスクを最小限に抑える点で「条件を満たしている」と感じられます。
ハードウェア規制は既に非常に真剣に検討されており、一般的には枠組みを通じて行われています。輸出統制、本質的には「私たちは自分たちの側を信じますが、相手の側は信じません」という哲学を持っています。レオポルド・アッシェンブレンナーは、アメリカが「決定的な利点を得るための競争そして基本的に中国を迫る彼らが実行することが許可されるボックスの数を制限するプロトコルに署名することです。私にとって、このアプローチはリスキーであり、欠点を組み合わせる可能性があります。マルチポーラレースそして中央集権化。もし私たちが人々を制限しなければならない場合、誰もが平等な立場で制限する方が良いと思われ、一方が他の人々を支配しようとするのではなく、実際に協力してそれを組織するための困難な仕事をすることが重要です。
これらの戦略(責任とハードウェアの一時停止ボタン)の両方には欠陥があり、明らかにそれらは一時的な処置に過ぎません:時点Tでスーパーコンピュータで可能になったことは、時点T + 5年にはおそらくノートパソコンでも可能になるでしょう。したがって、時間を稼ぐためにより安定したものが必要です。多くのd/acc技術がここで関連してきます。我々はd/acc技術の役割を次のように考えることができます:AIが世界を支配する場合、それはどのようにして行うのでしょうか?
前述のように、責任規則は、これらの防御策を採用し真剣に取り組むよう、世界のすべての部分に効果的に刺激を与えることができる、自然にD / ACCフレンドリーな規制スタイルです。台湾実験をしてきました最近、虚偽広告に対する責任を負っている例として、責任を利用して情報防衛を奨励する一例と見なすことができます。責任をどこにでも置くことに熱心になりすぎず、ただの自由の利点を覚えておくべきです。小さな人が訴訟の恐れなしにイノベーションに参加することを可能にするためのものです。しかし、セキュリティを強化するための強いプッシュが必要な場合、責任はかなり柔軟で効果的になり得ます。
多くのd / accは典型的なブロックチェーンのトピックをはるかに超えています:バイオセキュリティ、BCI、および協働的な議論ツールは、通常の暗号人が話すことからはるかに遠いように思われます。ただし、暗号とd / accの間にはいくつかの重要な関係があると思います。
Cursive は、完全準同型暗号化 (FHE) を使用して、プライバシーを保護しながら、ユーザーが他のユーザーと共通の関心のある領域を識別できるようにするアプリです。これは、多くの派生物の1つであるEdge Cityで使用されました。Zuzalu, in Chiang Mai.
これらの直接的な交差点に加えて、もう1つ重要な共通の関心事があります:資金調達メカニズム。
私の持続的な関心事の1つは、公共財を資金提供するためのより良いメカニズムを考案することです:非常に多くの人々にとって価値のあるプロジェクトですが、持っていません自然に身近なビジネスモデル。これに関する私の過去の仕事には、二次資金化とその使用についてGitcoin Grants、レトロPGF、そして最近は深い資金調達.
多くの人々は、公共財に対して懐疑的な考えを持っています。この懐疑心は一般的に2つの源から来ています:
これらは重要な批評であり、良い批評です。ただし、私は、強力な分散型の公共財の資金調達がd/accビジョンに不可欠であると主張します。なぜなら、中心的な制御点を最小限に抑えることが主要なd/accの目標であり、これは多くの伝統的なビジネスモデルを本質的に挫折させるからです。オープンソースで成功するビジネスを構築することは可能です。いくつかバルビgranteesしかし、一部の状況では、重要なプロジェクトに追加の継続的サポートが必要なほど困難な場合もあります。したがって、私たちは困難なことをしなければならず、上記の両方の批判に対処する方法で公共財の資金調達をどのように行うかを考える必要があります。
最初の問題の解決策は基本的には信頼性のある中立性そして@VitalikButerin中央集権化の意味。中央計画は、権力を乱用する可能性のあるエリートに制御権を与えるため問題があり、またしばしば現在の状況に過剰適合そして、時間の経過とともにますます効果が薄れていきます。2次資金調達や類似のメカニズムは、できるだけ信頼性があり、(建築的・政治的に) 分散化された方法で公共財を資金調達することに関して、明確に中立であるようになりました。
二番目の問題はより challenging. With quadratic funding, a common critique has been that it すぐに人気投票になりますプロジェクトの資金提供者は、大衆キャンペーンに多くの努力を払う必要があります。さらに、「人々の目の前にある」プロジェクト(例:エンドユーザーアプリケーション)は資金提供されますが、背後にあるプロジェクト(典型的な「ゲート」)は資金提供されません。ネブラスカの男性によって維持される依存関係")資金調達はまったくありません。楽観的な資金調達は、少数の専門バッジ保持者に依存しています。ここでは、人気コンテストの影響は薄れますが、バッジ保持者との密接な個人的な関係の社会的影響が増幅されます。
ディープファンディング私はこの問題を解決するための最新の取り組みです。 Deep fundingには2つの主要な革新があります。
しかし、深い資金調達は最新の例に過ぎません。以前にも他の公共財資金調達メカニズムのアイデアがあり、将来もさらに多くのものがあるでしょう。allo.expertそれらをカタログ化するのに非常に良い仕事をしています。根本的な目標は、市場が私的財を資金提供する方法に少なくとも近似するレベルの正確さ、公正さ、およびオープンエントリで公共財を資金提供できる社会的なガジェットを作成することです。完璧である必要はありません。なぜなら、市場自体が完璧からは程遠いからです。ただし、開発者がみんなのために利益をもたらす優れたオープンソースプロジェクトに取り組み続ける余裕を持ち、受け入れがたい妥協をする必要を感じないように効果的であるべきです。
今日、ほとんどのd/accの主要なプロジェクトはワクチンなどの主題にあります。BCI「ボーダーラインBCI」のような手首の筋電と視線追跡、抗老化薬、ハードウェアなどは、プロプライエタリです。これには、公共の信頼を確保するという大きなデメリットがあります。たくさんの以上エリア既に. それは競争力のある動態(「OUR TEAMはこの重要な産業を勝ち取らなければならない!」)に注意を向けることを促し、「これらの技術が超知能AIの世界で私たちを守るために十分に速く来る」という大きな競争から注意をそらします。これらの理由から、頑強な公共財の資金提供は、開放性と自由の強力な促進者になり得ます。これは、暗号コミュニティが努力を重ねてこれらの資金提供メカニズムを探求し、自身の文脈内でうまく機能するようにすることで、オープンソースの科学技術のさらなる普及のためにそれらを準備する別の方法です。
次の数十年は重要な課題をもたらす。 最近私の心にあるのは2つの課題です。
ただし、これらの課題には明るい面もあります。まず、私たちは今、残りの作業をより速く行うために非常に強力なツールを持っています:
第二に、私たちが大切にしている多くの原則が、もはや古いガードの一部のセグメントによって占有されていないため、誰でも参加できる広範な連合によって回復されることができます。これは、世界中の誰でも参加できる広範な連合によって回復されることができます。これは、最近の政治的「再配置」のおそらく最大のメリットであり、利用する価値があります。暗号通貨はすでにこの恩恵を十分に受けており、d/accも同様にグローバルなアピールを見つけることができます。
ツールへのアクセスは、私たちが生物学や環境を適応させ、そして d/acc の「防御」部分は、他の人々が同じことをする自由を侵害することなく、これを行うことができることを意味します。自由主義的な多元主義の原則これは多様な方法で行われる可能性があるということを意味しており、共通の人間の目標への取り組みがあるため、それは達成されるべきです。
私たち人間は、輝く星であり続けます。私たちが星に向かって進む中で、人類の生存と自由、そして活動を守りながら、さらに輝かしい21世紀を築くという課題は難しいものですが、私はそれに対処できると確信しています。