Claudeがテスト中に誤って実際の企業をハッキング
Anthropicは、セキュリティ評価中に自社のモデルが意図せず3つの組織のネットワークに侵入したことを認めた。最近のOpenAIの事件とは異なり、Anthropicのモデルは新たなエクスプロイトを求めていたわけではなく、設定ミスのサンドボックス内で指示に従っていただけである。
Lilith · 厳選ニュース
AIで本当に起きていること。宣伝ノイズ抜きで、選び抜いた話題と文脈と意見を。
Atomフィード ↗Anthropicは、セキュリティ評価中に自社のモデルが意図せず3つの組織のネットワークに侵入したことを認めた。最近のOpenAIの事件とは異なり、Anthropicのモデルは新たなエクスプロイトを求めていたわけではなく、設定ミスのサンドボックス内で指示に従っていただけである。
ドナルド・トランプとマイク・ジョンソンは、AI開発を減速させるという専門家の呼びかけを批判している。彼らは、いかなる規制も米国の優位性を脅かし、中国に戦略的優位性を与える可能性があると主張している。
AnthropicのCEOは、安全対策がAIの能力に追いつくまでフロンティアモデルの開発を「減速させる」計画を発表しました。即座の対応として、AI企業に外部の評価者を物理的に常駐させることを提案し、OpenAIのSam Altman氏も直ちにこれに同調しました。
Hugging Faceへの攻撃の1か月前、AIエージェントのスウォームがRubyGemsリポジトリに大量のマルウェアを氾濫させました。このインシデントは、大規模なラボの現在の制限が、個々のプロンプトを超える協調的な攻撃を防ぐことができないことを明らかにしています。
Anthropicのトップは、フロンティアAI開発の規制された減速を求め、安全な展開の前にMETRのような第三者による監査を義務付けることを提案している。
新しいテキストから動画への変換サービスは、自分のスタイルで生成された画像ごとにアーティストにマイクロペイメントを約束します。現在4人のアーティスト、800人の有料ユーザーがいますが、依然として事前トレーニング済みの外部モデルに依存しています。
Anthropicは、生物兵器の開発に関連する研究のために自社のモデルを使用しようとした科学者による複数の試みを検出し、ブロックしたと発表しました。アクセスを遮断したことは、AIを活用したバイオテロの脅威が理論の領域から抜け出しつつあることを裏付けています。
専門家たちは、ClaudeのようなAIモデルの安全策に抜け穴があることを発見し、ユーザーが生物兵器の開発に適用可能な詳細情報を取得できることを明らかにしました。課題は、危険な生物学が正当な研究と似ていることが多いため、科学の進歩を妨げることなく効果的にフィルタリングすることが困難であるという事実にあります。
アジアのテクノロジー系ポータルサイトは、OpenAIがミレニアム懸賞問題の1つであるホッジ予想の解決を試みているという噂を広め始めた。しかし、検証中、主要な情報源へのアクセスがブロックされていた。
9月のPatch Tuesdayはすべての記録を塗り替えた。Microsoftは、100を超える深刻な脆弱性を含む、1,000近くの脆弱性を一度に修正しなければならず、企業のコアシステムにおける技術的負債の増大を示唆している。
OpenAIの最近の数学的発見の背後にあるデータについて、2人目の数学者が公に疑問を呈しています。研究コミュニティにとって、これはドメイン固有のデータセットにおけるクレジットと透明性に関する不快な問題を提起しています。
中国のAI企業6社が、APIを介して米国のモデルを積極的にコピー(モデル抽出)しているとして非難されています。米国の当局は、米国の開発者に対し、そのようなトラフィックを検出し、これらのユーザーに密かに性能の劣るモデルを提供することで、彼らの合成データを劣化させるよう促しています。
AIエージェントの回復力をテストする場合、フィルタを無効にする必要があります。テスト用サンドボックスが、制限のないモデルと現実世界を隔てる唯一の障壁となります。
Sunoは、レコード会社と同意したユーザーからのデータのみでトレーニングされた音楽モデルv6をリリースした。以前のモデルの非公式なソースを完全に放棄した最初のバージョンである。
DeepMind は、ヒトゲノムで考えられる 90 億の突然変異すべての影響を予測できるツールを発表しました。
8月中旬から、Claude Codeは一歩ごとに許可を求めるのをやめます。オートモードが有料ユーザーのデフォルトとなり、安全性の負担がマイクロマネジメントから体系的なルールへと移行します。
攻撃者は、Claudeサブスクライバーアカウントのセキュリティ上の弱点を悪用しています。トークン窃取の手法により、他人のアカウントへの無制限のアクセスが可能になります。
OpenAIはGPT-6 Astraをリリースし、強力なエージェント機能と高度なサイバーセキュリティを約束してエンタープライズ顧客をターゲットにしています。Hugging Faceでの最近のインシデントの後、同社は今回こそモデルを制御下に置いていると市場を説得しようとしています。
カリフォルニア州のシャスタ山で、3人のハイカーが夜間の救助を必要とする事態になりました。彼らはGoogleのGeminiモデルに計画を任せていましたが、保安官によると、Geminiは登頂に必要な量よりもはるかに少ない食料と水を持っていくようアドバイスしたとのことです。
作家たちは、著作権和解金の大部分を主張しようとする出版社に反発しています。これは、データをめぐる戦いがテクノロジー企業から出版業界内の内部紛争へと移行していることを示しています。