アビリ数台のマシンに 私たちの心を読む 近年着実に進歩しています。 現在、研究者たちは AI ビデオ生成テクノロジーを使用して、私たちに心の目への窓を与えています。
脳信号を解釈する試みの背後にある主な推進力は、昏睡状態やさまざまな形の麻痺のある人々に、いつの日か新しいコミュニケーションの窓口を提供できるかもしれないという希望です。 しかし、この技術が人間と機械の間により直観的なインターフェースを生み出し、健康な人にも応用できるのではないかという期待もある。
これまでのところ、ほとんどの研究は、内部の独白を再現する取り組みに焦点を当てています。s AI システムを使用した患者の 選び出す 彼らはどんな言葉を考えているのか。 最も有望な結果は、ほとんどの人にとって実用的なアプローチである可能性が低い侵襲的脳インプラントからもたらされています。
しかし今回、シンガポール国立大学と香港中文大学の研究者らは、非侵襲的な脳スキャンとAI画像生成技術を組み合わせて、被験者が見ていたクリップに驚くほど似た短いビデオの断片を作成できることを示した。彼らの脳データが収集されたとき。
この作品は同じ著者による研究の延長です 昨年末に出版されたそこで彼らは、被験者が見せた写真とほぼ一致する静止画像を生成できることを示しました。 これは、最初に fMRI 脳スキャナーを使用して収集された大量のデータで XNUMX つのモデルをトレーニングすることによって達成されました。 次に、このモデルをオープンソースの画像生成 AI Stable Diffusion と組み合わせて画像を作成しました。
新しい論文で に公開 プレプリントサーバー arXivの, 著者らは同様のアプローチを採用していますが、システムが脳データのストリームを解釈し、静止画ではなく動画に変換できるように応用しています。 まず、彼らは大量の fMRI で XNUMX つのモデルをトレーニングし、これらの脳スキャンの一般的な特徴を学習できるようにしました。 これはその後、個々の fMRI スキャンではなく一連の fMRI スキャンを処理できるように拡張され、fMRI スキャン、その脳活動を引き出すビデオの断片、およびテキストの説明の組み合わせで再度トレーニングされました。
これとは別に、研究者らは事前にトレーニングされた安定拡散モデルを適応させて、静止画像ではなくビデオを生成しました。 その後、最初のモデルがトレーニングされたのと同じビデオとテキストの説明で再度トレーニングされました。 最後に、XNUMX つのモデルを組み合わせて、fMRI スキャンとそれに関連するビデオを微調整しました。
結果として得られたシステムは、これまでに見たことのない新鮮な fMRI スキャンを取得し、人間の被験者が撮影したクリップにほぼ似たビデオを生成することができました。d 当時見ていました。 完全な一致にはほど遠いものの、AI の出力は一般に元のビデオにかなり近く、群衆のシーンや馬の群れを正確に再現し、多くの場合カラーパレットと一致していました。
システムを評価するために、研究者らは、モデルがシーンのセマンティクスをどの程度理解しているかを評価するように設計されたビデオ分類器を使用しました。たとえば、そのビデオが水族館で泳いでいる魚や、道を歩いている家族の映像であるとモデルが認識したかどうかなどです。たとえイメージが少し違っていたとしても。 彼らのモデルのスコアは 85% で、これは最先端のものより 45% 向上しています。
AIが生成するビデオにはまだ不具合があるが、著者らは、この一連の研究は最終的には基礎的な神経科学と将来の両方に応用できる可能性があると述べている。 ブレイン・マシン・インターフェース。 ただし、彼らはこのテクノロジーの潜在的な欠点も認めています。 「個人の生物学的データのプライバシーを確保し、このテクノロジーの悪意のある使用を回避するには、政府の規制と研究コミュニティの努力が必要です」と彼らは書いています。
これはおそらく、AI脳スキャン技術を組み合わせることで、人々が同意なしに他人の思考を侵入的に記録できるようになる可能性があるという懸念へのうなずきだろう。 A不安はあった また 研究者らが基本的にラフを作成するために同様のアプローチを使用したとき、今年初めに声が上がった 人々の頭の中の声を転写したもの、ただし、専門家はこれは次のようなことになると指摘しています。 不可能ではないにしても非現実的 近い将来です。
しかし、これをプライバシーの不気味な侵害と見るか、テクノロジーと連携するエキサイティングな新しい方法と見るかにかかわらず、マシンマインドリーダーは現実に少しずつ近づいているようです。
画像のクレジット: クラウディア・デワルド から Pixabay
- SEO を活用したコンテンツと PR 配信。 今日増幅されます。
- プラトアイストリーム。 Web3 データ インテリジェンス。 知識増幅。 こちらからアクセスしてください。
- 未来を鋳造する w エイドリエン・アシュリー。 こちらからアクセスしてください。
- PREIPO® を使用して PRE-IPO 企業の株式を売買します。 こちらからアクセスしてください。
- 情報源: https://singularityhub.com/2023/05/26/an-ai-recreated-videos-people-watched-based-on-their-brain-activity/
- :持っている
- :は
- :not
- :どこ
- a
- できる
- 正確にデジタル化
- 達成
- 認める
- アクティビティ
- 適応する
- 適合しました
- 再び
- AI
- AIシステム
- AIビデオ
- また
- 金額
- an
- および
- どれか
- アプローチ
- です
- AS
- 関連する
- At
- 試み
- 増強された
- 著者
- 避ける
- 基本
- BE
- き
- 背後に
- の間に
- 両言語で
- 脳
- 脳活動
- 広く
- 焙煎が極度に未発達や過発達のコーヒーにて、クロロゲン酸の味わいへの影響は強くなり、金属を思わせる味わいと乾いたマウスフィールを感じさせます。
- by
- 缶
- 中国語
- クリップ
- 閉じる
- クローザー
- カラー
- 組み合わせ
- 組み合わせ
- 組み合わせる
- 組み合わせた
- 来ます
- コミュニケーション
- コミュニティ
- 懸念事項
- 同意
- 変換
- 可能性
- 作ります
- クレジット
- 群衆
- データ
- 中
- 設計
- 異なります
- ダウン
- 欠点
- ドライバー
- 前
- 努力
- 確保
- 本質的に
- 評価する
- エキサイティング
- 専門家
- 目
- 家族
- 遠く
- 特徴
- 最後に
- 名
- 魚
- 焦点を当て
- 予見
- フォーム
- 新鮮な
- から
- 未来
- 一般に
- 生成する
- 生成
- 世代
- 生々しい
- 生成AI
- 与える
- 持っていました
- 持ってる
- 健康
- ホン
- 香港
- 希望
- 期待している
- 認定条件
- しかしながら
- HTTPS
- 人間
- 人間
- if
- 画像
- 画像生成
- 画像
- 改善
- in
- 個人
- インタフェース
- インターフェース
- 内部
- に
- 直観的な
- 侵略
- IT
- JPG
- 香港
- 大
- 姓
- 遅く
- LEARN
- 左
- 可能性が高い
- LINE
- 機械
- マシン
- メイン
- make
- 一致
- マッチ
- マッチング
- かもしれない
- マインド
- モデル
- 他には?
- 最も
- 国民
- 自然
- 神経科学
- 新作
- 今
- of
- 提供
- 頻繁に
- on
- ONE
- もの
- オープンソース
- or
- オリジナル
- 私たちの
- でる
- 出力
- が
- パレット
- 紙素材
- 患者
- のワークプ
- パーセント
- 完璧
- 選ぶ
- ピクチャー
- プラトン
- プラトンデータインテリジェンス
- プラトデータ
- 可能
- 潜在的な
- 実用的
- かなり
- プライバシー
- プロセス
- 作り出す
- 進行中
- 有望
- むしろ
- 読者
- リーディング
- 現実
- 実現
- 最近
- 記録
- 規制
- の提出が必要です
- 研究
- 研究者
- 結果として
- 結果
- 大体
- 同じ
- 言う
- スキャニング
- シーン
- と思われる
- 見て
- 意味論
- ショート
- 示されました
- 示す
- 信号
- 同様の
- シンガポール
- わずかに異なる
- So
- 安定した
- 最先端の
- まだ
- ストリーム
- 水泳
- システム
- 取る
- テクノロジー
- より
- それ
- アプリ環境に合わせて
- それら
- その後
- そこ。
- ボーマン
- 彼ら
- 考え
- この
- 今年
- それらの
- しかし?
- 時間
- 〜へ
- 一緒に
- 訓練された
- トレーニング
- 2
- 最終的に
- 理解された
- 大学
- us
- 使用法
- 中古
- さまざまな
- ビデオ
- 動画
- ボイス
- ウォーキング
- ました
- 見ている
- 仕方..
- we
- WELL
- した
- 西部の
- この試験は
- いつ
- かどうか
- which
- while
- ウィンドウズ
- 無し
- 言葉
- 仕事
- でしょう
- 書きます
- 年
- 年
- 貴社
- あなたの
- ゼファーネット