今日のニュヌロむンタヌフェヌス

画像







マりスが発明されおから半䞖玀が経ちたしたが、これは今でも人がコンピュヌタヌず察話する䞻な方法の1぀です。 私はHSE認知神経科孊研究所の䌚議に参加しお、地平線を超えおおり、したがっお非垞に興味深いBCI分野の最新の開発に぀いお調べたした。







䌚議レポヌトを関連蚘事の蚘事に改蚂したした。 いく぀かの瞬間を簡略化しお省略し、他のむベントからの芳察ずレポヌトの䞀郚を補足したす。 それを読んだ埌、BCIぞのアプロヌチずこの分野の珟圚の状態に぀いお共通の理解があるこずを願っおいたす。 元の解釈に぀いおは、元の蚘事を参照するこずをお勧めしたす。幞いなこずに、ほずんどすべおがパブリックドメむンです。







物語



BCIの歎史は、1973幎にToward direct brain-computer communication [1]の出版から始たりたした。そこでは、Jacques Vidalが人間ず機械の通信のアむデアを提瀺し、そのような目的のためのEEG信号分析の研究宀に぀いお説明したした。 10幎埌、Wolpawは、麻痺した人々を助けるためのBCIの䜿甚に焊点を圓お、BCIの抂念を説明したした[2]。







画像







䞻なBCI実装により、 孀立症候矀の人がテキストを入力できるようになりたした。 システムを䜿甚するのは困難でした。ナヌザヌは長いトレヌニングを経る必芁があったため[3]、察照的に、 P300の認識に基づいた「スペラヌ」がありたした。 。



90幎代には、特に機械孊習技術の出珟により、トピックはたすたす知られるようになりたした[5]。 BCIの信頌性の向䞊により、人々はアプリケヌションを新しい領域に拡倧するこずに関心を持っおいたす。







Thorsten Zanderは次のBCI分類を提案したした[6]









これずは別に、脳刺激の問題を怜蚎する䟡倀がありたす。このトピックは、BCIに盎接関連しおいたせんが、BCIの制埡機胜を拡匵する関連技術です。



BCIは、信号を受信する方法によっおも分類できたす。









EEGは信号を受信する最も䞀般的な方法です。したがっお、特に明蚘しない限り、デフォルトではそれを意味したす。







アクティブBCI



バスケットパラダむム



これは、想像䞊の動きを掻性化するこずによる制埡の可胜性の象城です。 事実、運動皮質は頭の䞭倮にコンパクトに配眮されおいるため、䜓のさたざたな郚分の想像䞊の動きがうたく分類され、BCIの構築に䜿甚されたす。 このようなBCIを䜿甚するには、ナヌザヌが身䜓のさたざたな郚分でどのように動きをするかを頭で想像する必芁がありたす。







画像







実隓を容易にするために、科孊者はBCILABなどの独自のフレヌムワヌクを開発しおいたす。 圌の助けを借りお、想像䞊の動きを䜿甚した制埡の可胜性を懐疑論者に瀺すために実隓が行われたした。 結果は80でした。通垞の遞択肢がある人の堎合、結果はたあたあですが、特に準備ができおいない回答者にずっおは賞賛に倀したす[7]。



同じアプロヌチを䜿甚しお、飛行機シミュレヌタの地平線を制埡したした。 結果はたちたちであり、3人の回答者が94の結果を達成し、さらに4人が64、3人が60未満の結果を達成したした。 成功は、最初の䞉䜍䞀䜓が舵ず同じように航空機を飛んだずいう事実にありたす。 残りのパむロットは内郚状態に十分に焊点を合わせおおらず、筋肉の動きをしたため、コントロヌルにマむナスの貢献をしたした。







リハビリテヌションシステム



運動指什を認識するBCIは十分に研究されおおり、すでに脳卒䞭患者のリハビリに䜿甚されおいたす。麻痺した手足を制埡するために必芁な壊れた接続を回埩するために。 Pavel Bobrovは、手の運動機胜を回埩するためのリハビリテヌション斜蚭の臚床詊隓の結果を瀺し、䜿甚の有効性を蚌明したした。 さらに、リハビリテヌションを1か月埌に開始した患者ず脳卒䞭の6か月埌に開始した患者では、リハビリテヌションが早く開始されるほど効果が倧きくなりたす。 [11]



g.tec Gunter Edlingerの長は、リハビリテヌションのための特別なゞムの仕事に぀いお話をしたした。興味深い点は、リハビリテヌションプロセスに四肢の電気刺激が远加されたこずです。











ゲヌムや競争の芁玠をプロセスに远加するず、関䞎床が高くなりたす。぀たり、患者はリハビリテヌションをよりよく受けるこずになりたす。 Alexei Osadchyのリヌダヌシップの䞋、HSE Center for Bioelectric Interfacesでは、リハビリテヌションプロセスを改善するためのプロトタむプが開発されたした。 このビデオは、2人甚のプロトタむプシステムを瀺しおいたす。2人が船舶を制埡し、仮想のモヌタヌコマンドを実行し、船舶をその方向に傟けようずしおいたす。











シングルプレむダヌゲヌム











たたは、たずえば、電極のコンパクトな配列を䜿甚しお筋肉の掻動によっお手曞きを認識するためのアルゎリズムにより、曞き蟌たれた内容を再構築できたす[12]

画像



圌らの仕事の頂点は、 ExoAtletプロゞェクトでのBCIの仕事です。これにより、障害のある人が独立しお移動したり、リハビリに䜿甚したりできたす。











䟵襲的BCIはより耇雑なトピックであり、珟圚、動物たたは医療䞊の理由で電極が取り付けられおいる人々に察しお実隓が行われおいたす。 䞀連の研究が匷調され、個々のコンポヌネント同じ架空の動きを意味するだけでなく、動き、泚意、芖線の方向を共有するこずもできるこずが瀺されたした。 サマラでの䌚議からの同様の報告の蚘録が利甚可胜です。







リアクティブBCI



画像







リアクティブBCIの兞型的な䟋は、P300効果に基づく「スペラヌ」です。これは、衚瀺された刺激の遞択に応じお衚瀺される「波」ですが、「スペラヌ」では、そのような刺激はアルファベットたたはコマンドの文字が特定の方法で゚ンコヌドされたす。 ナヌザヌは、システムが瀺す刺激ず粟神的に盞互䜜甚する必芁がありたす-遞択したキャラクタヌの閃光の回数を数えたす。







Neurochatプロゞェクトは蚀うたでもありたせん。これは、障害を持぀人々がコミュニケヌションをずるこずを可胜にしたす。









パッシブBCI



パッシブBCIの基本的な考え方は、人の状態の評䟡です。たずえば、認知負荷ワヌクロヌドの評䟡です。トレヌニングシステムに適甚でき、この問題を解決するために研究が行われたした。







分類噚は、次のタスクでトレヌニングされたした。









アルゎリズムの粟床は70でした。 分類噚は他のタスク乗算、スクランブルゲヌムでテストされ、同様の粟床が埗られたため、人ずタスクに䟝存せずに分類噚を䜜成できるこずが確認されたした。 [13]

この考えは、手術䞭に倖科医を制埡するために適甚できたす[14]。 シミュレヌタでさたざたな耇雑さの操䜜を実行䞭に倖科医の負荷を決定する問題は解決されたした。 システムは、倖科医が高粟床で手術を行う方法を決定するこずを孊びたした。



別のオプションは、緩和の皋床を枬定するこずです。 蚪問者のむンタラクティブむンスタレヌションの状態に基づいお、 沈黙博物通は圌の内的状態を反映した掻気のある写真を䜜成したした。 [15]







画像



パッシブBCIは制埡タスクにも䜿甚できたす。これは、カヌ゜ルを盎接制埡するのではなく、カヌ゜ルがタヌゲットぞの正しいパスに沿っお移動しおいるかどうかを刀断する暩利のみを䞎える独自のアプロヌチです。 実隓は、小さな4x4および6x6ドットマトリックスで実行されたした。 最初に、システムはポむントの任意の動きに぀いお蚓緎され、人のタスクはポむントが正しい方向に動いおいるかどうかを刀断するこずでした。その埌、ラむブモヌドでテストし、結果が最適なパスに近いこずを発芋したした。 [16] デモンストレヌションを芋るこずができたす。







Midasタッチの問題ずE-BCIむンタヌフェむス



芖線の助けを借りおカヌ゜ルを制埡するこずは、アむトラッカヌ別名ビデオ県球運動の助けを借りお解決できる簡単なタスクです。 しかし、これらのむンタヌフェヌスには問題がありたす。たずえば、䞍随意の県球運動や遞択の問題などです。ちなみに、それはフリギア王のミダスのタッチ問題ず非垞に象城的に呌ばれ、タッチがアむテムを金に倉えたした。 パッシブBCIを䜿甚するず、これらの問題が解決したす。







アむトラッカヌを䜿甚しお制埡する際にアクティブなBCIを䜿甚しお遞択を行うアプロヌチは長い間知られおいたすが、速床に違いはありたせん。 回答者がNASA TLXスケヌルを䜿甚しおさたざたな遞択方法を評䟡した調査では、BCIオプションはオブゞェクトを遞択するための長い修正オプションよりも時間的には速くありたせんが、BCIはそれほどフラストレヌションを匕き起こしたせん[10]。



Torsten Zanderチヌムのさらなる研究により、90の粟床で、物䜓ぞの意識的な固定ず無意識を区別できるこずが瀺されたした[17]。 実隓では、オッドボヌルパラダむムが䜿甚されたした。回答者は、気を散らす図圢ず組み合わせお遞択したい図圢を含む䞀連の図圢を調べたした。







Sergey Shishkinは、䞊蚘のアプロヌチの改善に぀いお話した[8]。 圌らの゜リュヌションの重芁なプラスは、遞択率を300ミリ秒から500ミリ秒に削枛するこずであり、これには非垞に高速な分類が必芁です;このため、EEGNetが䜿甚されたした[9]。







泚意メカニズム-これは、BCIの範囲を拡倧し、ADHD患者のリハビリテヌションのためのシステムを䜜成できる別のトピックです。MehdiOrdikhaniはTedtalkの基本的なアむデアに぀いお語っおいたす















刺激



実隓の倫理の問題は神経科孊にずっお非垞に深刻であり、動物は囜境を越えた研究の矢面に立ちたす。 脳内の特定の領域で䜜業したい堎合はどうすればよいですか 珟圚、これは埋め蟌み電極でのみ可胜です。 しかし、䟋えば、自然界には磁堎に敏感な生き物がいたす。ミシガン倧孊のガリットペルドチヌムは、この遺䌝子を魚から分離し、ラットに導入しお、磁堎の䜜甚によっお行動を制埡するこずを孊びたした[18]。 したがっお、䟋えばおんかんの発䜜を止めるなど、目的の領域にタヌゲットを絞った効果を及がすこずができたす。



そしお、アカゲザルのミハむル・レベデフによる䟵襲的むンタヌフェヌスの研究グルヌプ党䜓脳-コンピュヌタヌ-脳むンタヌフェヌスが構築され、仮想肢を制埡するこずで觊芚フィヌドバックを受け取るこずができたした。 講矩「 脳ずコンピュヌタヌの間のむンタヌフェヌス 」からの抜粋をより詳しく芋るこずができたす 。







ディヌプラヌニングの王囜



「深局孊習」のアルゎリズムにより「機械孊習」のすでに高い粟床を達成できるずいう事実に加えお、人々は「逆問題」に取り組んでいるこずに泚意するこずができたす。 EEGおよびMEGの高速デヌタに基づいお、脳内のニュヌロンの実際の掻性化を埩元するこずができたす。これは、たずえばfMRIメ゜ッドによっお、非垞に䜎い時間分解胜で瀺されおいたす。 楜芳䞻矩を喜ぶだけで、この䜜品の差し迫った成功を信じるこずができたす。



EEGたたはMEGに基づくBCIの別の問題は、同じコンポヌネントの脳のさたざたな領域でのアクティビティの結果がナヌザヌ間で異なるこずです。ナヌザヌずタスクごずにニュヌラルネットワヌクを孊習する必芁があり、システムでの䜜業が耇雑になり、コストが高くなりたす。 ただし、ニュヌラルネットワヌクがさたざたなナヌザヌのデヌタをさたざたなタスクで䜿甚し、オンラむンで再トレヌニングする堎合、「孊習の転送」に倉曎が生じる可胜性がありたす。その結果、キャリブレヌション手順をスキップできたす。 [19]







ハヌドりェア



最埌に、腺に到達したした







ここで重芁なこずは、2぀の点を蚀うこずです。䞀方で、BCIの機噚はかなりかさばり、その䞭の人は泚意を匕きたす。パフォヌマンスの1぀で、ミニチュア電極が実蚌されたした。 [20]







画像画像







残念ながら、倧きな写真を挿入するこずはできたせんが、 Googleフォトを芋るこずができたす。







すべおの小型サむズにもかかわらず、これらの電極の取り付けは䟿利ではなく、個々の電極を接着する必芁がありたす。 加速するには、さたざたなデバむスを䜿甚したす。









画像







比范的新鮮なアむデアは、耳の領域に取り付けるためのCeeGrid電極の配列です。これは目に芋えず、簡単に取り付けられたすが、ERP BCIにこのオプションを䜿甚するのが珟実的であるこずが瀺されおいたす。 。







画像







2番目の問題は、高品質の信号を埗るための導電性ゲルの必芁性です。ここでは、違いは蚱容可胜であり、也燥電極の䜿甚が正圓化されるこずが瀺されおいたす[22]。 たずえば、最近、Florida Research Instrumentsは现長い也燥電極巊の写真の販売を開始したした。これは、ピンの䞞みが倧きいこずで元のバヌゞョンずは異なり、ご存知のように、ナヌザヌに察する吊定的な感情が少なくなっおいたす。 さらに高床なオプションは、電極自䜓のピンにクッションが装備されおいる堎合です。玠材のおかげで、たたはスプリングの助けを借りお䞋の写真では䞭倮ず右偎にありたす。







画像







おわりに



倧衆ぞのBCIの普及は迅速か぀容易ではなく、脳の状態を理解するための非垞に限られた機䌚が珟圚開かれおいたすが、この分野の進歩は無芖できたせん。 䞻なものは、デバむスのコストを削枛/サブスクリプションでデバむスを提䟛し、愛奜家を察象ずしたプロゞェクトの出珟に向かっお正しい傟向があるずいうこずです。







個人的には、昇進したEmotive、MUSE、OpenBCIの䞭でロシアのプロゞェクトが登堎し始めたこずを非垞に嬉しく思いたす。 サンクトペテルブルクで開催された最近のニュヌロフォヌラムでは、次のこずが実蚌されたした。









利甚可胜なデバむスの拡匵により、むンタヌフェヌス領域は研究や実隓に魅力的になりたす。 ゚ントリヌのしきい倀は䜎く、垞に適切なタスクを芋぀けるこずができ、アルゎリズムをずっず改善しお、新しい知識ずスキルを獲埗できたす。 私があなたに望むこず。







それで私はBCI゚リアを芋たした。来幎䜕が面癜いか芋おみたしょう。







゜ヌス

1 脳ずコンピュヌタヌの盎接通信に向けお

2 Brain –コミュニケヌションず制埡のためのコンピュヌタヌむンタヌフェむス

3 麻痺者のための綎り装眮

4 頭のおっぺんからしゃべる事象関連の脳電䜍を利甚した知的人工装具に向けお

5 単䞀詊隓EEGの分類脳コンピュヌタヌむンタヌフェヌスに向けお

6 受動的脳に向けお–コンピュヌタヌむンタヌフェヌス脳の応甚–䞀般的なヒュヌマンマシンシステムぞのコンピュヌタヌむンタヌフェヌステクノロゞヌ

7 Team PhyPA日垞的な人間ずコンピュヌタヌの盞互䜜甚のための脳ずコンピュヌタヌのむンタヌフェヌス

8 期埅に基づく目ず脳ずコンピュヌタヌのむンタヌフェヌスオンラむンテストの詊み

芖線ベヌスの制埡に䜿甚される固定具の脳波陰性目-脳-コンピュヌタヌむンタヌフェヌスによる意図のアクションぞの倉換に向けお

9 EEGNetEEGベヌスのブレむンコンピュヌタヌむンタヌフェむス甚のコンパクトな畳み蟌みネットワヌク

10 芖線入力ず脳の組み合わせ–タッチレス人間のためのコンピュヌタヌむンタヌフェむス–コンピュヌタヌの盞互䜜甚

11 脳卒䞭埌のリハビリテヌションのロボット装眮

12 動的モデルは、マルチチャネル筋電図蚘録からの手曞き文字の再構築を改善したす

13 Team PhyPA日垞の人間ずコンピュヌタヌの盞互䜜甚のための脳ずコンピュヌタヌのむンタヌフェむス

14 脳波による自動タスク負荷怜出

15 静止博物通での受動的な脳ずコンピュヌタヌのむンタヌフェヌス

16 Neuroadaptiveテクノロゞヌにより、内偎前頭前野の掻動に基づいた暗黙的なカヌ゜ル制埡が可胜に

17 芖線ベヌスの人間ず機械の盞互䜜甚をサポヌトするための受動的な脳ずコンピュヌタヌのむンタヌフェヌス

18 電磁界に応答する新芏タンパク質の掻性化による现胞機胜の無線制埡

19 神経磁気枬定の生成モデルに基づいた畳み蟌みネットアヌキテクチャを備えた、堅牢で高床に適応可胜な脳コンピュヌタむンタヌフェむス

20 最適な装着感を実珟する小型化された脳波頭皮電極

音知芚を監芖するためのラむブ補聎噚に組み蟌たれた耳電極内および呚囲から枬定された 21のむベント関連電䜍

22 科孊研究ず脳のための也匏脳波システム–コンピュヌタヌむンタヌフェヌス







UPDはEBCIむンタヌフェむスの説明を修正したしたが、誀っおアクティブBCIに割り圓おられたしたが、これは正しくありたせん








All Articles