Method Article
この記事では、ミラーの錯覚を使用して機械学習を用いた分析と心理物理手順を組み合わせた2次元平面上に固有受容ドリフトを推定する新規な方法を説明します。
Proprioceptive drift, which is a perceptual shift in body-part position from the unseen real body to a visible body-like image, has been measured as the behavioral correlate for the sense of ownership. Previously, the estimation of proprioceptive drift was limited to one spatial dimension, such as height, width, or depth. As the hand can move freely in 3D, measuring proprioceptive drift in only one dimension is not sufficient for the estimation of the drift in real life situations. In this article, we provide a novel method to estimate proprioceptive drift on a 2D plane using the mirror illusion by combining an objective behavioral measurement (hand position tracking) and subjective, phenomenological assessment (subjective assessment of hand position and questionnaire) with a sophisticated machine learning approach. This technique permits not only an investigation of the underlying mechanisms of the sense of ownership and agency but also assists in the rehabilitation of a missing or paralyzed limb and in the design rules of real-time control systems with a self-body-like usability, in which the operator controls the system as if it were part of his/her own body.
近年、自己身体の感覚や経験についての研究、つまり、自分の体は、実施形態の文脈で増加しています。実施形態は、このような、到達把握、および触れるとして、環境と相互作用することができる物理または仮想ボディを持つのアイデアや概念を指します。例えば、人間がオブジェクトまたはこの場合、自分の腕と手で、自分自身の体を動かすことにより、環境に位置し、別の人間に触れることができます。今日では、この相互作用または通信は、自分の自然な体の使用に限定されるものではありません。本発明と仮想世界におけるヒト様ロボットやアバターの開発のために、自然の人間の体は、そのような仮想現実でヒューマノイド、遠隔制御ロボット、電動プロテーゼ、またはコンピュータグラフィックスアバターとして、人工体によって置換することができます。例えば、研究者があっても、ロボをそのオペレータの機械本体を介してロボットの前方に配置されたオブジェクトを「掴む」ことができるロボットを開発しましたトンは、作業者の身体の位置1,2から遠く離れて配置されています。人間は体が事業者の自己身体の帰属を開催する人工体を介してアクションを実行することができれば、この例と同様に?
私たちは簡単に人工的な、非肉と骨本体に私たち自身の自然な身体からの「自己」の帰属や投影上のこの議論に関連するトピックを見つけることができます。一例としては、医療分野で見つけることができます。例えば、医学的リハビリテーションの分野では、治療は、ミラーを使用して「トリック」は、患者の自己身体感覚は、ミラー療法3-6と呼ばれる、痛みを軽減し、欠落または麻痺肢の運動機能を改善するために探求されていること。この療法では、影響を受けない身体部分や手足のミラーイメージが欠落しているか、麻痺肢がミラーに表示されて1に対応していることを信じるように、患者の脳に誤解を与えることができますし、それはそれにまだあるという感じにつながります元の状態( すなわち 、事故の前に)。それは、この錯覚は、身体表現に関連する脳の回復力をどのように影響するかまだ検討中です。私たちの自然な身体上の議論のこのタイプに加えて、我々は、特に工学の分野における人間系の相互作用の設計問題の実施形態に同様の議論を、見つけることができます。人工または仮想ボディのために自己の感覚がよく、テレプレゼンス、ブレイン・マシン・インターフェース、およびブレイン・マシン・インタフェース1,2,7-9の文脈で検討されています。一部の研究者は、作業者の手にそのロボットハンドから触感を転送することができます人間のようなロボットは、ロボットだけでなく、ロボットが配置されている場所であるという意味に自己身体の操作者の感覚をキャプチャすることができますことを報告しましたむしろオペレータが実際に存在する場合よりも、テレ存在1と呼ばれます。他の研究者は、仮想アバターが強いオペレータの身体の動きを反映していることを報告しましたlyが仮想ボディ9にオペレータ自身の体から自己の体の操作者の感覚を転送します。これらの知見は、ユーザが、人工本体が直接に接続されていない場合でも、そのような仮想現実でヒューマノイド、遠隔制御ロボット、電動プロテーゼ、またはコンピュータグラフィックスアバターとして、人工的な体内への自己身体の感覚を投影することができる方法を示し、その脳と体。
非生身のための自己身体感覚のこのタイプの基本的な科学的研究は、人工的な身体のようなオブジェクトは、ゴムの手の錯覚(RHI)10-13とミラーを用いた自己身体の経験のために、基礎となる脳のメカニズムを調べました錯覚(MI)医療と工学の分野でだけでなく、心理物理学と神経心理学で14-16。 RHIはゴム手が自分の体に属し、同時に見えるゴム手と参加者の隠れた手を撫でによって誘発される感覚です。 MI、手IMAで正中矢状軸に沿って配置された鏡の中のGEは、視覚的に目に見えない反対側の手の参加者の知覚位置を捕捉します。反射された手の画像が見えない反対側の手であるかのようにまた、反射して目に見えない手の同期動きが強い感覚を呼び起こします。これらの幻想の研究によると、マルチモーダル情報や予測と身体の動きに関する感覚フィードバックの間の一貫性は、自己の身体帰属の判断に重要な役割を果たしているようです。したがって、これらの二つの幻想はだまされているか、いくつかの人工的なオブジェクトや画像を主観的に私たち自身の体の一部とすることができると信じて私たちの感覚の根底にある脳のメカニズムを研究する科学者のためのシンプルでありながら強力な証拠とツールすることができ、私たちの自己身体感覚がないこと私たちの自然な肉体に縛られる必要はありませ。
上記のすべてのこれらの研究では、議論は「自己」consistiの概念に基づいています当事者意識と代理店の意味:哲学者ギャラガー17によって提案された感覚の2種類のngの。当事者意識が観測された身体の部分は自分で感覚を指します。機関の感覚は、身体の動きが自己引き起こされる感覚に相当します。これら二つの感覚は、自己16の即時感ある最小限の自己、として定義されています。所有権と代理店の意味:この概念によれば、損傷した、自然な仮想、および機械的なボディのための「自己」の属性は、同じインデックスによって評価することができます。科学的評価のためのこの感覚を使用するためには、質問が強固に所有権と代理店の感覚を測定する方法で発生します。現在、所有権と代理店の感覚の推定は、主に、もともとBotvinick 9によって提案された質問票に依存しています。アンケートに加えて、定量的な方法でそれらを測定するように試みることができます。例えば、皮膚のコンコンダクタンス反応(SCR)は、ゴム手が突然ナイフ18により切断された場合には、所有権の生理指標として用いられてきました。 SCRは、皮膚の電気的特性を測定することによって計算され、覚醒19のための高感度かつ有効な指標です。この方法は、通常、参加者ごとに単一の試験のために印加されているので、測定SCRは、参加者の中繰り返し測定を必要とする心理物理学実験中の物理的な指標としては適していません。当事者意識のための最も成功した行動指標の一つは、 固有受容ドリフトである。固有受容ドリフトは、ゴム製の補綴物として、または、手のように見える物体の位置に向かって目に見えない本物の手の知覚位置の変化でありますコンピュータグラフィックス10-13。この変更は、自己受容ドリフト私、目に見えない本物の手と手の視覚画像との間の距離を測定することにより、繰り返しとロバストに推定することができるので、精神物理学的測定のためのsa適した物理インデックス。しかし、この使用は、最近の議論は自己受容ドリフトが常に所有12の行動の指標として用いることができるかどうかを疑問視しているので、慎重に評価される必要があります。
典型的に、固有受容ドリフトは、高さ、幅、または深さの3方向の一方のみで測定されます。固有受容ドリフトはほとんど多次元データを推定し、視覚化の難しさのために、複数の方向で測定されていません。この計量制限は、実験条件を容易に設計し、測定された寸法を制限するように制御することができるので、多感覚情報を処理するメカニズムを探索する基礎研究のために重要ではありません。しかし、日常生活の中で、私たちの手は、私たちの意思に従うことを3Dで自由に移動します。この状況では、アンケート、厳しく制限動きとPOSとの参加者の行動を測定することは困難かつ不十分です手のitions。したがって、エンジニアリングおよびリハビリテーションにおける所有権や代理店、複数の方向が含まれており、自由な手の動きは、日常生活の状況における視覚と固有受容フィードバックとの間の空間的関係を評価するために必要とされることができ、測定の感覚のための潜在的な用途を考慮。このような測定が可能であった場合は、実数と観測された手の間の測定距離は、自己の体の感覚のためのガイドラインとして利用することができます。これは、だけでなく、リハビリの進行の指標だけでなく、表示および操作手で操作対象との間の空間オフセットの基準になる可能性があります。問題は、この測定を確実かつ効果的に実施することができる方法として残ります。
この問題に対処するために、我々は目に見える手のようなOのそれに参加者の目に見えない本物の手の位置からのシフトに対応する固有受容ドリフトを推定する新規な方法を紹介しますbject、心理物理手順と機械学習を用いた解析を組み合わせることにより、ミラーの錯覚を使用して、2次元平面上に。ゴム手と比較すると、鏡の中の手のイメージが強く、目に見えない本物の手の参加者の知覚位置を捕捉します。また、ミラーリングされた画像はすぐに手の配置のための自主的な手の動きを反映しています。これにより、鏡像が参加者の手の視覚的なフィードバックとして選択しました。また、日常生活の状況に似た固有受容ドリフトを測定するために、参加者は自分の意志で自分の隠された手のトライアル・バイ・トライアルに位置し、試行回数が増加しました。方向の任意の組み合わせが使用されている可能性があるが、高さと深さとの組み合わせが原因垂直ミラーを配置を容易に選択しました。本手法と以前の研究13との間の整合性をチェックするために、2つの視覚的な条件が実装されました:とし、視覚的なフィードバックなし。視覚フィードバック、ミラーワットとの条件で正中矢状面に沿って配置されたとして、それは右手のように見られたかのように、左手の反射像を作成することができます。視覚的なフィードバックのない状態では、マットの黒板は、参加者の実際の右手を隠すために使用されました。私たちは、所有権と代理店の感覚に関するアンケートで得られたものと結果を比較することによって、この新規な方法の有効性を評価しました。
実験のすべての側面は、東京工業大学の倫理委員会によって承認されました。
1.実験のセットアップ
2.参加者
3.実験手順
4.データ解析
以前の研究からの代表的な結果を方法16を例示するために提示される。 図3(a)は、視覚的な参加者が左右の手の位置との間の空間オフセットを検出することができなかった領域の形状は(ミラー)との条件間で異なっていることを示しており、(黒板)なしフィードバック図3Bは、視覚的なフィードバックとの条件で、その領域のサイズは視覚的なフィードバック(ウィルコクソンの符号順位検定:Z = -2.803、P = 0.005)なし条件よりも有意に大きい示しています。これらの結果は、必要な自己受容ドリフトが方向によって約10cmと、この値の変化( 図3と図 4)で維持するために、視覚と固有受容フィードバックの間のオフセットことを示唆しています。垂直水平オフセットよりも大きく見えたオフセット。 図5は 、質問票スコアFの垂直方向と水平方向の空間的な分布または身体の所有権と代理店は、単峰性分布を示しました。それらのピークは、参加者の右手は、ほぼミラーリング手画像と同じ位置にあった起源でした。これとは対照的に、制御文のスコアのための空間分布はほぼ横ばいと-1の下にありました。 ANOVAは、参加者がアンケート(水平に示されているカテゴリと位置についての主効果を明らかにした双方向の反復測定:カテゴリ:F(3,27)= 11.12、P <0.001;ポジション:F(6,54) = 10.27、P <0.001;垂直:カテゴリー:F(3,27)= 24.21、P <0.001、ポジション:F(6,54)= 7.298、P <0.001)。カテゴリと位置の間の相互作用もあった重要な(水平:F(18162)= 9.42、P <0.001;垂直:F(18162)= 8.00、P <0.001)。これらの結果は、参加者の現実の間のオフセット空間は右手を隠さミラー化手の画像が増加したときに所有権と代理店の感覚が減少したことを示唆しています。 FIでグレ6、所有権と代理店の感覚のための固有受容ドリフトやアンケート結果の可視化との比較は、これらの現象を維持するために、オフセット領域が同心であり、ほぼ重なっていることを示しています。
図1:セットアップの概要は、実験参加者の手の位置のいずれかのためにミラーや黒板、椅子、応答装置(フットペダル)、および記録装置を保持するスタンドを備えています。トップ図は、参加者が彼/彼女の左手の鏡像を見ることができる方向からのセットアップの概略図を示します。下の図は、ミラーの裏側の図を示している。 この図の拡大版をご覧になるにはこちらをクリックしてください。
キープtogether.withinページ
図2:データ解析フロー (A)参加者の応答と右の手の位置の例。 (B)SVMにより推定され、「はい」応答モデルの模式図。 (C)の境界線分析の結果。 (D)参加者全体の平均エリア。 この図の拡大版をご覧になるにはこちらをクリックしてください。
図3:ビジュアルフィードバック付きとなしの条件との間の領域の形や大きさの比較領域の形状の(A)の比較。グラフの原点を左側の位置、すなわち、MIの位置であります視覚フィードバック条件に手画像をrrored。縦軸、横軸は、手の固有受容フィードバックとして参加者の右手の位置を示しています。 (B)領域の大きさの比較。縦軸は、参加者が左右の手の位置との間の空間オフセットを検出することができなかった領域の大きさを示しています。 (:視覚的なフィードバックと、左:右視覚フィードバックなし)、横軸は、視覚的なフィードバックとしてミラーリングされた手の画像を伴うまたは伴わない状態が示している。 この図の拡大版をご覧になるにはこちらをクリックしてください。
図4:個人データのほとんどの参加者については、ミラー状態の境界線の形状は、黒板の状態に比べて大きかったです。これは、可視化の方法が使用していることを示唆していますSVMは、鏡の中の身体イメージによる視覚捕獲の効果を示すことに成功しました。これとは対照的に、参加者D、H、およびJのために、条件を横切るいくつかの違いが視覚捕獲の効果については個人差があるかもしれないことを示す、ありました。 この図の拡大版をご覧になるにはこちらをクリックしてください。
図5:アンケート結果の縦軸に沿ったアンケートスコアの(A)の空間分布。 (B)、横軸に沿ったアンケートスコアの空間分布。所有権と代理店のスコアは、垂直方向と水平方向の位置に原点相対で最も高かった。 PLEASEこの図の拡大版をご覧になるにはこちらをクリックしてください。
図6:分類とアンケートとの比較水平軸に沿って所有権や代理店のためのアンケートスコアの(A)の空間分布。 (B)の縦軸に沿って所有権や代理店のためのアンケートスコアの空間分布。 (C)見積参加者はミラーリングされた手の画像と隠さ本当の右手との間のオフセットを検出できなかったエリア。 この図の拡大版をご覧になるにはこちらをクリックしてください。
カテゴリー | |
所有 | 私はlookiたかのように1.私は感じました自分の右手でngの。 |
2.私は、鏡の中の手が私の体の一部であったかのように感じました。 | |
私は鏡の中の手が移動した場所で私の右手の動きを感知しているかのように3.それは見えました。 | |
4.私は鏡の中の手が私の手だったかのように感じました。 | |
所有 コントロール | 5.私は私の本当の右手は鏡に手に回したかのように感じました。 |
私は複数の右手を持っていたかのように6.それは見えました。 | |
鏡の中の手が私の本当の手に向かって漂流しているかのよう7.それは現れました。 | |
私の右手は消失していたかのように私は、もはや右手を持っていたかのように8.それは感じませんでした。 | |
代理店 | 9.鏡の中の手が、それは私の意志に従うしているかのように私は、に私の右手を望んでいただけのように移動しました。 |
10.私は私の右手のそれを支配するように私は鏡に手の動きを制御していたかのように私は感じました。 | |
11.私は私の右の手のように見て、手で作成された動きを引き起こしていたかのように私は感じました。 | |
私は私の右手を移動12.たびに、私は同じように移動するように鏡に手を期待しました。 | |
代理店 コントロール | 13.鏡の中の手が私の意志を制御していたかのように私は感じました。 |
14.鏡の中の手が私の動きを制御していたかのように私は感じました。 | |
15.私はどこかに私の本当の右手と鏡の中の手の間から動きを感知することができます。 | |
鏡の中の手が、自身の意志を持っていたかのように16.それは見えました。 |
表1:アンケートの4つに分類16文から成るこのアンケートは、適応とゴムの手の錯覚実験10,13で使用されるアンケートから日本語に翻訳しました。
補足ファイル。 SVMを用いた解析手法のためのサンプルコードとデータセット。このコードは、R(バージョン3.1.2)を用いて実施し、現在の紙と同様の分析を行うことができます。 このファイルをダウンロードするにはこちらをクリックしてください。
私たちは、SVMを使用してミラー錯覚の間に2次元平面内で固有受容ドリフトを推定すると、所有権と代理店の感覚のためのアンケートの回答と結果を比較する方法を示しています。この新規な方法は、固有受容性ドリフトが約10cmであり、これは密接にオフセット所有権や代理店の感覚を維持するために必要なオフセットと重なっていることを維持するために、視覚と固有受容フィードバックとの間のオフセットを必要とすることを明らかにしました。
彼らの注意について参加者に指示、この方法の最も重要なステップは、3.2.5で説明されていることに注意してください。参加者が主観的に、彼らは自分の体にもっと注意を払っていることを報告したときに、以前のパイロット研究16では、ミラーリングされた手の画像による視覚捕獲の効果はほとんど認められませんでした。注意がこの現象に寄与するかどうかはまだ不明です。注意と当事者意識と代理店との関係はめったにありません制御したり、参加者の関心を測定するための難しさに起因して議論されて。我々の知る限りでは、直接所有権の感覚に注意の効果を調べた唯一の研究で22あります。注意を制御し、測定する方法についての複雑な議論を避けるために、参加者の関心についての慎重な命令が必要です。
他の重要なポイントは、参加者が自己受容ドリフトを測定セッション中に、自分の意志で次の試行のための手の位置を選択することができるということです。伝統的な精神物理学では、参加者の行動の自由度が制限され、実験は、より堅牢で再現するように制御される傾向があります。例えば、ゴムの手の錯覚パラダイム10-13を使用して、所有権と代理店の固有受容ドリフトとセンスを測定する実験では、参加者の手の位置のサンプリングポイントは、3つの方向のうちの1つに沿って事前に定義されました多次元データを測定し、可視化の困難を回避するために、このような高さ、幅、または深さなどの、。アンケートは、カテゴリー( 例えば 、所有者、代理店、および制御文)の数による各サンプリングポイントの時間がかかるため、特に、サンプリング点の数は、人間の行動を記録する方法と比較して、より限定されています。この方法では、他の研究との整合性を確保するために、アンケートを使用して所有し、機関のセンスの測定は、限定されるものと同様に前置しました。設計および実験条件でこれらの制限を含むことにより、正確かつ再現実験条件を制御することが可能であるため、参加者の行動に関連するこの制限は、所有権と代理店の感覚の脳のメカニズムを探求する基礎研究のために重要ではありません。しかし、工学およびリハビリテーションにおける当事者意識と機関のための潜在的な用途を考慮すると、この制限日常生活の条件の下で3Dで人間の行動を推定することが重要になる場合があります。参加者は自分の手を動かし、より自由にその位置を選択することができますこのような状況下では、伝統的な心理物理学的方法を使用して、固有受容ドリフトを推定することは困難です。この問題を克服するために、SVM、機械学習のタイプは、固有受容ドリフトの推定及び可視化のために採用されました。この技術は、自由に選択して、参加者の反応と2Dでの手の位置を含む多次元データなど大量のデータを収集し、分析することができます。参加者は左手の鏡像と隠された実際の右手との間の距離に気付かなかった場合にこの技術を使用して、さまざまな手の位置でサンプリングし、参加者の応答が分類し、面積を分析しました。
この方法は、参加者全体で固有受容ドリフトを示す平均面積は現在INDIV表示されないことがある重大な制約があり、idual違い。これは、2D表面上の3次元データ以上のものを表示するために起因する可視化手法の制限にあります。固有受容ドリフトを示す平均面積についてのデータは、二次元位置データ、参加者の応答の確率、及び個体差を含むであろう。個人差を含めるには、4次元データを表示することができます可視化方法が必要とされるであろう。
この方法の今後の方向性は、2Dから3Dへの寸法を拡大し、一時的特徴を含むことです。まだ以上の3次元データのための可視化方法でいくつかの困難がありますが、追加のディメンションを持つこれらの拡張は、脳がそのようなビジョンと固有感覚のような複数のモダリティからの多感覚情報を処理する方法を理解するのに役立ちます。この拡張を実現するために、さらなる研究が必要です。
アプリケーションの観点からは、この方法は、縁起を助けることができますこのようなロボット、手術用ロボットシステム、および仮想現実システムなどのリアルタイム制御システム用制御の設計使いやすさや感情を戦略的にするneers。これらのシステムでは、運転中のユーザの感覚は、多くの場合、アンケート事後によって推定されます。したがって、システムのプロトタイプを作成する場合の動作中に、ユーザの感覚を実現するために困難です。私たちは、所有権や代理店の感覚を維持するための多感覚フィードバック間の時空間的矛盾の限界を明らかにすることができれば、それはオペレータが制御する自己身体のような使いやすさを、維持するために、マシンのシステムからの多感覚フィードバックに関するルールを提供するために役立つだろう彼らは自分の体をコントロールするかのようなシステム。この方法は、所有権と代理店の感覚を維持するために、視覚と固有受容フィードバックとの間の空間オフセットを明らかにする。この結果に基づいて、ミラーリングされた手の画像に向かって参加者の感情を操作することによって制御することができます手画像と隠れ本物の手の間の距離。様々なアクションから多感覚フィードバックを横切る時空間的関係を変更することは戦略的に操作中に、ユーザーの感情を制御するための最初のステップとなります。
このアイデアは、エンジニアリングのためにもリハビリテーションのためだけでなく、採用することができます。いくつかの研究努力が不足しているか、麻痺肢を持つ人々に運動機能と痛みを改善することを目的としています。患者が日常生活の中で機能を回復するための伝統的なリハビリテーションのメインテーマであるためしかし、この研究のほとんどは、欠落または麻痺肢で患者の気持ちを向上させることに成功しました。患者の生活の質への影響を考えると、彼らの感覚の改善が欠落しているか麻痺肢との生活のために重要です。この方法は、患者のSUとの間のオフセットを測定することにより、欠落や麻痺肢で所有権と代理店の意味についての定量的な推定を提供することができますbjective四肢の位置と実際のまたは可視手足の位置。これは、定量的に手足の患者さんの気持ちを推定するために理学療法士に役立つだろう。
結論として、本論文では、正中矢状面に沿って固有受容ドリフトを維持するために、視覚と固有受容フィードバックとの間の空間オフセットを可視化する新規な方法を提供します。この方法15を使用して、以前の研究に基づいて、空間的には、参加者は約10cmに拡張を検出することができなかったことを相殺しました。また、この値は、参加者が鏡の中の手の画像の所有者と代理店の感覚を感じる範囲と一致します。これらの知見は、さらに感覚情報のマルチモダリティの観点から、所有権と代理店の感覚の根底にあるメカニズムを調査するのに役立ちます。また、この方法は、定量indicatoとして、欠落または麻痺肢のリハビリテーションのためのリアルタイム制御システムの設計のためのツールを提供することができrは、自己の体のような感覚や使い勝手を維持するために、視覚と固有受容フィードバックとの間の空間オフセットを示しています。このようにして、機械学習などの計算技術の開発が原因で、従来の統計的な制限のために、以前は不可能であった推定及び可視化の方法を構築することができます。計量進歩のこのタイプは、より自然な状況で自己の感覚を生産する人間の行動と脳のメカニズムを明らかにすることができます。
The authors declare that they have no competing financial interest.
This research was supported by the Center of Innovation Program from the Japan Science and Technology Agency, JST.
Name | Company | Catalog Number | Comments |
Acric mirror | |||
Matte blackboard | |||
custom-made stand | e.g. wood pole or PVC(poly vinyl chloride) pipe | ||
Chair | |||
Foot pedal | P.I. Engineering | Classic X-keys USB, and PS/2 Foot Pedals | Other response device can be avaliable. |
Position sensor | CyVerse | SLC-C02 | Other position sensor can be avaliable. |
Custom-made retroreflectivemarker | The marker provided by the motion capture vendor can be available. | ||
Noise canselling head phone | bose | Quiet Comfort 3 | Other head phone can be avaliable. |
PC | Mouse computer | NG-N-i300GA | Other PC can be available. |
このJoVE論文のテキスト又は図を再利用するための許可を申請します
許可を申請This article has been published
Video Coming Soon
Copyright © 2023 MyJoVE Corporation. All rights reserved