Небольшой комментарий в связи с новостью об интересе Илона Маска к нейроинтерфейсному стартапу Синхрон
(Предупреждение: здесь в основном повторяется то, о чем уже читали в разное время подписчики нашего канала).
Эндоваскулярная технология, которую разрабатывает Синхрон, действительно перспективна, и ею уже успешно пользуются четверо парализованных австралийцев. Ее крупный плюс в том, что электроды подводятся в мозг через сосуды -- это намного менее травматичная процедура, чем та, которую планирует использовать Нейралинк -- компания, созданная самим Маском. Но расположение электродов в сосудах неизбежно ведет и к значительно более низкой эффективности работы интерфейса. Из четырех австралийских пациентов лишь один обходится одним лишь ИМК, тогда как трем другим приходится использовать также айтрекер (устройство для отслеживания взгляда). (Прямо скажем, это не совсем то, о чем мечтает Маск: напомним, недавно он подтвердил, что the idea behind Neuralink ... is to try to more tightly couple collective human world to digital superintelligence).
При этом айтрекер играет даже более важную роль: он служит для указания взглядом позиций на экране, по которым можно "кликать", а с помощью ИМК лишь осуществляется сам "клик" -- который можно делать и без ИМК, обычно для этого используется задержка взгляда на выбранной позиции. Такую полностью неинвазивную технологию уже давно используют тысячи парализованных людей.
Ее недостатки связаны, прежде всего, с тем, что задержку взгляда для "клика" легко перепутать с задержкой по всевозможным другим причинам, и ИМК Синхрона позволяет обойти эту проблему. Однако то же можно делать и с помощью полностью неинвазивных ИМК -- как, например, сделали Hou et al. (2020). Электроды Синхрона можно поместить гораздо ближе к нейронам, чем ЭЭГ-электроды, используемые в неинвазивных ИМК, однако те можно легко поместить в любом месте скальпа и в гораздо бОльшем количестве. Так что пока неясно, сможет ли эндоваскулярный ИМК дать пользователям критические преимущества.
И еще остается возможность неинвазивно усилить айтрекинговое управление ("глазоуправление") без не очень хорошо сочетающихся с ним моторных команд, к которым чувствителен ИМК (попытки совершения движения ногами у Синхрона и воображение движений рук у Hou et al. и в ряда других экспериментальных гибридов ИМК+айтрекер). А именно, можно попытаться на лету выявлять намеренные задержки взгляда, используя неинвазивный "пассивный" ИМК -- это то, чему посвящен один из наших текущих проектов, поддержанных РНФ.
Hou BJ, Bekgaard P, MacKenzie S, Hansen JP, Puthusserypady S. Gimis: Gaze input with motor imagery selection. ACM Symposium on Eye Tracking Research and Applications 2020 Jun 2, Article 18, 1–10. https://doi.org/10.1145/3379157.3388932
(Предупреждение: здесь в основном повторяется то, о чем уже читали в разное время подписчики нашего канала).
Эндоваскулярная технология, которую разрабатывает Синхрон, действительно перспективна, и ею уже успешно пользуются четверо парализованных австралийцев. Ее крупный плюс в том, что электроды подводятся в мозг через сосуды -- это намного менее травматичная процедура, чем та, которую планирует использовать Нейралинк -- компания, созданная самим Маском. Но расположение электродов в сосудах неизбежно ведет и к значительно более низкой эффективности работы интерфейса. Из четырех австралийских пациентов лишь один обходится одним лишь ИМК, тогда как трем другим приходится использовать также айтрекер (устройство для отслеживания взгляда). (Прямо скажем, это не совсем то, о чем мечтает Маск: напомним, недавно он подтвердил, что the idea behind Neuralink ... is to try to more tightly couple collective human world to digital superintelligence).
При этом айтрекер играет даже более важную роль: он служит для указания взглядом позиций на экране, по которым можно "кликать", а с помощью ИМК лишь осуществляется сам "клик" -- который можно делать и без ИМК, обычно для этого используется задержка взгляда на выбранной позиции. Такую полностью неинвазивную технологию уже давно используют тысячи парализованных людей.
Ее недостатки связаны, прежде всего, с тем, что задержку взгляда для "клика" легко перепутать с задержкой по всевозможным другим причинам, и ИМК Синхрона позволяет обойти эту проблему. Однако то же можно делать и с помощью полностью неинвазивных ИМК -- как, например, сделали Hou et al. (2020). Электроды Синхрона можно поместить гораздо ближе к нейронам, чем ЭЭГ-электроды, используемые в неинвазивных ИМК, однако те можно легко поместить в любом месте скальпа и в гораздо бОльшем количестве. Так что пока неясно, сможет ли эндоваскулярный ИМК дать пользователям критические преимущества.
И еще остается возможность неинвазивно усилить айтрекинговое управление ("глазоуправление") без не очень хорошо сочетающихся с ним моторных команд, к которым чувствителен ИМК (попытки совершения движения ногами у Синхрона и воображение движений рук у Hou et al. и в ряда других экспериментальных гибридов ИМК+айтрекер). А именно, можно попытаться на лету выявлять намеренные задержки взгляда, используя неинвазивный "пассивный" ИМК -- это то, чему посвящен один из наших текущих проектов, поддержанных РНФ.
Hou BJ, Bekgaard P, MacKenzie S, Hansen JP, Puthusserypady S. Gimis: Gaze input with motor imagery selection. ACM Symposium on Eye Tracking Research and Applications 2020 Jun 2, Article 18, 1–10. https://doi.org/10.1145/3379157.3388932