Интерфейс, который покорит многих

от автора

– Любая, достаточно развитая технология неотличима от магии.

Привет друзья! Меня зовут… да кого я обманываю всем по-фигу как меня там зовут. Я хочу предложить идею интерфейса нового поколения. Не смотря на то, что имплементация его мне не кажется сложной (все инструменты и знания у меня есть). Но вот возможность…. до сих пор не появилась. То свадьба, семья и дети, то СВО, мобилизация и война. … а сейчас, а сейчас я так вообще лежу раненый в госпитале без левой руки. И знаете что? Я возненавидел эти чертовы сенсорные экраны.

Сенсорный экран – это тупиковая ветвь. Ну серьезно. Вам не надоело? Кушаешь жирную курицу и тут звонок, нужно ответить, и по экрану его, а потом к уху… он падает. Удобно? а то! И ухо жирное и телефон на полу. Или сидишь в туалете и вытираешь то самое… Ну вы поняли. Некоторые скажут: «ну не бери телефон с собой в туалет. Заодно не уронишь его в дырку». А я вот ронял (. И на кухню не бери, ежели ты такой чухан. Ну нафиг такое управление вообще? Это был риторический вопрос.

Ах это подлая тема: куда не тыкнешь толстым пальцем в экран и ты на что-то уже нажал или уже на что-то подписался, а то и вовсе купил.

Кто-то съерничает: меньше тыкай в экран членом, дрочер, и таких проблем не возникнет. Не спорю, но проблема есть.

Кое кто мечтает об экранах парящих в воздухе с управлением руками естественными жестами. Я таким мечтателям посоветую повесить шторы хотя бы раз в жизни. Кто вешал, тот поймет.

Очень крутая концепция нейроинтерфейса представлена в серии игр «Horizon». Но помахайте-ка так весь день.

Очень крутая концепция нейроинтерфейса представлена в серии игр «Horizon». Но помахайте-ка так весь день.

В общем, чего тянуть кота за яйца. Мой ответ – неинвазивный нейроинтерфейс для управления мыслями любыми устройствами. Но нет.. не сложная попытка угадать о чём там думает кожаный, а сделать все гораздо изящнее и проще — научиться угадывать намерения пользователя и преобразовывать это в ограниченный набор команд. Сейчас есть девайсы которые улавливают активность мозга и раскладывают все это на альфа волны и прочую лабуду. Это, конечно, не позволит прочитать ваши мысли. Но косвенно предположить, о чем вы подумали – сможет. Тут нужны подопытные и куча экспериментов. Я не утверждаю, что будет легко….

Но появится хотя бы один прототип готового продукта (или PoC), появятся устройства, которые более тонко слушают ваш мозг. За Apple не заржавеет.

ИДЕЯ

Читаем гарнитурой ЭЭГ мозга — распознаем патерн мозговой активности как одну из 4х команд — передаём сопряженному по bluetooth устройству команду как это делает HID-совместимое устройство (можно транслировать , прикинувшись клавиатурой).

МЕЧТА

Вы надеваете беспроводные наушники Apple или обруч Muse. Представляете некие образы которые трансформируется в конкретные команды для сопряженного по Bluetooth устройства, коим может быть не только телефон, но и телевизор, робот-пылесос (да хоть отдельные элементы умного дома). Представили красную кнопку play из YouTube. И включился просмотр фильма, белый квадрат на черном фоне – и устройство остановило операцию, робот-пылесос замер/ушел на парковку, представили круг и переключили канал/громкость на ТВ не вставая с дивана. Кто то скажет: «Если я даже за пультом от телевизора не буду вставать, я тогда вообще в бочку превращусь. Вы, батенька, злой и идеи у вас злые». Ну тут вы, сударь, путаете лень с доступностью. Я не хочу лежать на диване и жиреть. Я хочу иметь возможность не вставать, когда у меня нет сил встать.

Пульт — это круто, пока вы можете его поднять. А если не можете? Если он упал на пол, а вы парализованный на койке и вам 70 лет? Или «тыж-мать» и у тебя обе руки заняты ребёнком? А может вы просто в перчатках зимой на улице?

Сейчас все прутся по идее умного дома, моя идея может изменить акцент.

Умный дом сейчас:

Купил китайский WiFi-патрон для лампочки. Он цепляется к облаку в Китае. Ты говоришь «Алиса, включи свет». Алиса лезет в облако. Облако возвращает к WiFi-роутеру. Патрон отрабатывает. Свет включается через секунды. И всё это время твой голос и график твоего сна лежат на сервере в Шэньчжэне. Удобно? Ну так себе схема.. Да и как-то тревожно: а вдруг хакер из Китая решит поморгать вашими лампочками по-приколу?

Я предлагаю слегка иной сценарий:

Ты просто представил красный треугольник. AirPods Neuro уловили паттерн. Отправили команду по Bluetooth подобному патрону лампочки. Свет зажёгся мгновенно. Без облаков, без задержек, без подслушивания. Это приватный, безопасный и довольно быстрый способ управлять домом. И главное —для работы такого патрона не нужна Алиса, не нужен Wi-Fi роутер, не нужен доступ в Интернет. Только ты и твоя мысль.

ЦЕЛЬ

Заинтересовать Тебя, читатель. Тот кто первый выстрелит с этой идеей, тот захватит рынок. Это как изобретение мышки. Помните как она сразу же вытеснила убогие трекболы? Хотя базовый принцип тогда почти не изменился разве что колесо перевернулось вниз. Дерзайте. А то я погибну, так и не реализовав эту идею.

ДОРОЖНАЯ КАРТА

Если ты грамотный инженер и не боишься трудностей (знаешь C++, Python, Tensorflow):

1. Купи устройство ЭЭГ Muse + SDK (до 300 баксов) –  это гарнитура,  дополнительно возьми приёмник Bluetooth для ПК ибо он будет первым подопытным кроликом.

2. Самостоятельно создай и натренируй нейронку (возможно тут хватит 4-х слойного перцептрона), используя себя в качестве подопытной мыши и добиваясь уверенной детекции каждой из 4-х команд (образ кнопки PLAY для запуска (ENTER) чего либо, образ квадрата для остановки/паузы текущего процесса (забой BS), образ круга для подтверждения (SELECT), и, наконец, образ креста для отмены (ESC). Да, господи, чего я тут переизобретаю джойстик плойки? Тебе и так понятно.  Главная цель: добейся не точного чтения своих мыслей, а уверенного распознавания намерений.

3. Привлеки новых подопытных для проверки работы нейронки (возможно другим людям придётся подстраиваться под её работу, научившись транслировать свои намерения иными образами — это индивидуальный опыт, который стоит исследовать)

4. Напиши для ПК приложение, получающее от гарнитуры команды и ретранслирующее их по Bluetooth на телефон

5. Сделай демонстрационное ПО для ПК, использующее все возможности нейроинтерфейса (например оболочку для видеоплеера, UI которой заточен на управление только 4мя командами)

6. Сделай аналогичное ПО для смартфона. Оно будет демонстрировать самую красивую фазу PoC-проекта (управляться твоими мыслями).

7. Продемонстрируй обществу PoC, показав как ловко ты управляешь видеоплейером лежа на диване (п. 6).

8. Запатентуй, а лучше продай обученную нейронку Apple,  которая доведёт ваш PoC до совершенства, выпустив на рынок новый продукт AirPods Neuro.

И ты:

9. Станешь крутым экспертом по нейроинтерфейсам, будешь ходить с умным видом на конференции,  митапы и прочие хакатоны интеллектуальные тусовки.

10. Попивая пивка будешь думать:  чего бы ещё этакого замутить.

 Кто из вас окажется настолько смелым, чтобы попробовать свои силы в таком проекте?

Почему только 4-е команды?

Чем проще командные символы тем их проще детектировать устройством. Чем меньше их набор, тем проще ими пользоваться. Почему большинство исследователей пока терпит неудачу в подобных проектах? потому что они пытаются прочитать «о чем там думает человек», а эта задача в шумном мозге – гораздо более сложная, чем пытаться угадать состояние человека или его намерения. Уже сейчас ПО обруча Muse умеет менять фоновую музыку на смартфоне, улавливая вашу активность, зуб даю. Т.е. такое возможно. Осталось сделать один шаг подобное преобразовать в команды и прикинуться HID-совместимым девайсом (для универсальности).

Почему именно Apple?

Если Apple возьмётся за нейроинтерфейс — они сделают AirPods Pro Neuralink Ultra, которые вы надеваете как обычные наушники, а внутри — сенсоры ЭЭГ, которые слушают ваш мозг, пока вы слушаете музыку. И через полгода вы даже не вспомните, что когда-то тыкали пальцем в экран.

 

Посмотрите на их разъём MagSafe. Казалось бы — магнит, ну и что? Но они сделали его не просто удобным, они первыми сделали его обалденным. Щелчок — и ты услышал, что подключился. Никакого «а воткнул ли я»? Никакого поиска разъёма в темноте. Это не технология. Это искусство, воплощенное в металле.

 

Или вспомните 2007 год. Все клепали телефоны с кучей кнопок — полноценные клавиатуры, джойстики, стилусы. А они пришли и сказали: «Только экран!». И мир офигел. Они не просто убрали кнопки — они убили целую эпоху тактильности. Но сделали это так красиво, что мы им простили.

Так что если кому и можно доверить развитие проекта — то я предпочту инженера из Apple. А вы?

 

Инженеры Samsung сделают вам мотоциклетный шлем с RGB-подсветкой и кулером для процессора. А Neuralink еще встроит туда иглу, потому что им без трепанации никак. Только Apple способен сделать незаметный ободок или миниатюрные наушники, которые будут просто работать. И вы, купив их, даже не поймёте, почему они стоят 600 долларов – но купите.

Будущая гарнитура глазами Neuralink. А ты бы хотел, чтобы тебе присунули такое?

Будущая гарнитура глазами Neuralink. А ты бы хотел, чтобы тебе присунули такое?

КСТАТИ, О MUSE

Я зашел на их сайт. Посмотрел демки. И знаете что? Они почти подошли к этой идее. Их гарнитура умеет менять музыку на смартфоне в зависимости от вашего состояния — расслаблены вы или сосредоточены. Технологично. Даже красиво. Но примитивно. Это как изобрести колесо и использовать его только как подставку для чашки. Они еще не додумались сделать следующие шаги:

  • Заменить «состояние» на «намерение».

  • Заменить «музыка» на «команда».

  • Заменить «только смартфон» на «любое устройство».

И вот тогда их гарнитура перестанет быть игрушкой для биохакеров и станет пультом управления миром.

Я тут даже рад: они сделали 90% работы за нас. Осталось лишь переосмыслить их же продукт. Как когда-то Apple переосмыслила экран, который уже существовал у других.

Успеете их опередить?

ссылка на оригинал статьи https://habr.com/ru/articles/1060550/