Brad Smith powiedział, że jego decyzja o podłączeniu kamery internetowej do komputera, którym steruje umysłem, nie miała sensu dla pracowników Neuralink, firmy Elona Muska zajmującej się interfejsem mózg-komputer.
„Neuralink był naprawdę zdezorientowany tym pomysłem” – powiedział Smith Krawędź.
Decyzja zapadła zaledwie sześć miesięcy po wszczepieniu BCI do mózgu Smitha w listopadzie 2024 r., co uczyniło go trzecią osobą, która otrzymała urządzenie Neuralink. Smith był pierwszym pacjentem Neuralink ze stwardnieniem zanikowym bocznym (ALS), które od siedmiu lat powoduje osłabienie mięśni. Chociaż BCI z powodzeniem zastąpił jego oprogramowanie do śledzenia wzroku jako podstawowy sposób kontrolowania kursora na laptopie, szybko stało się jasne, że użyteczność tego narzędzia będzie sprowadzać się do tego, co Smith będzie w stanie z niego zrobić. Używanie umysłu do kontrolowania kursora świetnie nadaje się do szybszej komunikacji i surfowania po Internecie, stwierdził. Ale byłoby jeszcze lepiej, gdyby mógł za jego pomocą śledzić syna biegnącego po boisku piłkarskim.
Neuralink mógł nie rozumieć, dlaczego Smith chciał peryskop, ale poszedł dalej i samodzielnie zbadał ten pomysł. Wylądował na prostej kamerze internetowej Insta360 Link 2 – lepiej znanej jako kamera konferencyjna, a nie urządzenie medyczne. „Po prostu nie wiedzieli, dlaczego tego chciałem, ponieważ nie wiedzą, czego doświadczam, ale dlatego tu jestem” – powiedział Smith Krawędź. (Neuralink nie odpowiedział na prośby o komentarz.)
To niesamowity hack, powiedział Nathan Copeland, inny użytkownik BCI, i nie jest to zaskakujące posunięcie. BCI to „tylko narzędzie” – powiedział Copeland Krawędź. Od ponad dekady ma BCI od Blackrock Neurotech. W tym celu Copeland użył do tego robotycznego ramienia uderzenie pięścią byłego prezydenta Baracka Obamę I uścisnąć dłoń Korespondent ABC Will Reeve. Jednak jego codzienne życie, podobnie jak Smitha, nadal jest „miszmaszem” oprogramowania i technologii. Copeland przez cały dzień rozmawia na głos ze swoim Google Home, aby przyciemnić światło lub włączyć telewizor. Do grania w gry wideo wykorzystuje wykonany na zamówienie kontroler z dużymi przyciskami i joystickiem oraz przełącznik sterowany podmuchami powietrza. (Ma kontuzję rdzenia kręgowego, która pozbawiła go częściowej kontroli nad ramionami, bicepsami i nadgarstkami.)
„Gość, którego poznałem na forum, zrobił mi taki, używając części do gier arcade, rozbierając prawdziwy kontroler Xbox i lutując przewody i tak dalej” – powiedział Copeland. „[The BCI] daje ludziom trochę więcej swobody [who] nie możesz używać normalnych sposobów robienia różnych rzeczy, ale wciąż musisz znaleźć oprogramowanie i sprzęt, rzeczy, których możesz z nimi używać, aby nadal dostosowywać się do świata”.
BCI, takie jak Neuralink Smitha, działają poprzez rejestrowanie rozmów między neuronami mózgu. Neurony uwalniają jony, aby przekazywać sobie informacje; można to zmierzyć jako zmiany napięcia z elektrod wszczepionych w pobliżu tkanki mózgowej. Kiedy Smith myśli o poruszeniu ręką, neurony „mówią”, a małe impulsy sygnałów elektrycznych przesyłają się z elektrod w jego mózgu do ekranu laptopa umieszczonego przed jego twarzą. Myśli i jego kursor się porusza.
BCI zastąpiło oprogramowanie Smitha do śledzenia wzroku o nazwie Eyegaze, które zamieniało jego linię oczu w ruchy kursora komputerowego za pomocą kamery na podczerwień zamontowanej nad ekranem komputera. Jest to technologia męcząca i nie działa w świetle słonecznym, co oznacza, że nadaje się wyłącznie do użytku w pomieszczeniach zamkniętych. Opanowanie nowego kursora sterowanego myślami zajęło Smithowi kilka dni. Smith porównał to do poruszania myszą komputerową i zapominania, że w ogóle porusza się ręką i ramieniem.
Używając sterowanego umysłem kursora, Smith pokazał Krawędź jak działa jego konfiguracja wzroku. Po podłączeniu kamery internetowej do laptopa może klikać przyciski interfejsu kamery, aby przesuwać obraz oraz przybliżać i oddalać obraz. Podczas rozmowy wideo udostępnił obraz z kamery internetowej, przybliżając zdjęcie swoje i Tiffany zrobione w dniu ich ślubu.
Smith powiedział, że po tym, jak Smith wyszukał najlepszą kamerę internetową dla swojej konfiguracji BCI, Neuralink kupił ją i wymyślił, jak zamontować ją na wózku inwalidzkim i komputerze. “Byli bardzo pomocni w testowaniu różnych konfiguracji dla przyszłych użytkowników. Neuralink stara się ułatwić ludziom korzystanie z systemu, a oni uwielbiają peryskop. “
Nie codziennie pojawia się kamera. Dzieje się tak na przykład wtedy, gdy wokół niego bawią się dzieci. Lub też, gdy do rodziny dołącza gość na obiedzie, Smith lubi widzieć wyraz twarzy siedzącego na krześle przy stole w jadalni. Ilekroć wychodzi z domu, kamera towarzyszy mu przyczepionemu do wózka inwalidzkiego.
Gdy Smith odpowiada na pytania, obserwuję, jak pisze swoje odpowiedzi w aplikacji do przetwarzania tekstu na mowę Proloquo4Text, litera po literze, a czasem pełnymi słowami przewidywane przez oprogramowanie.
Odpowiedź na pytanie dotyczące jego najbardziej typowego zastosowania zajęła mu minutę i 17 sekund: „Myślę, że używam go do rozmów z ludźmi osobiście lub przez telefon”. Dodaje, że wykorzystuje go również do przeglądania Internetu.
Jego kursor szybko poruszał się po ekranie; czasami sprawiał wrażenie roztrzęsionego. Tiffany stwierdziła, że „jego mózg pracuje i pracuje”, co oznacza, że jego kursor także. Smith pokazał, jak blokuje swój nadpobudliwy kursor w prawym dolnym rogu ekranu w wyznaczonym „miejscu parkingowym”.
W maju Smith nawiązał współpracę z Insta360, firmą znaną z kamer akcji i obrotowych kamer internetowych, takich jak Link 2. Firma dostosowała panel sterowania Link 2, aby spełnić wymagania Smitha, aby kamera obracaj się szybciej i dalej z każdym kliknięciem. Aparat pozostał ten sam, ale każde kliknięcie na specjalnie zbudowanym panelu sterowania przesuwało kamerę trzy razy szybciej, do około 15 stopni na sekundę. Drugi niestandardowy panel sterowania dał Smithowi możliwość obrotu aparatu o 0,5 stopnia.
Przed kamerą konferencji, przed BCI, był dzwonek i inne codzienne hacki, które miały zaspokoić potrzeby coraz bardziej ograniczonej mobilności Smitha. Smith zdecydował się na dzwonek dla psa za 20 dolarów, taki, który umieszcza się na wysokości psa obok drzwi, zamiast drogiego przycisku wezwania pielęgniarki. Smith wzmocnił swój głos, gdy słabł, za pomocą mikrofonu, dzięki któremu poczuł się jak Backstreet Boy. Użył opaski na telefon dla biegacza, aby przymocować telefon do górnej części uda, w idealnym miejscu pod dłonią, tak aby mógł przesuwać palcami po ekranie. Teraz programuje często używane zwroty i ulubione cytaty filmowe w swoim oprogramowaniu do zamiany tekstu na mowę, dzięki czemu może uczestniczyć w toczących się wokół niego szybko toczących się rozmowach.
„Wiele normalnych rzeczy jest przydatnych dla osób niepełnosprawnych” – powiedział Smith. Zapytany, czy uważa się za osobę innowacyjną, Smith odmówił. „Po prostu myślę o tym, jak rozwiązać problem” – powiedział żartując – „a Tiffany jest tani”.
Niepełnosprawność odkrywa kreatywność, powiedział w wywiadzie były użytkownik BCI, Ian Burkhart Krawędź. Osoby niepełnosprawne są „zmuszone do wprowadzenia zmian i znalezienia rozwiązań ułatwiających poruszanie się w życiu” – stwierdził Burkhart. Jest sparaliżowany od klatki piersiowej w dół na skutek urazu rdzenia kręgowego szyi po wypadku samochodowym w 2010 roku.
W przeciwieństwie do Smitha, który korzysta z Neuralink BCI w domu, Burkhart zetknął się z technologią BCI w laboratorium badawczym. W latach 2014–2021 Burkhart brał udział w badaniu klinicznym na Uniwersytecie Stanowym Ohio z najdłużej działającą firmą BCI, Blackrock Neurotech. On założył i prowadzi grupa wsparcia i wsparcia pacjentów BCI zwana Koalicja Pionierów BCI.
Ten Smith jest równy zdolny znalezienie sposobów na ulepszenie codziennych doświadczeń z BCI jest dla Burkharta najbardziej ekscytującą częścią historii Smitha. „Osobiście jestem niezwykle podekscytowany faktem, że coraz więcej osób może korzystać z BCI, szczególnie w swoim codziennym życiu”.
Kontrast pomiędzy kamerą internetową a urządzeniem Neuralink wydaje się Burkhartowi kolejnym przykładem rzadkości „świetnych rozwiązań”. „Użytkownicy są zmuszeni łączyć ze sobą elementy, które być może początkowo nie zostały zaprojektowane do współpracy, ale mogą dla nich działać” – powiedział. Burkhart stwierdził, że użytkownicy BCI powinni współpracować z badaczami na wcześniejszym etapie procesu projektowania.
Smith szeroko mówił o korzyściach płynących z BCI Krawędź. Przepowiada przyszłość, „w której BCI płynnie łączy się z gadżetami”, takimi jak inteligentne urządzenia domowe czy ramiona robotyczne. Jego marzenia obejmują kontrolowanie za pomocą myśli wózka inwalidzkiego, z którego korzysta w pełnym wymiarze godzin, gdy nie leży w łóżku.
„W szerszej perspektywie otwiera to drzwi wszystkim pacjentom z ALS, aby mogli pozostać produktywni, towarzyscy i pełni nadziei” – powiedział Smith. “To nie tylko technologia. To ponowne humanizowanie nas, oddawanie sprawstwa w świecie, w którym nasze ciała zawodzą. Jestem podekscytowany.”