KI rekonstruiert Bilder direkt aus Gehirnscans

Brain-IT ist ein neues KI-Werkzeug israelischer Wissenschaftler, das Bilder, die eine Person betrachtet, aus Hirnscans rekonstruiert. Es fasst winzige Scanpunkte in 128 Cluster zusammen und skizziert dann ein grobes Layout, bevor es Bedeutung hinzufügt, ähnlich wie beim Malen. Es könnte Patienten helfen, die nicht sprechen können, ihre Bedürfnisse mitzuteilen. Es wirft auch Datenschutzbedenken auf, auch wenn es nur Bilder verarbeitet, die gerade betrachtet werden, und nicht jeden Gedanken. Neugierig, wie das zusammenpasst? Weitere Details folgen unten.

Wie rekonstruiert Brain-IT Bilder aus fMRT-Scans?

Stellen Sie sich Brain-IT als einen sorgfältigen Übersetzer für das Gehirn vor. Es nimmt unsaubere Scandaten und verwandelt sie in ein Bild.

Das Rauschen reduzieren

Zuerst gruppiert das System etwa 40.000 Voxel, winzige Einheiten der Gehirnaktivität, in 128 Cluster. Jeder Cluster wird zu einem "Gehirn-Token”. Das verbessert die Signalklarheit und ermöglicht es, dass ein Design für viele Personen passt.

Layout und Bedeutung vorhersagen

Als Nächstes untersuchen zwei Zweige diese Tokens. Einer erfasst die Bedeutung, zum Beispiel welche Objekte vorkommen. Der andere erfasst die Struktur, zum Beispiel wo sich Dinge befinden.

Das Bild erstellen

Ein Diffusionsmodell, ein Bildgenerator, beginnt mit dem groben Layout. Anschließend fügt es die Bedeutung hinzu, wie beim Skizzieren vor dem Malen. Da das Design Cluster über mehrere Personen hinweg teilt, verbessert sich die Skalierbarkeit des Trainings, und eine neue Person benötigt etwa eine Stunde Scanzeit. In Tests übertrifft die Methode die aktuellen Spitzenansätze bei Standardmetriken und in der visuellen Qualität.

Was könnte Brain-IT für Patienten und die Wissenschaft leisten?

Viele Menschen, die weder sprechen noch sich bewegen können, könnten eines Tages von Werkzeugen wie Brain-IT profitieren.

Eine Stimme ohne Worte

Menschen mit Locked-in-Syndrom könnten eine neue Möglichkeit erhalten, Entscheidungen, Bedürfnisse und Erfahrungen mitzuteilen, wenn andere Hilfsmittel versagen. Bilder können reichhaltigere Botschaften vermitteln als ein einfaches Ja- oder Nein-Signal.

Hilfe bei der Genesung

Brain-Computer-Systeme helfen Schlaganfallüberlebenden bereits dabei, ihre Bewegungsfähigkeit zurückzugewinnen, indem sie die Absicht mit Rückmeldung verknüpfen. Manche Fortschritte halten wochenlang an. Das deutet auf ein echtes Potenzial für die Neurorehabilitation hin.

Erkenntnisse für die Wissenschaft

Forschende könnten außerdem untersuchen, wie das Gehirn das aufbaut, was wir sehen, uns merken und uns vorstellen. Bessere Modelle liefern Wissenschaftlern messbare Hinweise auf die Wahrnehmung.

Der Weg nach vorn

Fachleute bezeichnen die Brain-Computer-Technologie als vielversprechend, aber noch am Anfang. Zuerst muss eine sorgfältige klinische Umsetzung erfolgen, damit die neu gewonnene Freiheit sicher und nicht überstürzt kommt.

Gefährdet Brain-IT die mentale Privatsphäre?

Brain-IT wirft tatsächlich ernsthafte Fragen zum Schutz der mentalen Privatsphäre auf, auch wenn das Risiko etwas anders aussieht, als es die Schlagzeilen vermuten lassen.

Das System rekonstruiert Bilder, die eine Person gerade betrachtet. Es liest nicht jeden Gedanken. Es wurde mit Daten von nur acht Personen aus dem Natural Scenes Dataset trainiert und kann daher nicht einfach auf das Gehirn einer beliebigen Person gerichtet werden. Dennoch sind selbst teilweise Vermutungen über Ihre Gesundheit oder Ihre Gefühle von Bedeutung, denn Ihr Geist sollte Ihnen allein gehören.