An Spieler: Annäherung an eine Computer-Gehirn-Schnittstelle

[novindbn]

Ich weiche frohen Mutes mit Hochgeschwindigkeit vom Pfad der Gehirnwellenerkennung ab und konzentriere mich auf MotionCapture ohne Marker mit einem Camcorder. Denn an sich ist alles vorhanden: Gesichtserkennung mißt zuverlässig auch die Entfernung des Gesichtes. Jetzt muß das gleiche nur noch mit dem restlichen Körper möglich sein.

Mir ist folgendes zu schwer aber vieleicht bekommst du oder jemand anders hier im Forum es hin: http://luis-unzueta.vndv.com/documen...is_Unzueta.pdf.

Ich habe Luis bereits angesprochen, er meinte, er habe kein Copyright mehr an seiner Forschung, er hat vorgeschlagen, daß ich aufgrund seiner Diplomarbeit das Programm erstelle.

Wie ich es verstehe läßt er den Computer aufgrund der menschlichen Anatomie die Position berechnen.

[johns]

hallo,

http://openeeg.sourceforge.net/doc/index.html

The OpenEEG project is about making plans and software for do-it-yourself EEG devices available for free (as in GPL). It is aimed toward amateurs who would like to experiment with EEG.

da gibts auch einen bausatz von olimex (modular eeg).
aber wie gut das ganze ist weiss ich nicht.

aufjedenfall ist mir auch abseits der bastlergemeinde kein BCI system bekannt welches mehr als ein paar bit information verlässlich aus den per EEG gemesenen strömen extrahieren konnte. und selbst das nur wenn sich der proband so wenig wie möglich bewegte damit einerseits nicht andere gedanken oder neurale impulse an muskeln in der nähe der elektroden die messung erschweren und andererseits die elektroden nicht auf der glatze verrutschen.
viel bessere erfolge sind wie bereits erwähnt mittels elektroden direkt am gehirn erreichbar, noch bessere mit elektroden im gehirn, wobei es auch hierbei probleme bei der praktischen umsetzung geben dürfte.

So würde ich mich, verbunden mit dem - zugegeben leichte Horrorvisionen hervorrufenden - Gerät in Kampfposition begeben, oder drei, vier Meter laufen, und die Spielfigur auf dem Bildschirm dasselbe tun sehen.

aha, du willst dich bewegen. BCI ist ungeeignet.

Problem bei allen Modellen: Was ist mit der Bewegung? Wie bringe ich der Figur natürlich das Laufen bei ohne mich selbst zu bewegen?

ok, du willst dich nicht dabei bewegen. klarer fall für ein BCI (der zukunft).

Übertragen meiner Bewegungen in ein Computerspiel.

diese anforderung schliesst einen vorteil durch BCI/EEG aus, da eine bewegung per definition erst eine bewegung ist wenn sie ausgeführt wird, was widerum ein direktes messen der bewegung ermöglicht, welches leichter umsetzbar ist als BCI (z.b motion capture, beschleunigungssensoren und gyros, oä).

Was nicht vergessen werden darf: Computerspiele wie Silent Hill haben selten viele Bewegungsmöglichkeiten. Es gibt vorwärts als eine Taste. Nicht "etwas vorwärts" oder "einen Schritt vorwärts" sondern vorwärts. Genauso links, rechts, zuschlagen und so weiter.

dieser zusatz ist unvereinbar mit der vorangegangenen anforderung, da es sich hierbei um das auslösen der ausführung einer von wenigen bereits gespeicherten bewegung handelt. hier wäre ein BCI über EEG eher denkbar (auch im hobbybereich, siehe OpenEEG), aber es wären auch andere schnittstellen möglich, man könnte zb versuchen taster irgendwie an den computer anzuschliessen, einen für vor, einen für zurück und dann noch mindestens einen für apchagi. ich glaube so ein dingens in entsprechendem gehäuse wäre der renner schlechthin. über einen passenden namen für ein solches gerät müsste man halt noch nachdenken. und schnell sein, da ich mir sicher bin dass sich das apple innerhalb der nächsten jahre patentieren lassen wird.




meine abschliessenden empfehlungen:

a) motion capturing (blaue handschuhe, gelbe füsse, roter kopf, ggf bessere marker. hintergrund mittels bewegungserkennung entfernen, merkmalserkennung auf blaue, gelbe und rote blobs) zum aufnehmen der bewegungen, gestenerkennung zum auslösen der wiedergabe.

b) bastel-BCI auf basis OpenEEG/Glatze als auslöser und hoffen (bezahlen) dass man genügend verschiedene zustände differenzieren kann. die bewegungen könnten vorher mittels eines sequenzers modelliert werden.

oder kombinationen von a) und b)


ich hoffe das passt einigermassen zu dem von dir aktuell gewählten pfad, da ich einer eventuellen aufforderung zum erneuten lesen vorangegangener beiträge mangels aussagekraft ohnenhin nicht nachkommen werde.




lg


ps.

PS: In einer Wii wird die relative Position über Gyroskope ermittelt und über Funk übertragen.

es werden keine gyroskope verwendet, sondern beschleunigungssensoren. gyroskope sollten aber als zubehör erhältlich sein (MotionPlus).




EDIT:

Mir ist folgendes zu schwer aber vieleicht bekommst du oder jemand anders hier im Forum es hin: http://luis-unzueta.vndv.com/documen...is_Unzueta.pdf.

ich hab mir die doktorarbeit gerade ein paar mal schnell durchgelesen und mal eine betaversion programmiert! es funktioniert überraschender weise schon sehr gut, nur die nasenspitze macht noch probleme, da stimmt irgendwas mit dem normalabstand zum gesicht nicht, viel zu hohe werte. morgen stelle ich dir den quellcode der bisdahin mit sicherheit fertigen 1.0 version zur verfügung. die urheberrechte bleiben natürlich aufgrund deiner ausserordentlich umfangreichen vorarbeit vollständig bei dir.
ich hoffe es dauert dir nicht zu lange, sonst schick mir einfach eine PM und ich leg nachtschicht ein. falls nicht sonstwer hier im forum schneller ist und dir das teil bereits fertig hat.

[novindbn]

SoundcardEEG sieht recht interessant und einfach aus, allerdings gibt es dort nur zwei Kanäle. Reicht das zum Steuern....

Schade, daß ich den Rest deines Beitrages nach

beiträge mangels aussagekraft ohnenhin nicht nachkommen werde

nicht mehr lesen konnte, so hast du deinen Beitrag ab obengenanntem umsonst geschrieben.

[Netzman]

Ich muss mich für mich und meinen Kollegen entschuldigen, dass wir dir eine eigene Denkleistung, Initiative und Phantasie zugemutet haben.

Ich bin so frei und denke mal an deiner Stelle dein Vorhaben ein bisschen durch:
Du willst jetzt optisch mit einer normalen Kamera die Körperhaltung/Position erfassen und damit Computerspiele/Kampfsimulationen steuern.
Rein hypothetisch, diese Doktorarbeit ist dir zu kompliziert umzusetzen und jemand anderes hat weder Lust/Zeit/Bedarf/Wissen das für dich umzusetzen, natürlich völlig gratis, wäre es doch eine Überlegung ein einfacheres Verfahren zur Positionserkennung zu verwenden.

Oh, Zufall! Marker sind leicht zu erkennen, alles was du hierfür benötigst lässt sich hier im Forum finden (du suchst ja gerne irgendwelche Sachen raus) aber die sind dir ja leider zu uncool.

Weiterführende Gedankenspiele überlasse ich nun dir, ich wünsche viel Erfolg bei deinem Projekt.

mfg

[novindbn]

Ich muss mich für mich und meinen Kollegen entschuldigen

Nein, muß.t du nicht. Du hast fast nichts falsch gemacht, mehr Aufmerksamkeit in Zukunft aber ansonsten hast du dir nichts vorzuwerfen.

[thewulf00]

Leider können wir Dir nicht helfen, da Du unsere Hilfe ablehnst - inzwischen mehrfach. Ich spreche nicht für mich, sondern allgemein über die Antworten.
So einen Beitrag, wie den von johns, bekommt man selten. Ein fundierte Antwort, für die er sich viel Zeit nahm, und das ganz freiwillig und ohne auch nur einen Gedanken an das Finanzielle zu verschwenden. Aber was passiert? Mit rüdem, unangebrachtem Ton abgelehnt.

Tut mir leid, aber Dir ist nicht zu helfen, zumindest nicht von uns.

Wir wünschen Dir alle viel Erfolg bei Deinem Projekt. Halte uns bitte über die Fortschritte auf dem Laufenden.

[Richard]

Wenn es Dir bereits bei der Reflektorenanbringung an Motivation fehlen würde, dann wirst Du Dein 400DM (oder Euro?) -Teil sehr schnell hinschmeißen.
Glaub doch den Leuten hier auch mal was. Alle sagen dasselbe.

Moin moin allerseits.

Heute schon eingesetzte gesteuerte Prothesen (Arm/Bein), werden nicht
über Hinströme sondern über Sensoren an den Muskeln gesteuert. Dabei
ist es "relativ" egal welcher Muskel oder besser Muskelnerv vom Sensor
abgefragt wird. DENN es ist der Mensch der lehrnen muß mit welchen
!Gedankenbefehlen! er welche Aktionen bei der Prothese auslöst.
Nach einigen Monaten üben klappt das dann "beinahe" so unbewußt wie
"normal", die Steuerung muß nicht mehr bewust konzentriert erfolgen.

Mit Einem Muskelkadiogramm sollte es auch gehen, nur dort sitzen die
Sensoren als Nadel IM Muskel, da ist es unwarscheinlich das Mensch
damit ausgerüßtet Kampfsport betreibt....

Hirnströme einfach mittels Helm abgreifen dürfte nahezu unmöglich sein.
Der Sender (Hirn) arbeitet mit sehr niedrigen Strömen = sehr niedrigen
Elektrischen Feldern. Außerdem ist die Frequenz ca. 30 Hz (?) nicht zum
Senden geeignet. Da im Hirn kein Verstärker eingebaut werden kann, muß
der Empfänger extrem verstärkt werden. Der verstärkt aber auch den
restlichen elektromagnetischen "Schmutz".

Es muß also für einen nach außen total abgeschirmten Helm gesorgt
werden und und und und.

Einzig die Methode der Trickfilmer, auf den ganzen Körper kleine Reflecktoren
anbringen, Sereofilmen und diese Daten dann auf ein gerendertes Digitales
Abbild übertragen sollte klappen. Die Soft und Hardware ist in der
Filmindustrie erprobt und BBC oder wie der Englische Sender heißt bietet
die Software (GPL) sogar kostenlos an, habe ich jedenfalls gerade vor
kurzen gelesen. Wo ??????.

Gruß Richard

[novindbn]

Einzig die Methode der Trickfilmer, auf den ganzen Körper kleine Reflecktoren
anbringen, Sereofilmen und diese Daten dann auf ein gerendertes Digitales
Abbild übertragen sollte klappen. Die Soft und Hardware ist in der
Filmindustrie erprobt und BBC oder wie der Englische Sender heißt bietet
die Software (GPL) sogar kostenlos an, habe ich jedenfalls gerade vor
kurzen gelesen. Wo ??????.

Gruß Richard

Das würde sicher gehen. Allerdings um ab und zu zu spielen die Reflektoren immer wieder anzubringen sieht mir unrealistisch aus. Genauso wie extra eine Stereokamera bzw. eine zweite baugleiche Kamera anzuschaffen. Und außerdem geht es hier um komplette Animationen. Für die Spiele reichen(leider) Vorwärts ja/nein etc..

Vieleicht sollten sich auch Spieler an der Diskussion beteiligen, ich habe den Eindruck, die meisten hier haben noch nie ein Computerspiel gespielt.

[oberallgeier]

Hallo novindbn,

ich glaube ich kann Deine Absicht schon nachvollziehen, auch wenn ich mich, siehe mein Posting ganz oben, vorerst nur theoretisch damit beschäftige. Würde ich ein solches Thema angehen, dann wäre meine erste Übung irgendein Signal von Nerven oder Muskeln bei mir am Kopf oder Arm oder sonstwo abzugreifen und das im Computer darzustellen. Beispiel: den Mauszeiger bewegen durch Drehen und Neigen der Faust oder Hand. Mit einem Wort: ich würde am Anfang anfangen, nicht in der Mitte. Auf diese Art und Weise bin ich in meinem professionellen Bereich schon ziemlich weit gekommen. Wenn dann das erste, minimale Teilergebnis da ist, dann hat man - an einer eher einfachen Sache - einiges gelernt und kann Schritt für Schritt, auch mit vielen Schritten auf einmal, vorangehen. Ein so komplexes Gebiet verlangt ja auch einige eigene Erfahrungen und Kenntnisse; jedenfalls würde ich mich dabei nicht so sehr auf die Kenntnisse von anderen verlassen. Immerhin muss man sich ja beim Anwenden fremden Wissens doch ziemlich in fremde Gedanken einarbeiten. Diese Arbeit nutze ich lieber, mein eigenes Wissen zu erwerben. Nix für ungut, wenn ich Dir diese grundlegenden Dinge vorbete, vermutlich kennst Du die sowieso. Mich ärgert es immer, wenn jemand ganz begeistert von einem schwierigen Thema ist - und vorwiegend gesagt bekommt, was alles nicht geht oder wie es anders vermutlich besser ginge (geht mir in meinem professionellen Umfeld immer wieder so - und ich habe schon manches fertig bekommen).

Viel Erfolg

[novindbn]

So schwer es fällt, ich halte mir immer wieder vor Augen, daß es deren Realität ist. Sie würden es so machen. Oder sie wollen gehört werden und wenn ich es nicht nach ihren Vorgaben mache, sind sie beleidigt.

Es ist nicht so, daß es mir egal ist, wenn der X-te mit einem "geht eh nicht" ankommt. Nein es geht mir sogar sehr auf die Nerven und wenn mir das jemand zum Xten Mal in der Realität sagen würde, würde ich ihn meiden oder ihm eine kleben. Aber die kleinen sachlichen Elemente dazwischen bringen mich auf neue Ideen.

Denn trotzdem, oberallgeier: Willst du alles neu erfinden? Gerade bei Software gibt es meiner Erfahrung nach nichts, was nicht mindestens ein Mensch auf der Welt programmiert und ins Internet gestellt hat.

Hätte jetzt einer einen Link zu einer Software, die bereits tut, was ich möchte, würde ich es "wegen dem Lerneffekt" nicht nochmals machen.

Ich tue etwas, weil es auf dem Weg zum Ziel liegt, nicht um mir einreden zu können, jetzt "etwas gelernt zu haben".

Ich weiß, warum du es geschrieben hast. Weil du den Textverlauf, die kleine Geschichte im Internet mit dem Namen "An Spieler: Annäherung an eine Computer-Gehirn-Schnittstelle" in eine für dich nicht verlogene Richtung biegen wolltest. Dabei ging es nicht um mich, sondern um dein Empfinden. Trotzdem ist es gut, denn ich hätte früher oder später ähnliches geschrieben.