Welche immensen Potenziale die Kinect-Technologie von Microsoft birgt, wurde gestern auf der MIX11-Konferenz in Las Vegas deutlich. Während der viel beachteten Keynote von Joe Belfiore, Corporate Vice President, Windows Phone Program Management und Scott Guthrie, Corporate Vice President, .NET Developer Platform präsentierten die deutschen Studenten Michael Zöllner und Stephan Huber von der Universität Konstanz ihr Projekt "NAVI", in dem der Kinect-Sensor der Microsoft Xbox genutzt wird, um sehbehinderten Menschen eine sichere Navigation in Gebäuden zu ermöglichen.
Beim Spielen mit der Xbox erfasst der Kinect-Sensor mit Infrarot und Kamera die Bewegungen von Gamern im Raum, im Rahmen des NAVI-Projekts ("Navigational Aids for the Visually Impaired") der Informatikstudenten Michael Zöllner und Stephan Huber von der Universität Konstanz (hci.uni-konstanz.de) dient er als praktische Orientierungshilfe für sehbehinderte Menschen. Hierzu haben die beiden Mitglieder der Arbeitsgruppe "Mensch-Computer Interaktion" den Kinect-Sensor kurzerhand auf einen Helm montiert, von wo er Gegenstände und Personen erkennen kann, die sich im direkten Umfeld des Sehbehinderten befinden. Über einen Gürtel, der mit sechs Vibrationsmotoren bestückt ist, wird die Person schließlich vor diesen Hindernissen gewarnt. Unterstützt wird dieser Vorgang von einer eigens auf Microsoft .Net programmierten Software.
Für die Punkt-zu-Punkt Navigation im Gebäude verwenden die Studenten optische Marker, die aus Anwendungen der Augmented Reality bekannt sind. Diese werden an wichtigen Stellen zwischen Start- und Zielpunkt platziert und über die Webcam der Kinect erfasst. Jeder dieser Marker enthält unterschiedliche Navigationsanweisungen, die je nach Distanz zum jeweiligen Marker über ein Bluetooth Headset abgespielt werden. Nähert sich die Person beispielsweise einer Tür, werden somit nach und nach die folgenden Anweisungen ausgegeben: "Tür in 3", "2", "1", "Tür öffnen".
Das System ist als Erweiterung des Blindenstocks gedacht und soll diesen nicht ersetzen. Für den Praxisgebrauch ist das System im jetzigen Zustand allerdings noch etwas zu sperrig. Eine miniaturisierte Version des Systems könnte jedoch in Zukunft mit Hilfe von Smartphones neuester Generation realisierbar sein, so die Studenten. "Das Projekt NAVI war eingebettet in meine Lehrveranstaltung Neue Formen der Mensch-Computer Interaktion, in der es darum ging, unter Verwendung neuester Technologien wie zum Beispiel Microsoft Kinect oder Microsoft Surface unkonventionelle Formen der Interaktion mit Technologien und der Umwelt zu entwickeln", erklärt Prof. Harald Reiterer von der Universität Konstanz. "Das Projekt NAVI zeigt dabei in vorbildlicher Weise neue Möglichkeiten der Interaktion mit der Umwelt auf, die durch die Kombination von neuen Technologien für Leute mit Sehbehinderung entstehen können."
"Eine Innovation wie Kinect begeistert und inspiriert Entwickler und Forscher auf der ganzen Welt. Das Projekt der Uni Konstanz zeigt eindrucksvoll das Potential der Technologie auch jenseits der verfügbaren Spielszenarien, so Said Zahedani, Senior Director Developer Platform and Strategy Group von Microsoft Deutschland. "Hier beginnen wir eine große Reise in neuartige Interaktionswelten mit neuen, natürlichen Benutzerschnittstellen. Projekte wie jenes der Uni Konstanz sind nur die ersten Schritte auf dieser Reise." Um die Entwicklung potenzieller Anwendungsbereiche voranzutreiben, stellt Microsoft Entwicklern in der akademischen Forschung ein nicht-kommerzielles Software Development Kit (SDK) zur Verfügung. Mit dem Kinect for Windows SDK haben sie die Möglichkeit auf die Steuerung des Controllers, Schnittstellen und Audiofunktionen zuzugreifen. Microsoft unterstreicht damit seine langfristigen Bemühungen und Investitionen in die Entwicklung neuartiger Bedienoberflächen (Natural User Interfaces).
Weiterführende Links:
Bilder, Videos und Hintergrundinformationen finden Sie im MIX Virtual Pressroom (englisch): http://www.microsoft.com/...
Hier finden Sie die Mitschnitte der MIX11-Keynotes zum Download und im Stream: http://live.visitmix.com/
Webseite der Arbeitsgruppe Mensch-Computer Interaktion an der Uni Konstanz: http://hci.uni-konstanz.de
Video zu NAVI: http://youtu.be/l6QY-eb6NoQ
Beim Spielen mit der Xbox erfasst der Kinect-Sensor mit Infrarot und Kamera die Bewegungen von Gamern im Raum, im Rahmen des NAVI-Projekts ("Navigational Aids for the Visually Impaired") der Informatikstudenten Michael Zöllner und Stephan Huber von der Universität Konstanz (hci.uni-konstanz.de) dient er als praktische Orientierungshilfe für sehbehinderte Menschen. Hierzu haben die beiden Mitglieder der Arbeitsgruppe "Mensch-Computer Interaktion" den Kinect-Sensor kurzerhand auf einen Helm montiert, von wo er Gegenstände und Personen erkennen kann, die sich im direkten Umfeld des Sehbehinderten befinden. Über einen Gürtel, der mit sechs Vibrationsmotoren bestückt ist, wird die Person schließlich vor diesen Hindernissen gewarnt. Unterstützt wird dieser Vorgang von einer eigens auf Microsoft .Net programmierten Software.
Für die Punkt-zu-Punkt Navigation im Gebäude verwenden die Studenten optische Marker, die aus Anwendungen der Augmented Reality bekannt sind. Diese werden an wichtigen Stellen zwischen Start- und Zielpunkt platziert und über die Webcam der Kinect erfasst. Jeder dieser Marker enthält unterschiedliche Navigationsanweisungen, die je nach Distanz zum jeweiligen Marker über ein Bluetooth Headset abgespielt werden. Nähert sich die Person beispielsweise einer Tür, werden somit nach und nach die folgenden Anweisungen ausgegeben: "Tür in 3", "2", "1", "Tür öffnen".
Das System ist als Erweiterung des Blindenstocks gedacht und soll diesen nicht ersetzen. Für den Praxisgebrauch ist das System im jetzigen Zustand allerdings noch etwas zu sperrig. Eine miniaturisierte Version des Systems könnte jedoch in Zukunft mit Hilfe von Smartphones neuester Generation realisierbar sein, so die Studenten. "Das Projekt NAVI war eingebettet in meine Lehrveranstaltung Neue Formen der Mensch-Computer Interaktion, in der es darum ging, unter Verwendung neuester Technologien wie zum Beispiel Microsoft Kinect oder Microsoft Surface unkonventionelle Formen der Interaktion mit Technologien und der Umwelt zu entwickeln", erklärt Prof. Harald Reiterer von der Universität Konstanz. "Das Projekt NAVI zeigt dabei in vorbildlicher Weise neue Möglichkeiten der Interaktion mit der Umwelt auf, die durch die Kombination von neuen Technologien für Leute mit Sehbehinderung entstehen können."
"Eine Innovation wie Kinect begeistert und inspiriert Entwickler und Forscher auf der ganzen Welt. Das Projekt der Uni Konstanz zeigt eindrucksvoll das Potential der Technologie auch jenseits der verfügbaren Spielszenarien, so Said Zahedani, Senior Director Developer Platform and Strategy Group von Microsoft Deutschland. "Hier beginnen wir eine große Reise in neuartige Interaktionswelten mit neuen, natürlichen Benutzerschnittstellen. Projekte wie jenes der Uni Konstanz sind nur die ersten Schritte auf dieser Reise." Um die Entwicklung potenzieller Anwendungsbereiche voranzutreiben, stellt Microsoft Entwicklern in der akademischen Forschung ein nicht-kommerzielles Software Development Kit (SDK) zur Verfügung. Mit dem Kinect for Windows SDK haben sie die Möglichkeit auf die Steuerung des Controllers, Schnittstellen und Audiofunktionen zuzugreifen. Microsoft unterstreicht damit seine langfristigen Bemühungen und Investitionen in die Entwicklung neuartiger Bedienoberflächen (Natural User Interfaces).
Weiterführende Links:
Bilder, Videos und Hintergrundinformationen finden Sie im MIX Virtual Pressroom (englisch): http://www.microsoft.com/...
Hier finden Sie die Mitschnitte der MIX11-Keynotes zum Download und im Stream: http://live.visitmix.com/
Webseite der Arbeitsgruppe Mensch-Computer Interaktion an der Uni Konstanz: http://hci.uni-konstanz.de
Video zu NAVI: http://youtu.be/l6QY-eb6NoQ
