Ich habe jetzt den Rechtsklick implementiert. Wenn man mit zwei Fingern innerhalb einer einstellbaren Zeit die MT-Fläche berührt hat, wird in der Mitte der beiden Punkte ein Rechtsklick gemacht.

Als nächsten Schritt möchte ich  Scrollen  implementieren.

Noch möchte ich das Programm nicht ganz öffentlich zur Verfügung stellen. Auf Anfrage stelle ich es gerne zur Verfügung.

Auf der Sucher nach den Vuvuzela-Frequenzen bin ich auf die Webseite von Tobias Herre gelandet, der die Frequenzen schon analysiert und mit Logic aus dem Tonsignal vom Fernseher rausgefiltert hat.

Mit Garageband und dem AUFilter als Effekt kann man recht einfach bestimmte Frequenzen rausfiltern.

Ich habe dann noch etwas an den Frequenzen rumgespielt und nach einen Blick auf AudioXplorer noch ein paar anderen hinzugefügt. Natürlich bekommt man das Geräusch der Vuvuzelas nicht ganz weg und der Kommentator klingt etwas verzerrt, es funktioniert aber trotzdem recht gut.

Wenn man dann Monitoring aktiviert kann man das Eingangssignal gefiltert ausgeben.

Da ich über einen DVB-T-Stick am Computer gucke, musste ich mir eine Möglichkeit suchen das Audio-Signal von EyeTV in Garageband zu routen. Soundflower ist hier der Retter in Not. Einmal installiert bietet Soundflower virtuelle Audio-Devices an an die man in EyeTV als Ausgang einstellen kann und dann in Garageband als Eingang.

Danach kann man die WM-Übertagungen etwas Vuvuzela-freier genießen.
Hoffentlich merken die Sender auch mal, dass man das Stadion-Vuvuzela-Geräusch nicht braucht und drehen die Stadion-Mikros ab…

Hier mein GarageBand Projekt zum Download: Vuvuzela Filter (Update weiter unten)
Ich hoffe der eine oder andere kann so die WM Vuvuzele-Gefiltert genießen.

Nachtrag:

Der von den Vuvuzelas erzeugte Grundton ist fast ein kleine Ais(ich habe 235Hz gemessen), doch lassen sich auch andere Töne der Naturtonreihe auf einer Vuvuzela spielen, also 470Hz, 705Hz, 940Hz, 1175Hz, 1410Hz, 1645Hz, 1880Hz, 2115Hz, usw.

Wenn diese Frequenzen aus dem Audio-Signal rausgefiltert werden sollten die Vuvuzelas nicht mehr hörbar sein.

Download mit aktualisierten Frequenzen: Vuvuzela Filter

Das Framework von Touché ist recht einfach aufgebaut. Nachdem man den TFTrackingClient instanziert hat, setzt man einen Delegate der das TFTrackingClientDelegate-Protokoll unterstützen muss.

Um einen Mausklick zu simulieren gibt es eine sehr einfache CoreGraphics-Funktion:

CGPoint hit = CGPointMake(450, 345);
CGEventRef mouseDownEv = CGEventCreateMouseEvent (
						  NULL, //CGEventSourceRef source
						  kCGEventLeftMouseDown, //CGEventType mouseType
										//kCGEventNull
										//kCGEventMouseMoved
										//kCGEventLeftMouseDragged
										//kCGEventLeftMouseDown
										//kCGEventLeftMouseUp
						  hit, //CGPoint mouseCursorPosition
						  kCGMouseButtonLeft //CGMouseButton mouseButton
										//kCGMouseButtonLeft
										//kCGMouseButtonRight
										//kCGMouseButtonCenter
						  );
CGEventPost(kCGHIDEventTap, mouseDownEv);

Wenn jetzt an der gleichen Position ein MouseUp-Event geschickt wird, ist es ein einfacher Links-Klick.

CGPoint hit = CGPointMake(450, 345);
CGEventRef mouseUpEv = CGEventCreateMouseEvent (NULL,kCGEventLeftMouseUp,hit,kCGMouseButtonLeft);
CGEventPost (kCGHIDEventTap, mouseUpEv );

Wird aber nach dem MouseDown-Event kein MouseUp-Event sondern ein MouseDragged-Event geschickt, kann man mit der Maus z.B. Fenster ziehen.

CGPoint hit = CGPointMake(512, 412);
CGEventRef mouseMovedEv = CGEventCreateMouseEvent (NULL,kCGEventLeftMouseDragged,hit,kCGMouseButtonLeft);
CGEventPost (kCGHIDEventTap, mouseMovedEv);

Mit den drei Mousevents sollte man erst einmal ausreichend im Finder navigieren können.

Während des Programmierens und Testens habe ich gemerkt, dass Touché leider nicht 100% zuverlässig läuft, auf jeden Fall hat die Wii-Remote-Implementation noch einige Fehler. Deshalb habe ich mich entschlossen die Abhängigkeit von Touché zu verringern und auf ein generelles TUIO-Framework umzusteigen.

Bridger Maxwell hat ein ObjC TUIO-Framework geschrieben auf das ich schonmal im Zusammenhang mit dem Wiimote Whiteboard gestoßen bin.

Ich habe die Maus noch mal neu angefangen und sie mit dem TUIO-Framework aufgebaut. Daher auch der Name “TUIO Mouse”.

Ich habe “TUIO Mouse” als reines Kommandozeilen-Tool geschrieben, es kann aus dem Terminal gestartet werden, oder was meine eigentliche Idee ist, als LaunchAgent im Hintergrund laufen sobald sich der Benutzer anmeldet.
Damit man trotzdem noch ein paar Sachen konfigurieren kann habe ich beschlossen sie mit dem Default-System von OS-X zu speichern. So kann ich auch relativ einfach von einem anderen (Konfigurations-)Programm auf die Einstellungen von “TUIO Mouse” zugreifen.

Leider hatte ich anfangs Probleme auf die Defaults-Domain zuzugreifen, da ein Kommandozeilen-Tool kein Bundle ist und auch kein Bundle-Identifier hat, der aber von dem NSUserDefaults-Objekt als Standard-Domain gewählt wird. Mit einiger Bastelei und der Hilfe eines Bekannten habe ich es dann doch geschafft auf die “fremde” Domain zuzugreifen ohne auf CFPreferences zugreifen zu müssen.
Durch folgenden Code bekommt man ein NSDictionary mit den momentanen Defaults aus der angegebenen Domain.

NSDictionary *currentDefaults = [userDefaults persistentDomainForName:kDomainName];

Nachdem man das Dictionary bearbeitet hat kann man die Defaults der Domain wieder überschreiben. Leider werden alle Defaults, die nicht im Dictionary vorhanden sind überschrieben!

[userDefaults setPersistentDomain:newDefaults forName:kDomainName];

In dem Wiki der NUI Group bin ich auf eine Liste mit Frameworks, Software und Libraries zum schreiben von Multitouch(MT)-Programmen gestoßen. Für mich ist klar, dass mein Endprodukt auf einem Mac laufen soll und ich am liebsten Cocoa programmieren möchte um mich weiter in die Sprache einzuarbeiten. Das in der Liste aufgeführte Touché von Georg Kaindl macht einen recht ausgereiften Eindruck, ist komplett in Cocoa geschrieben, bringt ein eigenes Framework zur Entwicklung von eigener Software mit und die Beispielprogramme sind eine gute Basis um sich in das Framework und überhaupt MT-Programme einzuarbeiten.

Sehr schön finde ich auch, dass man auch eine Wii-Remote als Input benutzen kann und ich so auch meine Programme testen kann bevor der Tisch fertig gebaut ist. Touché kann auch TUIO-Nachrichten ausgeben und ist so auch als Tracker für andere MT-Programme geeignet.

Wie schon beschrieben soll man mit Berührungen auf dem Tisch Pfade zeichnen können, die an die Roboter übermittelt werden und dann von den Robotern abgefahren werden. Die Roboter sollen während der Fahrt aber Hindernissen ausweichen und so ist der gefahrene Pfad u.U. anders als der gezeichnete. Der gefahrene Pfad soll also vom Roboter an den Tisch übertragen und dort dargestellt werden.

Bei dem entwickelten Protokoll werden einzelne Elemente mit “,” getrennt. Ein Befehl wird mit “;” abgeschossen.

Das GUI sendet und empfängt als erstes Element immer die ID vom Empfänger/Sender

Kommandos die zwischen GUI und BTB gesendet werden:

getNxtIds	args:NO
nxtIds	 	args: id1, id2,…	int > 0

NXT-Kommandos:

setPointToVisit		args: x, y			float 0..1
positionVisited		args: x, y			float 0..1
setPosition			args: x, y			float 0..1
getPosition			args:NO
delPoints			args:NO
drive				args:speed, angle	float -1..1, int -180..180

GUI<->Bluetooth

id, ack, cmd, arg1, arg2, argi;

Bluetooth<->NXT

ack, cmd, arg1, arg2, argi;

id = int  (id = 0 für BluetoothBridge, weitere für NXT)
ack = bool 0/1 sagt aus ob eine Antwort erwartet wird oder nicht.

Beispielnachrichten:

## kommt vom GUI nach dem Start: ##
0,1,getNxtIds;
## von BTB
0,0,nxtIds,1,2,3,4;
## vom GUI an die einzelnen NXT: ##
1,1,getPosition;
2,1,getPosition;
3,1,getPosition;
4,1,getPosition;
## von BTB an das GUI: ##
1,0,setPosition,0.1,0.2;
2,0,setPosition,0.2,0.3;
3,0,setPosition,0.3,0.4;
4,0,setPosition,0.4,0.5;

Der für den Multitouch-Tisch verfolgte Ansatz ist die Totalreflexion:
Ein Stück Acryl-Glas wird von allen Seitenkanten von IR-LEDs beleuchtet. Da die Strahlen sehr flach auf die Flächen auftreten werden sie komplett reflektiert. (Die Lichtstrahlen werden an der Grenzfäche reflektiert, da sie aus eine Medium mit hoher Brechzahl an die Grenze zur Luft mit niedrigerer Brechzahl in einem größeren Winkel als dem kritischen Winkel kommen.)Wenn man jetzt mit einem Finger auf das Acry-Glas drückt wird an dem Berühungspunkt Licht auch aus dem Glas herausreflektiert, da sich durch das andere Medium mit einer höheren Brechzahl als Luft der kritische Winkel geändert hat . Der Finger reflektiert das Licht zurück durch das Glas und wird für die unter der Glasscheibe montierte Kamera sichtbar.

Weitere Informationen gibt es hier.

Als Basis für den Tisch dient sehr stabiler alter Tisch der schon seit längerer Zeit im Computerraum rumsteht.
Durch die Hausmeisterei werden mehrere Verstrebungen hinzugefügt, um die Last der Platte besser zu tragen. Das Acrylglas ist umgeben von drei Holzschichten, oben und unten sowie um die Platte herum. In dem Spalt zwischen dem Glas und der mittleren Holzschicht sollen auch die LEDs untergebracht werden.

Die Glasplatte soll 109,5 cm x 81,00 cm x 1,5 cm groß, durchsichtig und an den Kanten poliert sein.
Jeweils acht IR-LEDs in Reihe gelötet und die Achter-Gruppen in Parallelschaltung verkabelt sollen den Glasplatte von allen Seitenkanten beleuchten. Mit einem Vorwiderstand von 4,7Ω sollen sich die LEDs dann mit einem 12V Netzteil betreiben lassen.

Die Abi-Klausuren sind geschrieben und das vierte Semester bricht an. Dem letzten und sehr motivierten Informatik-Leistungskurs der Wichern-Schule fehlt es an Arbeit. Es werden Ideen gesammelt, was man die letzten Monate produktives machen könnte. Nach längeren Diskussionen fallen Ideen wie “3D-Tracking von Händen anhand der kapazitiven Verschiebung” oder “Warenhaus-Roboter” weg und die Idee eines Multitouch-Tisches kristallisiert sich heraus.

Wichtig ist natürlich, dass es auch zum Lehrplan passt, also muss noch Robotik mit in den Kontext gebracht werden. Wie wäre es z.B. wenn man Lego-Mindstorms-NXTs über den Multitouch-Tisch steuern könnte, wenn man z.B. eine Linie auf den Tisch zeichnet und der Roboter fährt sie ab?

Aufgabenbereiche

Nachdem die Aufgabenstellung klar war, ging es an die Planung. Wir sind ein Kurs von 15 Personen, also wir die Aufgaben in verschiedene Aufgabenbereiche einteilen.
- Table-Hardware
- Table-Software
- NXT-Software
- Bluetooth-Kommunikation

Die Gruppe Table-Hardware sorgt dafür, dass der Tisch am Ende steht und in der Kamera ein Bild mit “Blobs” ankommen, die Table-Software kümmert sich darum, dass das Bild verarbeitet wird und Nachrichten an das GUI geschickt werden. Das GUI zeichnet anhand der “Blob”-Bewegungen Pfade, welche über Netzwerk an die Bluetooth-Kommunikation geschickt werden und von dort über Bluetooth an den NXT weitergeleitet werden.

push "dhcp-option DNS 10.66.0.4"
push "dhcp-option DNS 10.66.0.5"
push "dhcp-option WINS 10.66.0.8"

unter 10.4 und 10.5 Problemlos, doch seit 10.6 wird der lokale DNS-Server ersetzt. Deshalb geht dann die Namensauflösung von externen Server nicht mehr oder nur noch sehr langsam über das VPN.In der Dokumentation von http://code.google.com/p/tunnelblick/wiki/QuickStartGuide steht, dass man wenn man beide DNS-Server nutzen möchte, ein dazu passendes Skript schreiben muss.

Da ich meinen lokalen und den DNS-Server auf der anderen Tunnelseite nutzen möchte, muss ich mein eigenes Skript schreiben. Das Skript konfiguriert welcher DNS-Server für die gegebene Domain benutzt werden soll.

#!/bin/bash
####
# The script sets/deletes the DNS-Server to use for a given domain
# by Tobias Conradi Mar 21 2010
# www.tobias-conradi.de
#####
if [ "$1" = "add" ]
then
mkdir -p /etc/resolver 2> /dev/null
echo "nameserver $3" > /etc/resolver/$2
elif [ "$1" = "delete" ]
then
rm -Rf /etc/resolver/$2
fi
if [ "$1" = "add" ] || [ "$1" = "delete" ]
then
killall DirectoryService
exit 0
else
echo "Error"
echo "Usage: $0 add|delete mydomain.de 192.168.1.1"
fi

up "/Applications/Utilities/Tunnelblick.app/Contents/Resources/set-DNS.sh add mydomain.de 192.168.66.2"
down "/Applications/Utilities/Tunnelblick.app/Contents/Resources/set-DNS.sh delete mydomain.de"

Jetzt noch in Tunnelblick “Nameserver festlegen” deaktivieren und schon müssten beide DNS-Server funktionieren.

Links:
OpenVPN
Tunnelblick