Vorlesung

Autor: René Peinl

Dem Computer sprechen beibringen

Uns treibt ja die Aufgabe um, einen Smart Speaker zu bauen, der ohne Cloud-Anbindung funktioniert und insb. die Sprachanfragen nicht zu internationalen Großkonzernen geschickt werden. Dazu muss man nicht nur Sprache erkennen, sondern auch natürlichsprachig antworten können. Daher haben wir uns im letzten Jahr mit Sprachsynthese (TTS, Text to Speech) beschäftigt und recht ordentliche Ergebnisse erzielt.

Einen eigenen Eindruck davon kann man sich auf unseren Projektseiten verschaffen

Der Computer kann menschliche Sprecher für einige Einsatzgebiete schon ersetzen.
„Dem Computer sprechen beibringen“ weiterlesen …

2.000€ gespart für Deep Learning

Kurz vor Weihnachten gibt es auch an der Hochschule manchmal noch „Geschenke“. Die letzten Anschaffungen des Jahres trudeln ein und sorgen für gute Laune. Die neueste Nvidia Grafikkarten-Generation stand dabei ganz oben auf der Wunschliste einiger Kollegen, weil sie hohe Leistung für Grafikaufgaben wie 3D-Modellierung oder Virtual Reality Anwendungen mit einer gut unterstützten API für KI-Anwendungen und hier insb. dem Training neuronaler Netze kombinieren.

Geforce RTX 3090 von Gigabyte in unserer Workstation am iisys
„2.000€ gespart für Deep Learning“ weiterlesen …

Reale Objekte in Virtual Reality Erfahrungen reinbeamen

Virtual Reality ist einfach nur cool und wenn man es mal erlebt hat fühlen sich Anwendungen auf dem 2D Monitor irgendwie unbefriedigend an. Einer der aktuell stärksten Einschränkungen von VR-Erlebnissen ist aber noch die Haptik, also die fehlende Möglichkeit die virtuellen Dinge anfassen und fühlen zu können. Das Vibrationsfeedback der Controller ist dafür nur ein kleines Trostpflaster. Tobias Wirth hat in seiner Masterarbeit daher daran geforscht reale Ersatzobjekte über Kameras zu erkennen und ihre Position an die VR-App zu übermitteln, so dass dort die virtuelle Entsprechung des Objekts an der richtigen Stelle angezeigt werden kann.

Video mit Kamerabild und der Entsprechung des Objekts in der VR-App

Leider ist das Ganze komplizierter als es aussieht und man vermuten würde. Man könnte annehmen, dass 2D Objekterkennung in Bildern mithilfe tiefer neuronaler Netze sehr gut funktioniert und daher die Erweiterung auf die dritte Dimension kein großes Problem sein sollte.

„Reale Objekte in Virtual Reality Erfahrungen reinbeamen“ weiterlesen …

Neuzugänge im VR Labor

Nachdem es längere Zeit keine attraktiven Neuvorstellungen im Bereich Virtual Reality Headsets gegeben hat, die unsere Sammlung aus Oculus Go, Lenovo Explorer, HTC Vive Pro und Pimax 8k sinnvoll ergänzt hätten (Valve Index ist cool, aber nicht so viel anders als Vive Pro und Pimax 8k, dass es sich lohnen würde), hat Facebook jetzt mit einem Paukenschlag die Oculus Quest 2 vorgestellt. Die ist nicht nur in quasi allen Belangen deutlich besser als der Vorgänger, sondern auch noch sehr erschwinglich.

HTC Vive Pro mit Wireless Kit und Pimax 8k in unserem VR Labor

Leider ist es wie so häufig im Leben, dass man nichts umsonst bekommt,
sondern immer irgendwie bezahlen muss. Bei Facebook sind das die eigenen Daten, mit denen man bezahlt. Dazu gibt es interessante Studien, die ein hohes Mißbrauchspotenzial aufdecken. Man ist also nicht zu unrecht in Deutschland skeptisch wegen der Zusammenführung der Daten aus Facebook, Instagram, WhatsApp und Oculus, was Facebook dazu veranlasst hat vorausschauend den Verkauf der Geräte hierzulande zu stoppen. Wir haben uns zu Forschungszwecken trotzdem eines der Geräte geholt und können den guten Eindruck der Presse bestätigen.

„Neuzugänge im VR Labor“ weiterlesen …

Schneller als 97% aller anderen

Unsere neue Workstation für Deep Learning und Virtual Reality ist endlich in unserem Labor angekommen. Nachdem erst der interne Bestellprozess etwas gedauert hat und dann die CPU nicht lieferbar war, haben wir jetzt endlich alle Komponenten beisammen und konnten gestern unsere neue Workstation bauen. Dank sorgfältiger Auswahl der Bauteile haben wir jetzt nicht nur einen echt schnellen Rechner, der laut 3DMark schneller ist als 97% der sonstigen getesteten PCs, sondern auch noch einen der erfreulich leise arbeitet. Das Gehäuse und der CPU-Lüfter von beQuiet leisten hier ganze Arbeit. Selbst die Grafikkarte bleibt bei Last noch erfreulich unaufdringlich, so dass das Gerät eindeutlich Büro-tauglich ist.

Mit etwas Finetuning der Einstellungen schaffen wir vielleicht auch noch 98%. Die schnelleren Systeme sind alle ähnlich ausgestattet
„Schneller als 97% aller anderen“ weiterlesen …

Erste Erfahrungen mit Deep Learning

Maschinelles Lernen und insb. tiefe neuronale Netze revolutionieren gerade die Art wie Software entwickelt wird. Sie erlauben Mustererkennung auf einem neuen Niveau und ermöglichen damit viele Anwendungen, die vor 10 Jahren undenkbar waren. Um deren Möglichkeiten und Grenzen auszuloten können Studierende in der Forschungsgruppe Systemintegration von Prof. Peinl kleine Projekte umsetzen, die Spaß machen und überschaubar sind.

„Erste Erfahrungen mit Deep Learning“ weiterlesen …