Sustainable NLP

In den vergangenen Jahren erreichten KI-getriebene Sprachverarbeitungssysteme immer wieder neue Höhepunkte und zeigten erstaunliche Fähigkeiten in der automatisierten Verarbeitung von Sprache. Mittlerweile werden solche Modelle vielseitig eingesetzt – in Sprachassistenzsystemen, Chatbots, Übersetzungsprogrammen, oder sogar zur Unterstützung von medizinischer Diagnose.

Jedoch sind die Entwicklung und der Betrieb solcher Modelle oftmals mit einem hohen Energieaufwand und somit auch hohen CO₂-Emissionen verbunden. Der hohe Ressourcenaufwand schließt desweiteren Forschende und Nutzende aus, die nicht mit dem notwendigen Equipment ausgestattet sind. In unseren Forschungsarbeiten entwickeln wir daher Modelle, die einen geringeren Energie- und Speicherbedarf haben und stellen diese in verschiedenen OpenSource -Projekten, wie AdapterHub und SentenceBERT, der Allgemeinheit zur Verfügung.

Gleichzeitig engagieren wir uns in der NLP Forschungsgemeinschaft durch die regelmäßige Organisation von Workshops, die das Ziel haben, die Entwicklung von nachhaltigeren NLP-Modellen anzutreiben.