Rail-Bench
Benchmarksuite für die Automatisierung des Schienenverkehrs
Zuletzt aktualisiert am 10.10.2024
Projektbeschreibung
Problem
Die Entwicklung von KI-Methoden für die Automatisierung des Verkehrs erfordert die Bereitstellung von Datensätzen sowie den objektiven Vergleich verschiedener Methoden zur Sensordatenauswertung. Hierzu sind offen zugängliche Benchmarks erforderlich. Diese stehen im Bereich des automatisierten Straßenverkehrs zur Verfügung (z.B. KITTI, Cityscapes), vergleichbare Benchmarks für den Schienenverkehr fehlen jedoch. Dadurch wird die Entwicklung von KI-Verfahren im Bereich des Schienenverkehrs erschwert.
Ziele
Ziel des Projektes ist die Entwicklung einer Benchmarksuite, die Fragestellungen aus der Umfeldwahrnehmung von Schienenfahrzeugen (Objekterkennung und -tracking, Schienenerkennung, Eigenbewegungsschätzung, Vegetationserkennung) adressiert. Sie wird über frei zugängliche Trainings- und Testdaten verfügen und mit Hilfe automatisierter Evaluationsskripte neue Verfahren objektiv bewerten und vergleichen können. Eine Webseite wird den Nutzerinnen und Nutzern aus Forschung und Entwicklung erlauben, eigene Verfahren zu evaluieren.
Durchführung
Das Projekt wird bestehende Datensätze nutzen, geeignete Datensätze selektieren und für die Benchmarksuite aufbereiten. Für jede Fragestellung werden Evaluationsmetriken zur automatisierten Auswertung auf einem Webserver implementiert und mit Hilfe von aktuellen Vergleichsverfahren die Qualität bestehender State-of-the-Art-Verfahren bewertet. Für den Zugang zur Benchmarksuite wird eine Webseite erstellt, die das Herunterladen der Daten sowie die Evaluation eigener Ergebnisse erlaubt.