In diesem Projekt untersuchen wir, wie generative KI helfen kann, Bildung barrierefrei zu gestalten. Insbesondere geht es um die Unterstützung von blinden und sebehinderten Schüler*innen, Studierenden sowie Lernenden allgemein.
TRAIL:
TRAIL ist eine Open-Source-Anwendung, die PDF-Dateien in Bilder umwandelt, sie an das GPT-4 Vision Model sendet und Alternativtexte für jedes Bild erzeugt. Der resultierende Text wird als herunterladbare HTML-Datei zur Verfügung gestellt, die mit Tags für die Zugänglichkeit von Bildschirmlesegeräten versehen ist. Durch die Verwendung des GPT-4 Vision Model werden mathematische Formeln im Quelldokument in rohen LaTeX-Code in der resultierenden HTML-Datei umgewandelt, so dass Bildschirmlesegeräte sie effektiv analysieren können.
Alle Information zu diesem Tool finden Sie auf Github: https://github.com/AltarisV/TRAIL-PDF
TRAIL is a web application that converts PDF files into images, sends them to the GPT-4 Vision Model, and generates alternative text for each image. The resulting text is provided as a downloadable HTML file, enhanced with tags for screen reader accessibility. By utilizing the GPT-4 Vision Model, mathematical formulas found in the source document are converted into raw LaTeX code in the resulting HTML, enabling screen readers to parse them effectively.
Further information can be found on github: Alle Information zu diesem Tool finden Sie auf Github: https://github.com/AltarisV/TRAIL-PDF
Falls Sie Interesse an diesem Tool oder dem Thema für Ihre Schule oder Bildungseinrichtung haben, schreiben Sie gern an simbeck@htw-berlin.de.
