Page History
Geplanter TerminPlanned date: 27. September 27th, 2023 , | 10.00 am - 12.30 Uhrpm
Multimodal Foundation Models are large generative AI models that process not only speech, but also other data types such as images. Simple textual queries can generate surprisingly specific and realistic images within seconds. However, the underlying technology also promises further applications, e.g. for semantic description of metadata, again a basis for effective testing of neural networks. This workshop will introduce the methodology and procedures of multimodal foundation models from a scientific perspective and discuss their use as an aid for semantic testing of neural networks.
Multimodale Foundation Models sind große generative KI-Modelle, die nicht nur Sprache verarbeiten, sondern auch andere Datentypen wie beispielsweise Bilder. Durch einfache textuelle Anfragen lassen sich innerhalb von Sekunden überraschend spezifische und realistische Bilder generieren. Die dahintersteckende Technologie verspricht jedoch auch weitere Einsatzmöglichkeiten, bspw. zum semantischen Beschreiben von Metadaten, wiederum eine Grundlage zum effektiven Testen von neuronalen Netzen. In diesem Workshop wird aus wissenschaftlicher Perspektive in Methodik und Verfahren von multimodalen Foundation Models eingeführt und der Einsatz als Hilfestellung zum semantischen Testen neuronaler Netzwerke diskutiert.
Vorläufige Tentative Agenda:
10.00 - 10.10 |
am | Welcome and review of the 1st workshop | Fraunhofer IAIS, DIN |
10.10 - 10.45 |
am |
Arbeitstitel
Working title | Speaker's name, IAIS |
10.45 - 11.10 |
Arbeitstitel
am | Identification of Systematic Errors of Computer Vision Systems | Dr. Jan Henrik Metzen, Robert Bosch GmbH |
11.10 - 11.20 |
am |
Break | |
11.20 - 11.45 |
am |
Working title | Speaker's name, IAIS |
11.45 am - 12.15 |
pm |
Diskussion
Discussion | Participants |
12.15 - 12.30 |
pm | Summary and farewell | Fraunhofer IAIS, DIN |
Es ist geplant, diesen Workshop in englischer Sprache auszurichten.
Interessierte Teilnehmer*innen registrieren sich bitte für die Veranstaltung unterInterested participants register for the event at: ANMELDUNG (Log-in Code: foundmod2)
Bei Fragen stehen wir Ihnen gern zur Verfügung. If you have any questions, please do not hesitate to contact us.
Armagan Sahin
ProjektmanagerProject manager
DIN – Abt. Strategische ThemenentwicklungDept. Strategic theme development
T +49 30 2601-2453 | F +49 30 2601-42453
...