Versions Compared

Key

  • This line was added.
  • This line was removed.
  • Formatting was changed.

Geplanter TerminPlanned date: 27. September 27th, 2023 , | 10.00 am - 12.30 Uhrpm

Multimodal Foundation Models are large generative AI models that process not only speech, but also other data types such as images. Simple textual queries can generate surprisingly specific and realistic images within seconds. However, the underlying technology also promises further applications, e.g. for semantic description of metadata, again a basis for effective testing of neural networks. This workshop will introduce the methodology and procedures of multimodal foundation models from a scientific perspective and discuss their use as an aid for semantic testing of neural networks.

Multimodale Foundation Models sind große generative KI-Modelle, die nicht nur Sprache verarbeiten, sondern auch andere Datentypen wie beispielsweise Bilder. Durch einfache textuelle Anfragen lassen sich innerhalb von Sekunden überraschend spezifische und realistische Bilder generieren. Die dahintersteckende Technologie verspricht jedoch auch weitere Einsatzmöglichkeiten, bspw. zum semantischen Beschreiben von Metadaten, wiederum eine Grundlage zum effektiven Testen von neuronalen Netzen. In diesem Workshop wird aus wissenschaftlicher Perspektive in Methodik und Verfahren von multimodalen Foundation Models eingeführt und der Einsatz als Hilfestellung zum semantischen Testen neuronaler Netzwerke diskutiert. 

Vorläufige Tentative Agenda: 

10.00 - 10.10

UhrBegrüßung und Rückblick auf die Themen und Ergebnisse des 1. Workshops

am

Welcome and review of the 1st workshop

Fraunhofer IAIS, DIN

10.10 - 10.45

Uhr

am

Arbeitstitel

Referent*in 1

Working title

Speaker's name, IAIS

10.45 - 11.10

Uhr

Arbeitstitel

Referent*in 2

am

Identification of Systematic Errors of Computer Vision Systems

Dr. Jan Henrik Metzen, Robert Bosch GmbH

11.10 - 11.20

Uhr

am

Pause

Break


11.20 - 11.45
Uhr
am
Arbeitstitel
Working titleSpeaker's name, IAIS
Referent*in 3

11.45 am - 12.15

Uhr

pm

Diskussion

Referent*innen und Teilnehmer*innen

Discussion

Participants

12.15 - 12.30

UhrZusammenfassung und Verabschiedung

pm

Summary and farewell

Fraunhofer IAIS, DIN

 Es ist geplant, diesen Workshop in englischer Sprache auszurichten.

Interessierte Teilnehmer*innen registrieren sich bitte für die Veranstaltung unterInterested participants register for the event at: ANMELDUNG (Log-in Code: foundmod2) 

Bei Fragen stehen wir Ihnen gern zur Verfügung. If you have any questions, please do not hesitate to contact us.

Armagan Sahin 
ProjektmanagerProject manager
DIN – Abt. Strategische ThemenentwicklungDept. Strategic theme development

T +49 30 2601-2453 | F +49 30 2601-42453 

...