Image Assistant

Der Image Assistant ermöglicht eine KI-gestützte Bildanalyse in FirstSpirit. Dadurch wird die Verwendung von Bildmaterial einfacher und effizienter. Das Modul FS Image Assistant umfasst zwei Funktionalitäten:

• Automatischer Bildzuschnitt
• KI-gestützte Alt-Text-Generierung

KI-gestützten Alt-Text-Generierung

Im ContentCreator können für hochgeladene Bilder mithilfe der KI-gestützten Alt-Text-Generierung automatisch Alt-Texte erstellt werden.

Für die Funktionalität wird eine Schnittstelle zu einem Large Language Model (LLM) benötigt. Für die Verwendung der Alt-Text-Generierung ist deshalb die Einrichtung der FirstSpirit AI notwendig. Das LLM analysiert das hochgeladene Bild unter Verwendung eines Prompts und erstellt anschließend einen Alt-Text dazu.

Wenn Azure OpenAI angebunden ist, kann die Tokenzahl pro Bild höher ausfallen, was eine Anpassung der Limits pro Minute erforderlich macht. Die Konfiguration muss dann passend gewählt werden.

Server-weite Konfiguration

Das Modell, das vom Image Assistant verwendet werden soll, kann separat vom Standardmodell, das von allen anderen Assistenten in der AI Assistant Suite verwendet wird, konfiguriert werden. Die server-weite Konfiguration des vom Image Assistant verwendeten Modells findet im FS Image Assistant - GPT Alt Text Config-Service statt.

Im ServerManager im FS Image Assistant - GPT Alt Text Config-Service kann zwischen der Verwendung des globalen oder eines individuellen Modells gewählt werden. Im Fall eines individuellen Modells können das gewünschte KI-Plugin ausgewählt und das KI-Modell definiert werden.

Für die Alt-Text-Generierung wird ein Prompt verwendet. Crownpeak liefert zwei funktionsfähige globale Prompts für die Ausgabe von Alt-Texten in Deutsch und English. Diese können im FirstSpirit AI Configuration-Service im ServerManager eingesehen und editiert werden.

Benutzerdefinierte Prompts können außerdem serverweit im FirstSpirit AI Configuration-Service hinzugefügt werden. Hierbei wird zwischen globalen Prompts und geteilten Prompts unterschieden. Die Prompts müssen zur Verwendung im Image Assistant mit dem Tag "ImageAssistantAltText" versehen werden.

Die KI-gestützte Alt-Text-Generierung erlaubt keine sprachabhängige Ausgabe des Alt-Textes. Soll der Alt-Text in einer anderen Sprache ausgegeben werden, muss der Prompt angepasst werden.

Projekt-Konfiguration

Für die Verwendung der KI-gestützten Alt-Text-Generierung muss im Projekt die Projekt-Komponente FS Image Assistant - Configuration hinzugefügt werden.

Das bei Einsatz des Image Assistants zu verwendende Modell kann hier projekt-spezifisch über Individuelles KI-Modell verwenden überschrieben werden.

Der standardmäßig eingestellte Prompt für jedes Projekt entspricht dem voreingestellten Prompt für Alt-Text-Generierung in Englisch ("Image Assistant: Alt Text English"). Dieser kann übernommen (Globalen Prompt verwenden) aber nicht auf Projektebene verändert werden.

Alternativ kann ein anderer Prompt aus der Dropdown-Liste gewählt werden (Individuellen Prompt verwenden). Hier werden alle globalen und geteilten Prompts sowie projekt-spezifische Prompts, die in der Projekt-Komponente FirstSpirit AI Configuration ProjectApp hinzugefügt wurden, angezeigt.

Der von GPT auf Basis des Prompts generierte Alt-Text muss zugeordnet und gespeichert werden können. Wie auch beim Image Assistant erfolgt dies über die Metadaten. Dazu muss eine Metadaten-Vorlage im Projekt vorhanden sein.

Für die Speicherung des generierten Alt-Texts muss der projektspezifischen Metadaten-Vorlage eine Komponente vom Typ CMS_INPUT_TEXTAREA mit der Bezeichnung fsai_altText hinzugefügt werden, z.B.:

<CMS_INPUT_TEXTAREA name="fsai_altText">
   <LANGINFOS>
      <LANGINFO lang="*" label="Alternative Text (AI)"/>
   </LANGINFOS>
</CMS_INPUT_TEXTAREA>

Der KI-generierte Alt-Text wird in fsai_altText eingetragen. Der generierte Alt-Text wird somit den Metadaten eines Bildes hinzugefügt.

Bedienung

Ist die KI-gestützte Alt-Text-Genierung erfolgreich konfiguriert und die Metadaten-Vorlage im Projekt entsprechend angepasst, wird beim Hochladen eines Bildes in die Medien-Verwalrung automatisch ein Alt-Text generiert. Der generierte Alt-Text kann für jedes Bild über den Button Metadaten setzen eingesehen werden. Bei Bedarf können Änderungen vorgenommen und Ergänzungen hinzugefügt werden.

Der KI-generierte Alt-Text kann mithilfe des Buttons Bilderkennung erneut ausführen manuell angestoßen werden. Alt-Text, der vor dem erneuten automatischen Generieren des Alt-Texts eingetragen war, wird mit dem neu generierten Text überschrieben.