Das "AI-Tagging" ist eine Erweiterung für das 4ALLPORTAL und basiert auf dem Dienst von Microsoft Azure - Cognitive Services, welcher das "maschinelle Sehen" und die "Gesichtserkennung" für Bilder im 4ALLPORTAL ermöglicht. Bildinhalte werden präzise analysiert und die extrahierten Informationen automatisch als Metadaten im 4ALLPORTAL gespeichert.


Zusammenfassung der AI-Tagging Funktionen


Anbindung an den Dienst Microsoft Azure - Cognitive Services

Konfiguration des Microsoft Dienstes über die 4ALLPORTAL Administration

  • Data Center URL
  • Subscription Key - Face (Gesichtserkennung)
  • Subscription Key - Vision (Maschinelles Sehen)
  • Aktivieren / Deaktivieren der Verbindung zum Dienst 

Gesichtserkennung:

  • Erkennung von Gesichtern (Mensch) in Bildern

  • Markierung von Gesichtern in Bildern über ein editierbares Markup (Vorschaubild in Detailansicht)

  • Extrahieren von Metadaten der erkannten Gesichter: Alter, Geschlecht, Kopfbehaarung vorhanden, Gesichtsbehaarung vorhanden, Haarfarben, Brille vorhanden, Augen-Make-Up vorhanden, Lippen-Make-up vorhanden, Lächeln vorhanden, Stimmung


Beispiel: Gesichtserkennung - Detailansicht DAM


Aktualisierung der Gesichtserkennung

Um Stereotypisierung und Diskriminierung zu verhindern, stellt die Azure-Gesichtserkennungs-API die Unterstützung folgender Attribute zu Ende Juni 2023 ein:

  • Alter
  • Geschlecht
  • kahl (Kopfbehaarung vorhanden)
  • Augen Make-Up
  • Lippen Make-Up
  • Lächeln
  • Stimmung
  • Gesichtsbehaarung
  • Haarfarbe

Infolgedessen werden diese Attribute nicht mehr automatisch als Metadaten erkannt und auch nicht mehr gesetzt (Details über diese Entscheidung finden Sie hier).

In der Benutzeroberfläche werden die Felder für diese Attribute nicht mehr angezeigt. Ausnahme: Enthalten die Felder bereits Werte, werden die Felder dieser Attribute weiterhin angezeigt.


Hinweis: Die Aktion "Vorschau neu berechnen" aktualisiert auch die Gesichtserkennung und entfernt in dem Zuge auch bereits gesetzte Werte der nicht mehr unterstützten Attribute.


Diese Änderungen betreffen die AI Tagging Versionen 5.0 (supported ab Core Engine Version 4.0) und 4.0.1. 

Maschinelles Sehen:

  • Erkennen von Bildinhalten / Eigenschaften

  • Extrahieren von Metadaten zu den Bildinhalten: Kategorien, Schlagwörter, Beschreibung.

Beispiel: Maschinelles Sehen - Detailansicht DAM


Sprachunterstützung:

Maschinelles Sehen: Einfache Sprachunterstützung für Metadaten, im Produktstandard Englisch (US). Weitere Sprachen werden derzeit nicht unterstützt. 

Gesichtserkennung: Mehrfache Sprachunterstützung für Metadaten, im Produktstandard Deutsch und Englisch (US).


Modul Dateien:

Das AI-Tagging bezieht sich als Erweiterung für das Modul Dateien (DAM). 



Produktstandard

FEATURE ODER APP IST AUFPREISPFLICHTIG

Dieses Feature ist Bestandteil des 4ALLPORTAL Produktstandards und als 4App unter Beachtung der Lizenzbedingungen im Marketplace verfügbar.

Technische Bedingung - Microsoft Azure Cognitive Services

Verfügbarkeit eines vom Kunden bereitgestellten Microsoft Azure Server für den Dienst Cognitive Services.


Verbindungsdaten:

  • Subscription Key - Dienst Face
  • Subscription Key - Dienst Vision
  • Datacenter URL


Datenschutzbedingungen

Kunden haben, aufgrund von Datenschutzbestimmungen, den Microsoft Azure Server zur Anbindung an ihr 4ALLPORTAL, selbst zu bestellen.
Es darf kein vom 4ALLPORTAL bestellter Microsoft Azure Server an ein Kundensystem angebunden werden.


Kundeneigene Daten/Dateien dürfen nicht auf 4ALLPORTAL-eigene Microsoft Azure Server übergeben werden. 



Installation und Betrieb

Die Installation erfolgt über das App Management des 4ALLPORTALs. Durch das Hinzufügen der AI-Tagging App aus dem Marketplace, wird das Repository "4allportal-azure-cognitive" dem App Management hinzugefügt. Die Aktivierung im System sowie das Beziehen von App-Updates ist damit über das App Management möglich.


Die Installation der AI-Tagging App beinhaltet:

  • API-Anbindung für den Dienst Microsoft Azure - Cognitive Services
  • Admin Snapin "Microsoft Cognitive Services" unter DAM  
  • Implementierung der Module "Gesichtserkennung Markup", "Objektmarkierungen",  "Objekte (AI)"
  • Implementierung der Subpanels "Dateien in denen dieser Kontakt zu finden ist", Feld "ai_celevrity" und Layoutkonfiguration im Kontakt-Modul
  • Implementierung des Moduls AI-Object
  • Implemetiereung von AI-spezifischen Metadatenfelder und Object-Renderer im Dateien-Module


Durchzuführende manuelle Installation:

  • Konfiguration von Suchfeldern (auf Bedarf)
  • Konfiguration der Rollenrechte


Rollenrechte:

  • Modul "Objekte (AI)": Zugriff auf das Modul erlauben / einschränken

  • Modul "Gesichtserkennung Markup": Zugriff für die Gesichtserkennung-Markups auf dem Vorschaubild erlauben / einschränken

  • Modul "Objektmarkierungen": Zugriff auf die Objekterkennung-Markups auf dem Vorschaubild erlauben / einschränken
    Zugriff auf "Ansehen" zur Darstellung der Markups notwendig.

    HINWEIS: Die Objekterkennung für das AI-Tagging nutzt das gleiche Markup-Modul wie das Modul "Freigaben".






Individualisierung


Es bestehen folgend Individualisierungsmöglichkeiten:

  • Sichtbarkeit von Metadaten und MarkUps über Rollenrechte steuern
  • Individualisierung der Standard-Metadatenfelder
  • Aktivieren und deaktivieren einzelner Azure Cognitive Dienste






Lizenzmodell


FEATURE ODER APP IST AUFPREISPFLICHTIG

FEATURE ODER APP ENTHÄLT KOSTEN FÜR DIE INITIALE KONFIGURATION