Das AI-Tagging erweitert das Modul "Dateien" um die automatische Analyse von Bildern und das automatische Speichern von Metadaten.
Dafür nutzt es die Microsoft Azure Cognitive Services:
Nach dem Upload einer Bilddatei übergibt das 4ALLPORTAL diese automatisch an Microsoft Azure Cognitive Services, das die Bildanalyse durchführt.
Die extrahierten Metadaten und Positionierungsdaten für eine Markierung des Gesichtes auf dem Bild werden zurück an das 4ALLPORTAL übergeben und an der entsprechenden Bilddatei verschlagwortet.
Bild mit vier automatisch gesetzten Markierungen und gespeicherten Metadaten
Die verwendeten Dienste von Microsoft Azure Cognitive Services sind:
erkennt menschliche Gesichter in Bildern
markiert Gesichter über ein editierbares Markup in der Detailansicht
Sprachunterstützung: Deutsch und Englisch
erkennt Bildinhalte und Objekte
erstellt automatisch Kategorien, Schlagwörter und Beschreibungen
Sprachunterstützung: Englisch
Bitte beachte
Das Feature AI-Tagging muss separat installiert werden (Installation & Aktivierung).
Die Nutzung des AI Taggings ist nur mit einer vorhandenen Anbindung an den Microsoft Azure Server möglich (technischen Voraussetzungen).
Dein Administrator kann einzelne Dienste/Funktionen deaktivieren.
Gesichtserkennung
Die Gesichtserkennung erkennt menschliche Gesichter in Bildern. Erkannte Gesichter erhalten eine Markierung auf dem Bild in der Detailansicht.
ein Klick auf eine Gesichtsmarkierung öffnet das Pop-Up mit den Metadaten
Metadaten anzeigen und bearbeiten
Öffne ein Bild mit Person/Gesicht in der Detailansicht.
Klicke auf den Rand der Markierung, um die erkannten Metadaten zu öffnen.
Ein Pop-up-Fenster zeigt die Informationen zum erkannten Gesicht.
Metadaten: Diese Metadaten kannst du bei Bedarf bearbeiten (Beispiel: "Brille" per Dropdown Menü)
Kontakt: Du kannst hier einen Kontakt manuell hinzufügen. Diese Option gehört nicht zur automatischen Gesichtserkennung.
Markierung bearbeiten
Du kannst die Gesichtsmarkierungen jederzeit anpassen:
Öffne ein Bild mit Person/Gesicht in der Detailansicht.
Fahre mit der Maus über die Markierung. Die Eckpunkte zur Größenanpassung erscheinen.
Ziehe einen Eckpunkt mit gedrückter Maustaste und lass wieder los.
Die neue Position wird automatisch gespeichert.
Markierung löschen
So entfernst du eine Gesichtsmarkierung:
Öffne ein Bild mit Person/Gesicht in der Detailansicht.
Wähle die Markierung aus und drücke die Taste "entf".
Die Markierung und die zugehörigen Metadaten werden gelöscht.
Datenschutz
Diese Funktion erkennt Gesichter, identifiziert aber keine Personen. Es werden keine personenbezogenen Daten erzeugt.
Seit Juni 2023 werden folgende Attribute nicht mehr erkannt/gespeichert:
Alter, Geschlecht, Lächeln, Stimmung
Augen Make-Up, Lippen Make-Up
Gesichtsbehaarung, Haarfarbe, kahl (Kopfbehaarung vorhanden)
Maschinelles Sehen
Das maschinelle Sehen analysiert Bilder nach dem Upload und erkennt Objekte, Szenen und Eigenschaften.
Die erkannten Informationen werden automatisch als Metadaten in folgenden Feldern in der Detailansicht eines Bildes (Gruppe: "AI-Tagging") gespeichert:
Metadaten bearbeiten
Die Genauigkeit der Bildanalyse hängt von der Leistung des Azure-Dienstes ab.
In Einzelfällen können Metadaten daher ungenau sein.
Du kannst die automatisch erzeugten Metadaten darum jederzeit bearbeiten, ergänzen oder entfernen.
Tipp
Mit der Aktion "Vorschau neu berechnen" kannst du die Bildanalyse erneut ausführen. Dabei wird auch die Gesichtserkennung neu berechnet.
Je nach Systemkonfiguration benötigst du dafür Administrationsrechte.
automatisch erkannte und gespeicherte Metadaten
Sprachunterstützung
Die Verschlagwortung der extrahierte Metadaten erfolgt standardmäßig auf Englisch (US). Weitere Sprachen werden derzeit nicht unterstützt.
Kategorien (AI-Categories)
Über die Metadaten im Feld "Kategorien" werden Bilder thematisch eingeordnet.
Zum Beispiel:
outdoor
people_group
people_portrait
Beschreibung (AI-Caption)
Über die Metadaten im Feld "Beschreibung" erhalten Bilder eine kurze Beschreibung.
Zum Beispiel:
a group of people sitting on a bench
Diese Beschreibung hilft dir bei der Suche nach Bildinhalten.
Schlagworte (AI-Tags)
Über die Metadaten im Feld "Schlagworte" werden Objekte und Eigenschaften des Bildes beschrieben. Zum Beispiel:
woman
park
sitting
Diese Schlagwörter erleichtern dir die Suche nach Objekten oder Szenen.
Objekte (AI)
Über die Metadaten im Feld "Objekte (AI)" werden die konkrete Objekte des Bildes erfasst. Zum Beispiel:
Kitchen utensil
Food
Vegetable
Brokkoli
Die hier erfassten Objekte werden im Modul "AI-Objekte" gelistet und strukturiert.
Textzeichenerkennung (OCR)
Über die Metadaten im Feld "Textzeichenerkennung (OCR)" werden, wenn vorhanden, Textinhalte erfasst. Zum Beispiel:
Flughafen
MUC
Abflug
Das Modul AI-Objekte
Eine Übersicht über alle bisher erkannten AI-Objekte findest du im Modul "AI-Objekte". Hier werden alle AI-Objekte automatisch erfasst und strukturiert.
In der Hauptansicht siehst du die AI-Objekte als Liste und in einer Baumstruktur.
Du kannst AI-Objekte jederzeit ergänzen, korrigieren oder löschen.
automatisch erstellte Baumstruktur der bisher erkannten AI-Objekte
Öffne ein AI-Objekt in der Detailansicht, um alle mit diesem AI-Objekt verknüpften Dateien zu sehen und manuell weitere Dateien hinzuzufügen:
füge Dateien über die Link-Schaltfläche oder das Drei-Punkte-Menü hinzu
Installation & Aktivierung
Die Installation und Aktivierung kann nur ein Administrator vornehmen.
Technische Voraussetzung
Um das AI-Tagging nutzen zu können, wird ein vom Kunden bereitgestellter Microsoft Azure Server für den Dienst Cognitive Services mit folgenden Verbindungsdaten benötigt:
Data Center URL
Subscription Key – Face
Subscription Key – Vision
Datenschutzbestimmungen
Es darf kein vom 4ALLPORTAL bereitgestellter Microsoft Azure Server an ein Kundensystem angebunden werden.
Kundeneigene Daten/Dateien dürfen nicht auf 4ALLPORTAL-eigene Microsoft Azure Server übergeben werden.
Installation
Die Installation erfolgt über das App Management im 4ALLPORTAL:
Öffne das App Management.
Installiere die AI-Tagging App aus dem Marketplace.
Das Repository "4allportal-azure-cognitive" wird automatisch hinzugefügt.
Aktiviere die App und starte das System neu.
Updates erhältst du ebenfalls über das App Management.
Die Installation der AI-Tagging App beinhaltet:
API-Anbindung für den Dienst Microsoft Azure Cognitive Services (Website)
Admin Snap-In DAM > Microsoft Cognitive Services Konfiguration
Module: "Gesichtserkennung Markup", "Objektmarkierungen", "Objekte (AI)"
Modul "Kontakte": neues Subpanel "Dateien, in denen dieser Kontakt zu finden ist", neues Feld "ai_celebrity", Layoutkonfiguration
Modul "Dateien": AI-spezifische Metadatenfelder in der Detailansicht
Weiterführende Informationen
technische Dokumentation: AI-Tagging
Aktivierung
Nach der erfolgreichen Installation steht das Admin Snap-in "DAM > Microsoft Cognitive Services Konfiguration" zur Verfügung.
Hier müssen die kundenspezifischen Verbindungsdaten hinterlegt und die Funktion über den Schalter "Cognitive Services aktivieren" aktiviert werden (Standard: nicht aktiv).
Einzelne Dienste können separat ein- und ausgeschaltet werden.
Sind die Cognitive Services aktiviert, werden sie ab jetzt für alle hochgeladenen Bilder angewandt.
in dieser Konfiguration wurden alle Dienste aktiviert
Bestehende Bilder
Um bestehende Bilder zu berücksichtigen, muss für sie die Vorschau neu berechnet werden.
Rollenrechte
Modul "Objekte (AI)"
Zugriff auf das Modul erlauben/einschränken
Modul "Gesichtserkennung Markup"
Zugriff für die Gesichtserkennung-Markups in der Detailansicht erlauben/einschränken
Modul "Objektmarkierungen"
Zugriff auf die Objekterkennung-Markups in der Detailansicht erlauben/einschränken
Zugriff auf "Ansehen" zur Darstellung der Markups notwendig.
Bitte beachte: Die Objekterkennung für das AI-Tagging nutzt das gleiche Markup-Modul wie das Modul "Freigaben".
💡 Häufige Fragen (FAQ)
Wann startet die Bildanalyse?
Die Analyse beginnt automatisch nach dem Upload eines Bildes.Kann ich AI-Metadaten bearbeiten?
Ja. Automatisch erzeugte Metadaten kannst du jederzeit ändern oder entfernen.Werden Personen automatisch erkannt?
Nein. Die Funktion erkennt nur Gesichter, identifiziert aber keine Personen.Kann ich erkannte Gesichter mit Kontakten verknüpfen?
Ja. Du kannst Gesichter manuell mit Kontakten aus dem Kontakt-Modul verbinden.In welcher Sprache werden Metadaten erstellt?
Die automatische Verschlagwortung erfolgt standardmäßig auf Englisch (US).