Microsoft hat ein Bilderkennungstool gestartet, mit dem versucht wird, den Inhalt eines Bilds zu beschreiben. Dieses Tool für künstliche Intelligenz befindet sich noch in der Entwicklungsphase und lernt ständig aus den von den Benutzern hochgeladenen Bildern.

In Bezug auf die Genauigkeit ist die Beschreibung manchmal ziemlich genau, während CaptionBot manchmal Beschreibungen anbietet, die nichts mit dem zu tun haben, was dargestellt wird. Es gibt auch Fälle, in denen die App aufgrund ihres rauen Status überhaupt keine Beschreibung bereitstellen kann.

Microsoft hat CaptionBot entwickelt, um mit mehr Erfahrung zu lernen, mit der Erwartung, dass seine Beschriftungen mit der Zeit genauer werden. Je mehr Bilder Benutzer hochladen, desto besser wird die App, wie CaptionBot selbst beschreibt:

Ich kann den Inhalt jedes Bildes verstehen und werde versuchen, es so gut wie jeden Menschen zu beschreiben. Ich lerne noch, also behalte ich dein Foto, aber keine persönlichen Daten.

CaptionBot verwendet drei Technologien, um zu beschreiben, was in einem Bild dargestellt wird: Microsoft Computer Vision, Emotion und Bing Image. Die Computer Vision API extrahiert umfangreiche Informationen aus Bildern, um visuelle Daten zu kategorisieren und zu verarbeiten sowie Text aus einem Bild zu identifizieren und zu extrahieren. Die Emotion API analysiert, wie der Name schon sagt, Gesichter, um eine Reihe von Gefühlen zu erkennen, darunter Wut, Verachtung, Ekel, Angst, Glück, Neutralität, Traurigkeit und Überraschung. Bing Image durchsucht das Web nach Bildern.

Wir haben CaptionBot getestet und die Ergebnisse waren in 50% der Fälle genau. Zum Beispiel haben wir zwei Bilder hochgeladen: eines mit einer Gaming-Maus, das andere mit einem Kartenstapel. In beiden Fällen schlug das Tool ein Mobiltelefon vor. Andererseits hat CaptionBot Menschen und Gesichter genau erkannt.

Anscheinend ist CaptionBot von Mobiltelefonen besessen. Ein Twitter-Nutzer berichtete, die App habe gedacht, Michelle Obama sei ein Handy. Weitere BildunterschriftenBot lustige Bildunterschriften finden Sie auf dieser Twitter-Seite.

Sie können CaptionBot auch hier testen. Probieren Sie es aus: Entweder helfen Sie dem Tool, sich zu verbessern, oder Sie haben ein gutes Lachen!