Eine KI-„Poesiekamera“ verwandelt Bilder in Worte. Es ist im Wesentlichen eine Umkehrung des aktuellen Trends, Bilder aus Texteingaben zu generieren.
Generative KI schreibt jetzt Haikus, um Bilder zu beschreiben
Die generative künstliche Intelligenz (Gen AI) hat sich rasant weiterentwickelt. Internetnutzer haben Gen AI übernommen und verwenden ihre Worte, um Bilder und Videos zu erstellen. Berichten zufolge hat ein neues Projekt jedoch Gen AI genutzt, um den Prozess umzukehren.
Anstatt Gen AI zu verwenden, um Textaufforderungen in Bilder, Videos oder Musik umzuwandeln, verfasst eine neue 3D-gedruckte Kamera Gedichte auf der Grundlage visueller Eingaben. Mit anderen Worten: Anstatt Bilder zu erzeugen, betrachtet Gen AI nun Menschen, Objekte und andere visuelle Aspekte und beschreibt sie dann in Form von Haikus oder kurzen Gedichten.
今天候机的时候看到一款很特别的„AI 硬件“产品,给我留下了深刻印象.
先介绍一下这款产品, 它叫诗歌相机 (Poesie).用户按下快门之后.
完成拍摄后, 相机吐出的不是相纸, 而是一张印有一首诗歌的小纸条, 就好像拍立得当场洗出了一张照片.#KI pic.twitter.com/ektsYRtuPB– 智见AI (@shadouyoua) 5. Mai 2024
Die „Poetry Camera“ druckt ein kurzes und vermeintlich einzigartiges Einzelgedicht auf Thermopapier aus. Es nutzt das Sprichwort „Ein Bild sagt mehr als tausend Worte“ und weist die Gen-KI damit an, ein Kurzgedicht zu verfassen, das großzügig mit Metaphern gespickt ist.
Die Macher der Poetry Camera veröffentlichen monatliche Updates in ihrem Newsletter. Sie versprechen eine limitierte Auflage der Kamera.
Es gibt keinen bestätigten Zeitplan für die kommerzielle Veröffentlichung von Poetry Camera. Die Macher machen keine Andeutungen über den Preis. Interessierte könnten jedoch eines erstellen, wenn sie möchten.
Wie nutzt die Poetry Camera Gen AI, um Gedichte zu weben?
Die Entwickler der Poetry Camera verbergen ihre Technologie nicht. Für alle, die daran interessiert sind, ihre eigene Poetry Camera zu bauen und sie sogar zu personalisieren, haben sie detaillierte Anleitungen bereitgestellt.
Das Herzstück der Poetry Camera ist ein Raspberry Pi SBC (Single-Board Computer). Konkret verwenden sie den Raspberry Pi Zero 2 W, was überraschend ist, da dieser nicht viel Rechenleistung und RAM bietet.
Ich habe vor, diese Poesiekamera zu bauen. Es ist so eine coole Idee! Im Grunde handelt es sich um einen Raspberry Pi Zero 2 W mit einem laufenden Kameramodul @OpenAIGPT-4-Modell zur Analyse des Fotos; Anschließend druckt es ein Gedicht aus, das auf den visuellen Hinweisen basiert. https://t.co/TakMJUdYgb
– Chad Mairn (@cmairn) 2. Mai 2024
Der Pi Zero 2 W ist mit dem Pi Camera-Modul 3 gekoppelt. Wie aus der Anleitungsseite hervorgeht, haben sich die Poetry Camera-Entwickler für die Gen-AI-Basis auf Open-Source-Software und GPT-4 verlassen. Sie haben das Kameragehäuse, in dem sich auch ein Akku befindet, in 3D gedruckt.
Im 3D-gedruckten Gehäuse ist ein Thermodrucker eingebettet, der der Fujifilm Instax-Sofortbildkamera ähnelt. Das bedeutet, dass es sich bei der Poetry Camera um einen tintenlosen „Foto“-Drucker handelt, der zum Ausdrucken von Gedichten lediglich eine Rolle Papier benötigt.