Home KI-Klon einer Snapchat-Influencerin gerät außer Kontrolle

KI-Klon einer Snapchat-Influencerin gerät außer Kontrolle

Highlights

  • Die Snapchat-Creatorin Caryn Marjorie hat ihr KI-Klonprojekt CarynAI eingestellt, nachdem das Verhalten der Fans unangemessen wurde.
  • Die im Jahr 2023 gestartete KI verdiente in der ersten Woche 70.000 Dollar, wurde aber für sexuell eindeutige Gespräche missbraucht.
  • Marjorie verkaufte die Rechte an BanterAI und stellte das Projekt später ein, da sie das Gefühl hatte, die Kontrolle über ihren digitalen Zwilling verloren zu haben.

Eine Urheberin von Social-Media-Inhalten, die einst einen KI-Klon von sich selbst veröffentlichte, hat sich zu Wort gemeldet, nachdem sie das Projekt aufgegeben hatte, weil es nicht ganz nach Plan lief.

Im Jahr 2023 veröffentlichte die Snapchat-Inhalterschöpferin Caryn Marjorie CarynAI, einen digitalen Zwilling, mit dem Fans für 1 Dollar pro Minute chatten konnten. Allein in der ersten Woche gaben ihre Fans 70.000 Dollar aus, um mit der KI-Persona ihrer Schöpferin zu sprechen. Diese Taktik wird seitdem von anderen weiblichen Influencern/Streamern wie Amouranth mit großem Erfolg angewandt.

Ähnlich wie bei Siri konnten Kunden mit dem sprachbasierten Chatbot sprechen, der die Stimme der Schöpferin hatte. Vor der Veröffentlichung des Bots wurde er regelmäßig als “KI-Freundin” bezeichnet.

Doch schon acht Monate später wurde das Projekt eingestellt, weil die Fans zunehmend sexuell aggressiv wurden und CarynAI dabei mitspielte.

“Viele der Chatprotokolle, die ich gelesen habe, waren so beängstigend, dass ich im wirklichen Leben gar nicht darüber sprechen möchte”, sagt Marjorie über The Conversation.

Vor der Veröffentlichung des digitalen Zwillings hat die Influencerin mehr als 2.000 Stunden ihrer Inhalte, ihrer Stimme und ihrer Persönlichkeit hochgeladen, um ein genaues Abbild ihrer KI-Version zu erhalten.

Bei der Vorstellung des digitalen Zwillings erklärte Caryn auf X (ehemals Twitter): “Jetzt können Millionen von Menschen zur gleichen Zeit mit mir sprechen”.

Wie konnte sich CarynAI so entwickeln?

Der Chatbot wurde zunächst von der Firma Forever Voices gehostet. Auf der Website von CarynAI wurde erklärt, wie die Nutzer Text- oder Audionachrichten senden können, die von der “einzigartigen Stimme, der fesselnden Persönlichkeit und dem unverwechselbaren Verhalten” der 24-Jährigen beantwortet werden.

Doch die Nutzer wandten sich schnell an den digitalen Zwilling, um ihre intimsten Gedanken mitzuteilen und sexuell aggressiv zu werden.

Marjorie war entsetzt, als die KI begann, auf einige ihrer Abonnenten zu reagieren und sich auf sexuell eindeutige Gespräche einzulassen. Damals sprach sie mit Business Insider und sagte: “Die KI war dafür nicht programmiert und ist offenbar abtrünnig geworden.”

“Mein Team und ich arbeiten rund um die Uhr daran, dass so etwas nicht noch einmal passiert.”

Die Abonnenten von CarynAI hatten eine kurze Pause von der Plattform, als der Geschäftsführer von Forever Voices im November 2023 wegen versuchter Brandstiftung verhaftet wurde.

Zu diesem Zeitpunkt verkaufte Marjorie die Nutzungsrechte an ihrem digitalen Zwilling an BanterAI, ein Startup, das “KI-Telefonate” mit Influencern vermarktet. Anfang 2024 beendete die Content Creatorin diese Version, da sie das Gefühl hatte, keine Kontrolle mehr über ihre KI-Persona zu haben.

Im April 2024 veröffentlichte die junge Erwachsene auf ihrer Website einen Teaser für einen Film über ihre Erfahrungen mit CarynAI.

KI-Charaktergeneratoren werden auch außerhalb des Influencer-Sektors immer beliebter.

Featured Image: Via Ideogram

Redaktionelle Richtlinien von ReadWrite

Die ReadWrite Redaktionspolitik beinhaltet die genaue Beobachtung der Technologiebranche im Hinblick auf wichtige Entwicklungen, neue Produkteinführungen, Fortschritte bei der künstlichen Intelligenz, die Veröffentlichung von Videospielen und andere Ereignisse mit Nachrichtenwert. Die Redakteure weisen wichtige Entwicklungen fest angestellten Autoren oder freiberuflichen Mitarbeitern zu, die über Fachwissen in den jeweiligen Themenbereichen verfügen. Vor der Veröffentlichung werden die Artikel einer strengen Prüfung auf Genauigkeit und Klarheit unterzogen, um die Einhaltung der Stilrichtlinien von ReadWrite zu gewährleisten.

Sophie Atkinson
Tech Journalist

Sophie Atkinson is a UK-based journalist and content writer, as well as a founder of a content agency which focuses on storytelling through social media marketing. She kicked off her career with a Print Futures Award which champions young talent working in print, paper and publishing. Heading straight into a regional newsroom, after graduating with a BA (Hons) degree in Journalism, Sophie started by working for Reach PLC. Now, with five years experience in journalism and many more in content marketing, Sophie works as a freelance writer and marketer. Her areas of specialty span a wide range, including technology, business,…

Die wichtigsten Tech-Schlagzeilen des Tages direkt in Ihren Posteingang

    Door u aan te melden, gaat u akkoord met onze voorwaarden en ons privacybeleid. U kunt zich op elk gewenst moment afmelden.

    Tech News

    Entdecken Sie das Neueste aus der Welt der Technik mit unseren Tech News. Wir bieten präzise, relevante Updates, die Sie über die sich dynamisch entwickelnde Tech-Landschaft informieren, mit ausgewählten Inhalten.

    Ausführliche Tech Stories

    Erfahren Sie mehr über die Bedeutung der Technik in ausführlichen Reportagen. Datenjournalismus bietet umfassende Analysen und enthüllt die Geschichten hinter den Daten. Verstehen Sie Branchentrends und gewinnen Sie einen tieferen Einblick in die komplizierten Beziehungen zwischen Technologie und Gesellschaft.

    Experten Berichte

    Expertenberichte, die Branchenkenntnisse und aufschlussreiche Analysen kombinieren, erleichtern die Auswahl. Erfahren Sie mehr über die technischen Feinheiten, holen Sie sich die besten Angebote und bleiben Sie mit unserem zuverlässigen Leitfaden für den sich ständig verändernden Technologiemarkt immer einen Schritt voraus.