Fakeprofile und gezielte Falschinformationen sind auf Social Media keine Neuigkeit. Aber die Qualität dieser Inhalte wird immer besser — strategisch, inhaltlich und ästhetisch. Das liegt an der massiven Weiterentwicklung von KIs und ihrer leichten Zugänglichkeit.
So hat die italienische Überwachungsfirma Cy4Gate ein Netzwerk von mehr als 900 KI-generierten Fake Profilen geschaffen, die wie Demonstrat:innen, Journalist:innen und junge Frauen wirkten.
“Our latest research found Cy4Gate using fake accounts with GAN profile photos, likely to scrape public information about its targets.”
Das berichtet Meta in seinem vierteljährlichen “Threat Report”. Diese Targets waren vor allem Journalist:innen und politische Aktivist:innen. Meta hat diese Profile gelöscht. Der Tech-Gigant verweist aber darauf, dass das Problem mit den KI-generierten Fake-Profilen immer stärker wird:
“Since 2019, we’ve seen a rapid rise in the number of networks that used profile photos generated using artificial intelligence techniques like generative adversarial networks (GAN). This technology is readily available on the internet, allowing anyone — including threat actors — to create a unique photo.”
Netzwerke wie die von Cy4Gate werden als Cooridnated Inauthentic Behaviour bezeichnet:
“CIB is a manipulative communication tactic that uses a mix of authentic, fake, and duplicated social media accounts to operate as an adversarial network (AN) across multiple social media platforms.”
So erklärte es Monica Murero von der Universität Nepal 2023 in einem Frontiers-Artikel. Diese Netzwerke würden nicht “nur” der Spionage dienen, sondern auch der Manipulation:
“[It] “secretly” exploits technology to massively harass, harm, or mislead the online debate around crucial issues for society […].”
Diese Manipulation findet in vielen Fällen so subtil statt, dass sie User:innen auch über längeren Zeitraum kaum auffällt — und wird deshalb auch “Spamouflage” genannt. Expertin auf dem Gebiet ist die chinesische Gruppierung Dragonbridge. Ihre Inhalte sind von laienhafter Qualität und ohne politischen Content, dafür aber mit einer unterschwelligen Pro-China-Nachricht.