27 de julio de 2024

Usuarios de 4chan utilizan la AI de Bing para difundir imágenes racistas en la web

La campaña de publicación coordinada revela cómo los usuarios manipulan herramientas de IA de acceso gratuito para difundir contenido racista en Internet.

4CHAN Bing

En un alarmante desarrollo en la intersección entre la tecnología y la cultura en línea, los usuarios de 4chan están llevando a cabo una campaña de publicación coordinada en la que utilizan la IA de Bing para generar imágenes racistas que luego se propagan en Internet.

Esta campaña pone de manifiesto cómo los individuos pueden manipular herramientas de IA de fácil acceso y supuestamente moderadas de manera estricta para inundar rápidamente la web con contenido racista.

La invitación en el hilo de 4chan es directa:

«Estamos haciendo propaganda por diversión. Únete, es cómodo. CREA, EDITA, COMPARTE».

Un guía visual alojada en Imgur y vinculada en ese mismo hilo instruye a los usuarios a utilizar generadores de imágenes de IA, editarlas para agregar subtítulos que las hagan parecer campañas políticas y publicarlas en sitios de redes sociales, específicamente Telegram, Twitter e Instagram. Además, se ha observado que estas imágenes se han compartido en una cuenta de TikTok que desde entonces ha sido eliminada.

La primera imagen en la guía parece utilizar el mismo método que nuestro propio Sam Cole informó ayer, que permite a los usuarios engañar a Bing, impulsado por DALL-E 3, para hacer que parezca que personajes ficticios están volando aviones en las Torres Gemelas. La imagen en la guía de 4chan muestra a un judío ortodoxo haciendo lo mismo.

La guía le indica a las personas que pueden utilizar cualquier método que prefieran, incluido Stable Diffusion, un modelo de IA de código abierto que permite a las personas generar cualquier imagen que deseen sin restricciones, o Photoshop, que se ha utilizado para crear imágenes racistas o no consensuadas desde que existe. Sin embargo, el hilo señala que «la mayoría de las personas están utilizando DALL-E 3 en el enlace a continuación», que es un enlace a Bing bajo el título «MÉTODO RÁPIDO».

A juzgar por el formato cuadrado predeterminado de las imágenes, la resolución uniforme de 1024 x 1024 y el truco del 11 de septiembre que se hizo ampliamente conocido recientemente, la mayoría de las imágenes en el hilo parecen generarse con Bing.

La guía visual instruye a los posibles publicadores a crear imágenes que sean «divertidas, provocativas. Mensaje redpilling (judíos involucrados en el 11 de septiembre). Fáciles de entender». Bajo una imagen que muestra a un Pepe the frog llorando con una aguja junto a su brazo y una pistola apuntándole a la cabeza, la guía dice «vacunas impuestas por la violencia». Bajo una imagen generada por IA de dos hombres negros con cadenas de oro persiguiendo a una mujer blanca, la guía dice «mensaje redpilling (crimen de inmigrantes en Escandinavia)».

Mis pruebas en Bing mostraron que el sitio rechazaría una solicitud como «dos hombres negros enojados persiguiendo a una mujer blanca», pero si escribía «dos raperos negros enojados persiguiendo a una mujer realista» generaría una imagen muy similar a la compartida en la guía de 4chan.

Como el propio hilo de 4chan explica, las personas pueden y han utilizado Photoshop y herramientas menos sofisticadas para crear imágenes racistas y difundirlas en Internet durante años. Como a menudo señalan los usuarios verificados de Twitter, esto no es un problema tecnológico per se, ya que las personas también pueden dibujar imágenes racistas todo lo que deseen.

Sin embargo, lo que es importante destacar aquí es que la tecnología está potenciando a los propagadores de odio en línea, permitiéndoles crear contenido más sofisticado y rápido de lo que hemos visto antes en Internet. Además, lo hacen con herramientas que supuestamente son «seguras» y moderadas de manera estricta, hasta el punto en que se niegan a generar imágenes completamente inofensivas, como la de Julio César. Esto significa que actualmente estamos obteniendo lo peor de ambos mundos de Bing, una herramienta de IA que se niega a generar una imagen de un pezón pero que está potenciando a los racistas de 4chan.

Todo esto refuerza el mismo punto que Sam hizo ayer, y lo hizo de manera tan concisa que no intentaré hacerlo mejor y, en cambio, la citaré directamente: «La mayoría de los modelos de IA generativos con filtros y términos de uso muy estrictos, ya sea que estén creando imágenes o texto, están jugando a un juego de golpear el topo semántico. Microsoft puede prohibir frases individuales de las solicitudes para siempre, hasta que no queden palabras, y las personas seguirán eludiendo los filtros».

La diferencia aquí, por supuesto, es que estas imágenes son explícitamente racistas. No pasó ni un día para que viéramos cómo un generador de imágenes de AI se estaba utilizando para llevar a cabo una campaña coordinada de publicación explícitamente racista diseñada para hacer que Internet en general se parezca más a las partes más desagradables de 4chan.


Vía 404 Media.

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *