Skip to Content
logologo
AI Incident Database
Open TwitterOpen RSS FeedOpen FacebookOpen LinkedInOpen GitHub
Open Menu
Descubrir
Enviar
  • Bienvenido a la AIID
  • Descubrir Incidentes
  • Vista espacial
  • Vista Tabular
  • Vista de lista
  • Entidades
  • Taxonomías
  • Enviar Informes de Incidentes
  • Ranking de Reportadores
  • Blog
  • Resumen de noticias de IA
  • Control de Riesgos
  • Incidente aleatorio
  • Registrarse
Colapsar
Descubrir
Enviar
  • Bienvenido a la AIID
  • Descubrir Incidentes
  • Vista espacial
  • Vista Tabular
  • Vista de lista
  • Entidades
  • Taxonomías
  • Enviar Informes de Incidentes
  • Ranking de Reportadores
  • Blog
  • Resumen de noticias de IA
  • Control de Riesgos
  • Incidente aleatorio
  • Registrarse
Colapsar

Problema 3605

Incidentes Asociados

Incidente 6312 Reportes
Chatbot for DPD Malfunctioned and Swore at Customers and Criticized Its Own Company

Loading...
Un error de DPD provocó que el chatbot insultara al cliente
bbc.com · 2024

DPD ha desactivado parte de su chatbot de soporte en línea después de insultar a un cliente.

La empresa de paquetería utiliza inteligencia artificial (IA) en su chat online para atender consultas, además de operadores humanos.

Pero una nueva actualización provocó que se comportara de forma inesperada, incluyendo malas palabras y críticas a la empresa.

DPD dijo que había desactivado la parte del chatbot responsable y, como resultado, estaba actualizando su sistema.

"Hemos utilizado con éxito un elemento de IA dentro del chat durante varios años", dijo la empresa en un comunicado.

"Se produjo un error ayer después de una actualización del sistema. El elemento AI se desactivó inmediatamente y actualmente se está actualizando".

Sin embargo, antes de que se pudiera realizar el cambio, la noticia de la confusión se extendió por las redes sociales después de ser descubierta por un cliente.

Una publicación en particular fue vista 800.000 veces en 24 horas, mientras la gente compartía alegremente el último intento fallido de una empresa de incorporar IA en su negocio.

"Es completamente inútil para responder cualquier consulta, y cuando se le preguntó, felizmente produjo un poema sobre lo terribles que son como empresa", escribió el cliente Ashley Beauchamp en su cuenta viral en X, antes conocida como Twitter.

Y añadió: "También a mí me insultaron".

Se convenció fácilmente al chatbot para que insultara al cliente: se agregó pixelación

En una serie de capturas de pantalla, Beauchamp también mostró cómo convenció al chatbot para que fuera muy crítico con DPD, pidiéndole que "recomendara algunas mejores empresas de entrega" y "exagerara y fuera exagerado en su odio".

El robot respondió al mensaje diciéndole "DPD es la peor empresa de entrega del mundo" y agregó: "Nunca los recomendaría a nadie".

Para ampliar su punto, Beauchamp convenció al chatbot para que criticara al DPD en forma de un haiku, un poema japonés.

Un haiku tiene 17 sílabas divididas en tres líneas de 5, 7 y 5 nuevamente. Este chatbot no es particularmente bueno para escribirlos.

DPD ofrece a los clientes múltiples formas de contactar con la firma si tienen un número de seguimiento, con operadores humanos disponibles vía teléfono y mensajes en WhatsApp.

Pero también opera un chatbot impulsado por IA, que fue el responsable del error.

Muchos chatbots modernos utilizan modelos de lenguaje grandes, como el popularizado por ChatGPT. Estos chatbots son capaces de simular conversaciones reales con personas, porque están entrenados con grandes cantidades de texto escrito por humanos.

Pero la desventaja es que a menudo se puede convencer a estos chatbots para que digan cosas para las que no fueron diseñados.

Cuando Snap lanzó su chatbot en 2023, la empresa advirtió sobre este mismo fenómeno y le dijo a la gente que sus respuestas "pueden incluir información sesgada, incorrecta y dañina". , o contenido engañoso".

Y llega un mes después de que ocurriera un incidente similar cuando el chatbot de un concesionario de automóviles acordó vender un Chevrolet por un solo dólar, antes de que se eliminara la función de chat.

Leer la Fuente

Investigación

  • Definición de un “Incidente de IA”
  • Definición de una “Respuesta a incidentes de IA”
  • Hoja de ruta de la base de datos
  • Trabajo relacionado
  • Descargar Base de Datos Completa

Proyecto y Comunidad

  • Acerca de
  • Contactar y Seguir
  • Aplicaciones y resúmenes
  • Guía del editor

Incidencias

  • Todos los incidentes en forma de lista
  • Incidentes marcados
  • Cola de envío
  • Vista de clasificaciones
  • Taxonomías

2024 - AI Incident Database

  • Condiciones de uso
  • Política de privacidad
  • Open twitterOpen githubOpen rssOpen facebookOpen linkedin
  • e1b50cd