martes 15 de octubre de 2024
Lo mejor de los medios

Por qué no funcionan los resúmenes de noticias generados por Inteligencia Artificial

Aunque la Inteligencia Artificial ofrece ventajas, al mismo tiempo plantea retos y consideraciones éticas, especialmente en la recopilación diaria de noticias. Los robots de IA como ChatGPT, Chatsonic, Perplexity, Copilot y Gemini muestran incoherencias a la hora de obtener las noticias diarias.

Un interesante experimento se propuso utilizar la IA generativa para obtener resúmenes de noticias diarias. ¿El resultado? Los chatbots ofrecen respuestas diversas debido a las diferencias en la interpretación de los mensajes, las limitaciones en tiempo real y el contexto.

Veamos los resultados caso a caso.

ChatGPT

La versión gratuita de ChatGPT incorpora GPT-4, el modelo de IA mejorado de OpenAI. Aunque la versión gratuita de GPT-4 puede conectarse a Internet, tiene un límite de 16 preguntas en un periodo de 24 horas, tras el cual vuelve al antiguo modelo GPT-3.5.
Normalmente, consultar las noticias del día con GPT-4 es útil. Como sólo hace una pregunta, como «Por favor, dame los titulares de las noticias de hoy» o similar, no utiliza gran parte de la asignación libre para el modelo más potente. Por supuesto, se puede buscar información específica, pero eso se comerá tus límites diarios. También vale la pena señalar que si has utilizado tu asignación diaria de mensajes GPT-4, pedir a GPT-3.5 una actualización diaria de noticias es básicamente inútil, ya que no tiene una conexión activa a Internet, y su corte de datos de entrenamiento es abril de 2023.

Pedir a ChatGPT las noticias diarias o algunos de los titulares más destacados del día resultó útil en la mayoría de los casos, aunque existen algunas limitaciones claras a la hora de elegir las fuentes, detallarlas con precisión y proporcionar una gama de fuentes diferentes. Por ejemplo, ChatGPT proporciona rápidamente algunos de los titulares más destacados, lo que está muy bien, pero la URL proporcionada como fuente nunca enlaza con ninguna página específica, aunque haga referencia a un acontecimiento concreto.

También sugiere noticias antiguas, y eso no es una limitación del punto de corte de los datos. Este no es un tema menor: si nos presenta una nota que tiene 30 días de antiguedad como algo «actual», la IA está fallando de manera importante.

Chatsonic

Al igual que ChatGPT, Chatsonic respondió decentemente a las solicitudes de titulares de noticias y actualizaciones diarias de noticias. Además, cubría un buen abanico de temas, como actualidad, política, negocios, tecnología y entretenimiento. Ofrece un breve resumen de la noticia, lo que resulta útil para saber qué quieres leer.

Sin embargo, la variedad de fuentes de Chatsonic era un poco dudosa. Por ejemplo, en una búsqueda se utilizó el Hindustan Times (un diario de India). Aunque se encuentra al otro lado del mundo, es una publicación de larga tradición. Su segunda fuente fue el Dryden Wire, «el medio de noticias digital número 1 del noroeste de Wisconsin». Sin dudas, una decisión un poco extraña.

Perplexity

La oferta de noticias diarias de Perplexity también resultó algo útil; cada vez que le preguntamos por las noticias diarias, ofrecía una serie de titulares de las últimas semanas, algunos de los cuales eran literalmente noticias de última hora.

Por ejemplo, al preguntar específicamente: «¿Podrías darme los titulares de las noticias de hoy de Estados Unidos?», apareció un titular que se refería al tiroteo en un acto de campaña de Donald Trump que tuvo lugar el 13 de julio de 2024, un mes antes de la búsqueda. Por el contrario, el siguiente titular se refería a la denuncia del sindicato United Auto Workers contra Donald Trump y Elon Musk, que tuvo lugar horas antes de la búsqueda (el 13 de agosto de 2024).

Una búsqueda de los titulares de las noticias del Reino Unido arrojó resultados similares y variados. Los titulares incluían un trágico atentado y la condena de un personaje polémico, ambos ocurridos semanas antes.

Con Perplexity, parece que hay que probar un par de indicaciones diferentes para obtener la información más precisa. Cuando encontramos la combinación adecuada, a pesar del titular erróneo, el resto de los titulares eran precisos y estaban relacionados con los acontecimientos del día o del periodo anterior de 24-48 horas.

Microsoft Copilot

Es muy buena la selección de titulares y fuentes de Copilot, aunque su variedad de temas y número de titulares es inferior a Perplexity. No obstante, todos los titulares eran actuales y cubrían noticias del día o de las 24-48 horas anteriores.

Por otro lado, sus descripciones eran increíblemente breves y concisas, lo que no resulta útil como forma directa de leer las noticias. Por supuesto, es útil como punto de partida, pero un resumen de una sola línea de una noticia probablemente compleja no le hace justicia.

Géminis

De todos los chatbots de inteligencia artificial probados para las noticias diarias, Gemini es quizás el mejor, aunque, al igual que con las otras opciones, realmente depende de la pregunta que le hagas.

Una pregunta general sobre los titulares del día no proporciona mucha información, ya que suele ofrecer cuatro o cinco titulares sin apenas análisis. Sin embargo, cuando se le pide que proporcione más información o que ofrezca noticias con un poco más de esquema, lo hace debidamente. Del mismo modo, al preguntar a Gemini por los titulares generales de tecnología, obtenía noticias antiguas, que se remontaban a semanas atrás. Sin embargo, al cambiar la pregunta a «¿Cuáles son los titulares de tecnología de hoy, por favor?», se obtuvo la lista más precisa de noticias recientes y de última hora de todos los chatbots evaluados.

El único inconveniente es el enfoque general de Gemini respecto a las fuentes. En lugar de proporcionar un enlace individual a cada fuente de noticias, lanza una lista de fuentes al final de su respuesta, dejando que el usuario busque la URL específica que necesita.

4 razones para no confiar tanto en los bots

Aunque la IA puede proporcionar un punto de partida decente para la información de noticias, los chatbots de IA también encuentran limitaciones significativas que hay que tener en cuenta.

Falta de matiz: La IA puede tener dificultades para proporcionar resúmenes completos y precisos de los acontecimientos noticiosos. Las actualizaciones diarias de noticias carecen de contexto y no reflejan el peso emocional de las historias, mientras que la IA tiene dificultades para captar emociones humanas como el dolor, la alegría o la ira.
Incoherencia: Aunque está mejorando, no se puede esperar el mismo resultado de la misma noticia, ni siquiera utilizando la misma herramienta de IA. Es probable que se pierdan titulares, que aparezcan titulares incorrectos, etc.
Cobertura limitada: Como se ha visto anteriormente, la gama de noticias que proporciona un chatbot de IA es limitada, incluso con conexión a Internet. El chatbot de IA también puede utilizar fuentes dudosas. Por extensión, es probable que se pierda temas de nicho.
Alucinación: Uno de los mayores problemas es la alucinación de la IA, en la que el modelo de IA inventa información y la presenta como un hecho. A medida que mejoran los modelos generativos de IA, la alucinación es cada vez menos problemática, pero cuando se trata de noticias, uno quiere saber si la información que lee es exacta.

En resumen, la IA puede servir para algunas cosas. Pero para mantenerse informado, leer las noticias en nuestro sitio web favorito sigue siendo -al menos por ahora- la mejor opción.

Vía

Lo último