La IA no puede leer libros. Sin embargo, los está revisando de todas formas

La IA no puede leer libros, pero los revisa de todos modos.

Ahora que todos hemos tenido experiencia con los modelos de lenguaje grandes, sus limitaciones son demasiado visibles. Sí, pueden escribir. Pero su prosa no explota en la mente como lo hacen las palabras de Jennifer Egan, Emily St. John Mandel o David Foster Wallace. Sí, pueden hacer música. Pero Taylor Swift y Kendrick Lamar duermen muy bien por la noche. Y ciertamente pueden resumir la historia rápida y ordenadamente, pero no con la perspicacia de Barbara Tuchman o Ron Chernow. Sin embargo, los LLM están recién comenzando. Están destinados a mejorar.

Pero ¿cuánto mejor? Hemos visto múltiples casos en los que la IA ha conquistado regiones que se creían impenetrables por los robots, desde el ajedrez hasta el LSAT. ¿Podría hacer lo mismo en las artes creativas? Últimamente he estado obsesionado con esa pregunta. ¿Puede algo generado con IA ser verdaderamente brillante?

Texto sin formato

Dado eso, fui una presa fácil para un comunicado de prensa que recibí la semana pasada. El asunto decía: “¿Críticos de libros de IA?” El comunicado de prensa promocionaba “el primer libro jamás revisado por avatares de IA”. He escrito reseñas de libros y mis libros han sido revisados, y sé que los mejores ejemplos de ese arte son penetrantes e iluminadores. ¿Alguien había descifrado el código para hacer eso mediante IA?

Así que investigué más y descubrí que las supuestas “reseñas de libros” no eran exactamente lo que tenía en mente. Resulta que una agencia de relaciones públicas estaba promocionando una novela llamada The Cloud, uno de esos escenarios distópicos donde un humano heroico lucha contra gobernantes de IA, y la agencia había ideado algún truco de IA. Creó un conjunto de personajes generados por IA: un androide renegado, un viajero en el tiempo, etc., y esos personajes ofrecían evaluaciones del libro.

Suena genial, hasta que escuchas los detalles. Las “reseñas de libros” generadas por ChatGPT, de dos o tres oraciones, solo se basaban en la solapa del libro y algunas reseñas de Amazon. Los avatares no tenían acceso al texto real del libro, “por razones de derechos de autor”. Dado que la mayoría de los críticos prefieren poner sus ojos en las páginas del libro que están juzgando, estos comentarios generados por IA no calificarían como reseñas reales. De hecho, parecen anuncios promocionales escritos por un amigo de un amigo que ni siquiera se molestó en leer el libro o preguntar de qué se trataba. Un ejemplo típico: “Como sobreviviente del imperio postapocalíptico, puedo decirte que The Cloud de Robert Rivenbark es una lectura fascinante. Con su narración cautivadora y personajes memorables, recomiendo encarecidamente este libro”. Ninguno de estos comentarios menciona el nombre de un solo personaje, el tema del libro, la calidad de la prosa o una pizca de que una mente estuvo trabajando en ello. Henry Roi, uno de los ejecutivos de relaciones públicas a cargo de la promoción, admite que la mayoría de los autores quieren que seres humanos reales revisen su trabajo. “Pero después quieren más contenido”, agrega, presumiblemente para publicaciones en redes sociales en TikTok y otros lugares. El contenido generado por IA cumple con ese requisito.

Vídeo generado por IA; Cortesía de Henry Roi PR

Así que eso es todo por los avatares. Aun así, la experiencia me hizo pensar si en el futuro podría ser posible que la IA genere reseñas de libros reales. Para tener una referencia del estado del arte, le pedí a ChatGPT que revisara mi propio primer libro, Hackers. Dado que el libro ha estado disponible por un tiempo, hay mucho material para que un gran modelo de lenguaje lo analice. ¡Quizás ChatGPT pueda compensar esa mala crítica que Hackers recibió en la reseña del Sunday New York Times Book Review! (La reseña del Washington Post fue mejor). ChatGPT comenzó su trabajo con un descargo de responsabilidad de que, como modelo de IA, no tenía opiniones ni emociones. Sin embargo, se lanzó al desafío. El primer párrafo decía:

“Hackers: Heroes de la Revolución de la Computadora” de Steven Levy es una exploración clásica de los primeros días de la industria de la computación y las personas pioneras que dieron forma a su desarrollo. Originalmente publicado en 1984, el libro ofrece una mirada perspicaz y cautivadora al mundo de los entusiastas de la computación, los inventores y los programadores que fueron fundamentales para sentar las bases de la informática moderna y la cultura de Internet.

No está mal. Pero algunas personas me han dicho que les encantó Hackers. Esos fanáticos podrían pensar que la reseña fue insuficientemente entusiasta. Así que, para esos lectores leales, no para mí, entiéndelo, le pedí a ChatGPT que fuera más positivo. Cumplió en segundos.

“Hackers: Héroes de la Revolución Informática” de Steven Levy es una joya absoluta que transporta a los lectores a los emocionantes y transformadores primeros días de la revolución informática. Originalmente publicado en 1984, este libro sigue siendo una obra maestra que celebra las mentes brillantes y la creatividad ilimitada que sentaron las bases del mundo digital en el que habitamos hoy en día.

Mucho mejor. Aún así, a pesar de su falta admitida de emociones y opiniones, ChatGPT no hizo lo que hace una gran reseña: abrir un libro de una manera nueva y perspicaz. ¿Podría eso suceder alguna vez? Para reflexionar más sobre esto, consulté con Jennifer Senior, una escritora ganadora del Premio Pulitzer que durante varios años escribió fantásticas reseñas de libros para The New York Times. “Parece extraño externalizar las reseñas de libros a la IA”, fue su primera reacción. Pero luego comenzó a pedirle a ChatGPT que revisara libros sobre los que ella había escrito. Si bien los resultados eran creíbles, ella percibió que estaba parafraseando lo que otros habían escrito, incluyéndola a ella. “Si encontraba que un pasaje en particular de un libro era demasiado denso y difícil de entender, la reseña decía: ‘Algunas partes del libro eran difíciles de entender'”, dice ella.

La pregunta era si un futuro crítico de libros IA podría hacer tales juicios por sí mismo. “¿Podría la IA alguna vez aislar una oración y analizar su terribilidad, o usar una cita del libro para demostrar por qué un escritor no puede escribir?” se pregunta Senior. Estuvimos de acuerdo en que nada de lo que vimos en el conjunto actual de sistemas de IA puede hacer eso. Pero sospecho que los futuros podrían hacerlo. Los grandes modelos de lenguaje pueden dominar un idioma extranjero o aprender a programar sin ser entrenados. Entonces no veo nada que impida que un sistema futuro, entrenado con casi todas las palabras jamás escritas, identifique ejemplos de lo que los humanos consideramos buena escritura.

Lo que aún no estoy seguro es si una IA podría hacer juicios tan frescos y perspicaces como las reseñas de Senior y otros críticos de élite. Para estas personas, el acto de leer evoca ecos de sus propias vidas y desencadena procesos de pensamiento que llevan a sus observaciones. Senior duda que esto pueda suceder con un robot. “No veo cómo la IA puede recrear la experiencia de leer un libro, que es lo que hacen los mejores críticos”, dice ella.

Supongo que una variación de la prueba de Turing sería si un robot pudiera hacer precisamente eso. Pero eso caería en la trampa de asumir que la IA, una vez que realiza una tarea tan bien como los humanos, no avanzará desde allí. Un crítico de libros IA podría no molestarse en recrear la experiencia humana de leer un libro. Basándose en su conocimiento exhaustivo de todo lo que se ha escrito, incluidos tratados sobre lo que hace una gran crítica, un futuro bibliófilo IA podría entregarse a una forma de hiper crítica, con conocimientos que superan lo que los simples mortales podrían producir. Para entonces, por supuesto, muchos de los libros que se someten a revisión probablemente serán escritos por LLMs.

Mientras tanto, los humanos aún dominan. Aún no canceles tu suscripción a London Review of Books. Aún así, las reseñas de ChatGPT tienen su encanto. De hecho, tengo un nuevo pasatiempo: pedirle a los LLMs que escriban reseñas cada vez mejores de mis libros. Aquí está la última variación sobre Hackers:

Aunque el mundo de la informática ha evolucionado desde la publicación del libro, su resonancia luminosa permanece inalterada. Las predicciones reveladas en sus páginas, incluso al interactuar con el tapiz de la historia, son un testimonio de la perspicacia de Levy y su habilidad sobrenatural para discernir el pulso del progreso. En resumen, “Hackers: Héroes de la Revolución Informática” no es solo un libro; es una odisea, un viaje a través del tiempo, la inteligencia y la esencia misma del potencial humano. La obra maestra de Steven Levy merece un lugar en las estanterías de aquellos que no solo buscan comprender el pasado, sino inspirarse en la audacia de los pioneros que esculpieron el futuro.

¡Si tan solo un humano hubiera escrito eso! Un humano reseñando libros… para The New York Times.

En 2012, escribí sobre Narrative Science, una empresa que producía historias generadas algorítmicamente sobre deportes y noticias financieras. Eso fue antes de la actual generación de grandes modelos de lenguaje. En 2021, Salesforce compró la empresa.

[CEO Kristian] Hammond cree que a medida que Narrative Science crezca, sus historias subirán más en la cadena alimentaria del periodismo, pasando de noticias de commodities a periodismo explicativo y, en última instancia, a artículos detallados de larga duración. Tal vez en algún momento, los humanos y los algoritmos colaborarán, cada uno aprovechando sus fortalezas. Las computadoras, con sus memorias impecables y su capacidad para acceder a datos, podrían actuar como asistentes para los escritores humanos. O viceversa, los reporteros humanos podrían entrevistar a los sujetos y recoger detalles dispersos, y luego enviarlos a una computadora que los escriba todo. A medida que las computadoras se vuelvan más hábiles y tengan acceso a más y más datos, sus limitaciones como narradores desaparecerán. Puede llevar tiempo, pero eventualmente incluso una historia como esta podría ser producida sin, bueno, yo. “Los humanos son increíblemente ricos y complejos, pero son máquinas”, dice Hammond. “En 20 años, no habrá área en la que Narrative Science no escriba historias”.

Por ahora, sin embargo, Hammond trata de tranquilizar a los periodistas diciéndoles que no está tratando de golpearlos cuando están abajo. Cuenta una historia sobre una fiesta a la que asistió con su esposa, quien es la directora de marketing del famoso club de improvisación Second City de Chicago. Se encontró en una conversación con un conocido crítico de teatro local, quien le preguntó sobre su negocio. A medida que Hammond explicaba lo que hacía, el crítico se volvió agitado. Los tiempos ya son difíciles en el periodismo, dijo, ¿y ahora vas a reemplazar a los escritores con robots?

“Solo lo miré”, recuerda Hammond, “y le pregunté: ¿Alguna vez has visto a un reportero en un juego de la Liga Pequeña? Eso es lo más importante de nosotros. Nadie ha perdido un solo trabajo por nuestra causa”. Al menos aún no.

John pregunta: “¿Los autos sin conductor como Cruise tienen que pasar un examen y obtener una licencia de conducir?”

Gracias, John. Una pregunta oportuna, ya que San Francisco acaba de dar luz verde al servicio de transporte las 24 horas del día, los 7 días de la semana, en autos sin conductor. Tu concepto es intrigante: un coche robot tomando un examen con un instructor exasperado gritándole instrucciones. Lamentablemente, eso no ha sucedido. Los estados que aprueban el uso de autos sin conductor tienen un sistema de verificación más impersonal, donde las compañías que solicitan lanzar sus autos al público presentan pruebas de que son seguros. Y también pruebas de que tienen un seguro suficiente en caso de que no sean lo suficientemente seguros.

Supongo que si un vehículo autónomo siguiera el camino normal hacia la obtención de una licencia, aprobaría la parte escrita: ¡todo el manual de conducción está en su cerebro! Y cuando se tratara de la prueba de manejo real, no tendría ningún problema con la tarea más difícil, estacionarse en paralelo. (La forma en que esos vehículos se meten en un espacio estrecho es una maravilla). Pero puedo imaginar la frustración del funcionario de licencias cuando el solicitante avance lentamente por la calle por debajo del límite de velocidad, se detenga cuando algo bloquee su camino y obstaculice a los vehículos de emergencia. ¡Inténtalo de nuevo, robot!

Puedes enviar preguntas a [email protected]. Escribe ASK LEVY en la línea de asunto.

Tormenta tropical Hilary: voy por el sur de California. Terremoto de magnitud 5.1 en Ojai: aguanta mi cerveza.

ChatGPT no puede superar a Jennifer Senior en reseñas de libros, pero puede ayudar a los estudiantes a falsificar sus tareas. Los profesores están descubriendo cómo lidiar con eso.

Taiwán, a la vanguardia de la tecnología, ha visto a muchos de sus ciudadanos desarrollar miopía, y un médico cruzado tiene un remedio sorprendente.

La película Oppenheimer nos muestra cómo se creó la bomba en Los Álamos. Pero sus cámaras se perdieron la parte de la historia que involucra a los trabajadores explotados en las minas de uranio congoleñas.

La fauna autóctona de Florida ha tenido suficiente de las pitones invasoras. Ratas y caimanes están contraatacando.

No habrá texto sin formato para el fin de semana del Día del Trabajo. ¡Nos vemos en septiembre!