Echemos un vistazo crítico a las ideas de negocios de ChatGPT

El escritor es el profesor Andrew M. Heller en la Escuela Wharton de la Universidad de Pensilvania.

Ya sea para escribir ensayos, aprobar exámenes académicos o crear código de software, ChatGPT ha estado en los titulares desde su lanzamiento en noviembre.

Está bien documentado que el chatbot de inteligencia artificial está bien informado, lo suficiente, por ejemplo, para merecer una aprobación sólida en mi clase de MBA en Wharton School. También es amigable e inteligente. Pero la calidad de sus respuestas está demostrando ser muy errática.

Las redes sociales están inundadas de ejemplos de preguntas que ChatGPT no responde correctamente. Sus errores ahora se conocen como alucinaciones. Estos incluyen su explicación segura de por qué agregar porcelana rota a la leche materna puede ayudar con la digestión de un bebé, y su inferencia de que, si dos automóviles tardan dos horas en conducir de A a B, cuatro automóviles deben tardar cuatro horas en completar el mismo viaje.

Entonces, ¿cuál es el mejor uso para una tecnología en la que probablemente (todavía) no debería confiarse sin una estrecha supervisión humana?

Ranking FT Online MBA 2022: 10 de los mejores

Descubre qué escuelas están en nuestro ranking de títulos MBA Online. Conozca cómo se compiló la tabla y lea el resto de nuestra cobertura en ft.com/online-learning.

Una oportunidad es convertir la debilidad de la herramienta, su imprevisibilidad de respuesta, en una fortaleza.

En la mayoría de los entornos de gestión, la «alta variación» (comportamiento errático e impredecible) es algo malo. Queremos que nuestros pilotos, médicos o aseguradores se desempeñen de manera ordenada con la varianza minimizada. Entonces, en estas circunstancias, Six Sigma, un conjunto de estrategias de gestión para reducir los errores, es el nombre del juego.

Por ejemplo, cualquier aerolínea que esté considerando la contratación de 10 pilotos preferiría que todos ellos fueran contrataciones sólidas y confiables (con una puntuación, digamos, de 7 de 10 en habilidades de pilotaje) en lugar de contratar a un piloto brillante (con una puntuación de 10 de 10). ) y nueve que son terribles (con una puntuación de 1 sobre 10) que podrían estrellar el avión.

Pero, cuando se trata de creatividad e innovación, como encontrar una manera de mejorar la experiencia de viajar en avión o lanzar una nueva empresa de aviación, esa misma aerolínea preferiría una idea excelente (10 de 10) y nueve que no tienen sentido. en lugar de un conjunto de diez ideas sólidas.

La razón es que, en las tareas creativas, la varianza es tu amiga. Una idea es como una opción financiera: simplemente la usas si es buena (o mejor, genial) y simplemente te olvidas de ella si no lo es. Esta idea tiene implicaciones importantes para el diseño y uso de sistemas de IA, en general, y para su uso en creatividad e innovación, en particular.

Primero, debemos distinguir entre usar ChatGPT para la generación de ideas y para la ejecución de una tarea específica. Un estudiante que pregunta: «¿Cuáles serían diez ideas para proyectos de cursos dado mi interés en los viajes espaciales y la psicología?» es un ejemplo de generación de ideas. “Escríbeme un ensayo de tres páginas sobre el papel de la psicología en los viajes espaciales” es un ejemplo de una tarea específica.

Aunque sutil, esta distinción importa. En la mayoría de las evaluaciones de ChatGPT en entornos académicos, obtuvo alrededor del 50-70 por ciento de respuestas correctas. Para estudiantes o gerentes, este es un punto de partida útil para una tarea, como un ensayo, pero no es suficiente para hacer el trabajo. En la generación de ideas, por el contrario, todo lo que necesitamos para tener éxito es una buena idea, por lo que podemos tolerar muchos más errores.

Una idea es como una opción financiera. Úsalo si es bueno (o mejor, excelente) y olvídate de él cuando no lo sea.

En segundo lugar, cuando buscamos solo una gran idea, debemos incitar a nuestro ayudante de IA a volverse loco, al igual que deberíamos dar la bienvenida al pensamiento «fuera de la caja» en las sesiones tradicionales de lluvia de ideas. Con ChatGPT, esto se puede lograr anteponiendo el aviso con «imagina que tienes seis años» o «¿qué ideas se le ocurrirían a Steve Jobs?»

A medida que surgen nuevas versiones de la tecnología, podemos imaginar al usuario estableciendo un equilibrio entre la precisión de los hechos (variación baja) y la locura total (variación alta).

Tercero, incluso la mejor idea es de poco valor si nadie actúa sobre ella. ¿Cuál es la ventaja de tener una idea brillante y nueve malas si nosotros, como tomadores de decisiones humanos, somos malos para elegir al ganador? Para eso, tenemos que pensar más detenidamente en el proceso de selección de ideas. Existe una gran cantidad de investigaciones académicas que muestran que incluso los expertos (como los capitalistas de riesgo) son malos para identificar la mejor idea.

Una forma de lidiar con este problema de selección es la exploración paralela. Elegir la mejor de 10 ideas es difícil. Pero, ¿podría elegir los cinco mejores y explorarlos un poco más? Este enfoque, que a menudo se denomina proceso de torneo, busca validar las ideas en base a experimentos pequeños y económicos.

Otra forma es recurrir a ChatGPT y pedirle que evalúe críticamente sus propias respuestas. “¿Qué problemas le ves a esta idea?” podría ser una buena pregunta para hacer. La respuesta podría decirnos por qué nuestra idea no es tan buena como pensábamos. Pero recuerda: todo lo que se necesita para la creatividad y la innovación es una buena idea.