¿Qué pasa cuando los solicitantes de empleo en línea comienzan a usar LLMs? No es bueno. 1. Antes de LLM, la calidad de la carta de presentación predecía la calidad de tu trabajo, y una buena carta te consigue un empleo. 2. Los LLMs eliminan la señal, y la demanda de los empleadores cae. 3. El modelo sugiere que los trabajadores de alta capacidad son los que más pierden. 1/n

En abril de 2023, se hizo posible que los trabajadores usaran AI en sus cartas de presentación. Los empleadores no pueden ver si utilizaron la herramienta. El tiempo dedicado a enviar una solicitud disminuye, con un gran aumento en las solicitudes que tardaron <30 segundos 2/

Una medida de la calidad de la carta de presentación — cuánto está personalizada el correo electrónico del freelancer para la oferta de trabajo específica — aumenta considerablemente. 3/

En la era previa a los LLM, las personas con cartas de presentación de mayor calidad tienen muchas más probabilidades de conseguir el trabajo. Después de los LLM, la calidad de la carta de presentación es inútil como señal, por lo que no afecta en absoluto la contratación. Cabe destacar que la tasa total de contratación también disminuye considerablemente. 4/

Creo que lo que está sucediendo es que las empresas están bombardeadas por aplicaciones de IA y no pueden distinguir quién es bueno, y deciden que simplemente no vale la pena intentarlo. ¡Ciertamente siento esto con respecto a las consultas de estudiantes prospectivos / solicitantes de @devdatalab! 5/

También podemos ver que la calidad de la carta de presentación ya no predice la calidad del trabajador: el resultado es una calificación de 5 estrellas por parte del empleador. El coeficiente de la señal se reduce a cero en la era posterior a LLM.

Otra perspectiva: la calidad de las cartas de presentación mejora considerablemente con los LLM, mientras que P(hired | buena carta) disminuye notablemente.

No tuiteo modelos estructurales por principio, pero el modelo de los autores encuentra que los LLMs trasladan trabajos de trabajadores de alta a baja calidad. No está claro si los trabajos completados son peores, pero creo que hay menos trabajos completados. 8/

Gráfico maldito para cualquiera que lea solicitudes de empleo o propuestas de subvención. 9/

Un artículo súper interesante, léelo completo aquí: Jesse Silbert está en el mercado laboral de economía. Algunos pensamientos adicionales. 10/

Me parece increíble que decidieran hacerlo tan fácil para los candidatos a empleo. ¡Me parece obvio que sería terrible para las empresas! (Aunque el modelo de los autores no está realmente de acuerdo con esto.) 11/

Quizás creen un nivel de pago donde las empresas puedan ver quién utilizó LLMs. Je, entonces pueden cobrar a los solicitantes por el acceso a LLM, y luego cobrar a las empresas para poder excluir a esos solicitantes de la consideración. 12/

En equilibrio, sería realmente valioso para las empresas encontrar alguna otra señal de la calidad de los candidatos. El historial laboral y la calificación parecen seguir funcionando bien. Pero la Ley de Goodhart se aplicará a cualquier nuevo mecanismo de selección, especialmente si los LLM pueden manipularlo. 13/

Es difícil para las empresas contratar graduados universitarios: la inflación de calificaciones hace que sea complicado encontrar a los buenos estudiantes, y ahora las cartas de presentación también son inútiles. Podríamos ver más períodos de prueba laboral. Trabajar con alguien durante un mes puede darte una señal *excelente* de su calidad. 14/

¡Lee el documento! @SilbertJesse está en X.

¡Lee el documento! @SilbertJesse está en X y Anais Galdin está en BlueSky

Los autores son Jesse Silbert y Anais Galdin. ¡Lee el artículo!