Apa yang terjadi ketika pelamar kerja online mulai menggunakan LLM? Itu tidak baik. 1. Pra-LLM, kualitas surat lamaran memprediksi kualitas kerja Anda, dan sampul yang baik memberi Anda pekerjaan 2. LLM menghapus sinyal, dan permintaan pemberi kerja turun 3. Model menunjukkan pekerja berkemampuan tinggi kehilangan paling banyak 1/n

Pada April 2023, memungkinkan pekerja untuk menggunakan AI dalam surat lamaran mereka. Pengusaha tidak dapat melihat apakah mereka menggunakan alat tersebut. Waktu yang dihabiskan untuk mengirimkan aplikasi berkurang, dengan peningkatan besar dalam aplikasi yang memakan waktu <30 detik 2/

Ukuran kualitas surat lamaran — seberapa banyak email freelancer disesuaikan dengan postingan pekerjaan tertentu — meningkat. 3/

Di era pra-LLM, orang dengan surat lamaran berkualitas lebih tinggi jauh lebih mungkin untuk mendapatkan pekerjaan itu. Pasca-LLM, kualitas surat lamaran tidak berguna sebagai sinyal, sehingga tidak mempengaruhi perekrutan sama sekali. Perhatikan bahwa total tingkat perekrutan juga turun jauh. 4/

Saya pikir apa yang terjadi adalah perusahaan dibanjiri oleh aplikasi AI, dan tidak dapat membedakan siapa yang baik—dan memutuskan itu tidak layak untuk dicoba. Saya tentu merasakan hal ini sehubungan dengan pertanyaan dari calon siswa / pelamar @devdatalab! 5/

Kita juga dapat melihat bahwa kualitas surat lamaran tidak lagi memprediksi kualitas pekerja—hasilnya adalah peringkat bintang 5 dari pemberi kerja. Coef pada sinyal menjadi nol di era pasca-LLM.

Pandangan lain: kualitas surat lamaran naik jauh dengan LLM, sedangkan P (dipekerjakan | surat bagus) turun jauh.

Saya tidak men-tweet model struktural pada prinsipnya, tetapi model penulis menemukan bahwa LLM memindahkan pekerjaan dari pekerja berkualitas tinggi ke pekerja berkualitas rendah. Tidak jelas apakah pekerjaan yang telah selesai lebih buruk, tetapi saya pikir ada lebih sedikit pekerjaan yang telah selesai. 8/

Grafik terkutuk untuk siapa saja yang membaca lamaran kerja atau proposal hibah. 9/

Makalah super menarik, baca semuanya di sini: Jesse Silbert berada di pasar kerja ekonomi. Beberapa pemikiran tambahan. 10/

Sangat liar bagi saya bahwa memutuskan untuk mempermudah kandidat pekerjaan untuk melakukan ini. Tampaknya jelas bagi saya bahwa itu akan mengerikan bagi perusahaan! (Meskipun model penulis tidak terlalu setuju dengan ini.) 11/

Mungkin mereka akan membuat tingkat berbayar di mana perusahaan dapat melihat siapa yang menggunakan LLM. Heh, kemudian mereka dapat membebankan biaya kepada pelamar untuk akses LLM, dan kemudian membebankan biaya kepada perusahaan untuk dapat mengecualikan pelamar tersebut dari pertimbangan. 12/

Dalam keseimbangan, akan sangat bernilai tinggi bagi perusahaan untuk menemukan beberapa sinyal lain dari kualitas kandidat. Riwayat pekerjaan dan peringkat tampaknya masih bekerja dengan baik. Tetapi Hukum Goodhart akan berlaku untuk mekanisme penyaringan baru, terutama jika LLM dapat mempermainkannya. 13/

Sulit bagi perusahaan yang mempekerjakan lulusan perguruan tinggi—inflasi nilai membuat sulit untuk menemukan siswa yang baik, dan sekarang surat lamaran juga tidak berguna. Kita mungkin melihat lebih banyak masa kerja percobaan. Bekerja dengan seseorang selama sebulan, Anda bisa mendapatkan sinyal *sangat baik* tentang kualitas mereka. 14/

Baca korannya! @SilbertJesse ada di X.

Baca korannya! @SilbertJesse ada di X dan Anais Galdin ada di BlueSky

Penulisnya adalah Jesse Silbert dan Anais Galdin. Baca korannya!