Rilasciamo un nuovo "Agente Revisore" per articoli di ricerca. Ho iniziato a codificare questo come progetto del fine settimana, e @jyx_su lo ha reso molto migliore. Sono stato ispirato da uno studente che ha avuto un articolo rifiutato 6 volte in 3 anni. Il loro ciclo di feedback -- aspettare ~6 mesi per ricevere un feedback ogni volta -- era dolorosamente lento. Volevamo vedere se un flusso di lavoro agentico può aiutare i ricercatori a iterare più velocemente. Quando abbiamo addestrato il sistema sulle recensioni di ICLR 2025 e misurato la correlazione di Spearman (più alta è meglio) sul set di test: - Correlazione tra due revisori umani: 0.41 - Correlazione tra AI e un revisore umano: 0.42 Questo suggerisce che la revisione agentica si sta avvicinando a prestazioni a livello umano. L'agente fonda il suo feedback cercando su arXiv, quindi funziona meglio in campi come l'AI dove la ricerca è pubblicata liberamente. È uno strumento sperimentale, ma spero che ti aiuti con la tua ricerca. Dai un'occhiata qui:

Dopo aver ascoltato diversi dei podcast 20VC di Harry, è stato divertente apparire in esso. Abbiamo parlato dei colli di bottiglia nell'adozione dell'AI, della geopolitica USA/Cina, delle opportunità che rimangono per costruire (in breve: molte) e altro ancora!

Sono appena tornato da AI Dev x NYC, la conferenza per sviluppatori AI dove la nostra comunità si riunisce per una giornata di programmazione, apprendimento e connessione. L'atmosfera nella stanza era frizzante! È stato all'ultimo AI Dev a San Francisco che ho incontrato Kirsty Tan e ho iniziato a collaborare con lei su quello che è diventata la nostra società di consulenza AI, AI Aspire. Gli incontri di persona possono generare nuove opportunità, e spero che nei prossimi mesi ci saranno altre storie su cose che sono iniziate ad AI Dev x NYC! L'evento era pieno di conversazioni sulla programmazione con AI, AI agenti, ingegneria del contesto, governance e costruzione e scalabilità delle applicazioni AI nelle startup e nelle grandi aziende. Ma l'impressione predominante che ho portato via è stata quella di un ottimismo quasi universale riguardo al nostro campo, nonostante il mix di pessimismo e ottimismo sull'AI nel mondo più ampio. Ad esempio, molte aziende non hanno ancora ottenuto che gli agenti AI forniscano un ROI significativo, e alcuni scettici dell'AI citano uno studio del MIT che afferma che il 95% dei progetti pilota di AI sta fallendo. (Questo studio, tra l'altro, ha difetti metodologici che rendono il titolo virale fuorviante; vedi il link nel post originale.) Ma ad AI Dev c'erano molti dei team responsabili del set di applicazioni AI di successo e in rapida crescita. Parlando con altri sviluppatori, ho realizzato che a causa della bassa penetrazione dell'AI nelle aziende, è simultaneamente vero che (a) molte aziende non hanno ancora un'AI che fornisca un ROI significativo, e (b) molti team AI qualificati stanno iniziando a fornire un ROI significativo e vedono il numero di progetti AI di successo crescere rapidamente, sebbene da una base bassa. Questo è il motivo per cui gli sviluppatori AI sono ottimisti riguardo alla crescita che deve ancora venire. Molti espositori mi hanno detto che questa è stata la migliore conferenza a cui abbiano partecipato da molto tempo, perché hanno potuto parlare con veri sviluppatori. Uno mi ha detto che molte altre conferenze sembravano superficiali, mentre i partecipanti ad AI Dev avevano una comprensione tecnica molto più profonda e quindi erano interessati e in grado di comprendere le sfumature della tecnologia all'avanguardia. Che la discussione fosse sull'osservabilità dei flussi di lavoro agentici, sulle sfumature dell'ingegneria del contesto per la programmazione AI, o su un dibattito su quanto a lungo continuerà la proliferazione delle palestre RL per l'addestramento degli LLM, c'era una profonda competenza tecnica nella stanza che ci permette di vedere collettivamente più lontano nel futuro. Un momento speciale per me è stato quando Nick Thompson, moderando un panel con Miriam Vogel e me, ha chiesto della governance. Ho risposto che la recente retorica ostile degli Stati Uniti nei confronti degli immigrati è una delle peggiori mosse che stanno facendo, e molti nel pubblico hanno applaudito. Nick ha parlato di questo momento in un video (link nel post originale). Mi è piaciuto incontrare molte persone ad AI Dev e sono grato a tutti coloro che sono venuti e a tutti i nostri relatori, espositori, sponsor, volontari e staff dell'evento. Il mio unico rammarico è che, anche se abbiamo aumentato l'evento di 3 volte rispetto al precedente evento di San Francisco, abbiamo dovuto limitare il numero di biglietti perché lo spazio non poteva ammettere più partecipanti. Anche se così tanto lavoro è ora online, gli eventi di persona sono speciali e possono essere punti di svolta per individui e progetti. Abbiamo in programma di rendere il prossimo AI Dev a San Francisco il 28-29 aprile 2026 un evento ancora più grande e non vediamo l'ora che la conferenza aiuti a stimolare ulteriori condivisioni e connessioni in futuro. [Testo originale: ]