el cofundador de OpenAI publicó en GitHub el GPT-2 completo en 600 líneas de código.
sin librerías raras.
sin frameworks.
Python limpio.
lo puedes leer en una tarde.
Andrej Karpathy, el tío que dirigió la IA en Tesla y cofundó OpenAI, lleva años haciendo esto: desmontar los LLMs hasta el hueso para que cualquiera pueda entender cómo funcionan de verdad.
esto es nanoGPT.
✅ reproduce GPT-2 desde cero
✅ entrena en una GPU o en la nube por menos de $100
✅ el código es tan limpio que da rabia no haberlo visto antes
✅ 60.4k estrellas, 10.4k forks, MIT
vas a flipar con lo poco que hace falta para entrenar un modelo 👇
显示更多