Vanishing y Exploding Gradient + Beam Search: cómo entrenaban y generaban texto los modelos antes de los Transformers
Explicación clara y divulgativa sobre los problemas de vanishing y exploding gradient en redes profundas, las técnicas que los mitigaron y cómo Beam Search permitió generar secuencias coherentes antes de la llegada de los Transformers.



