etiqueta: transformer

IMAGE: An abstract image of concentric human head silhouettes nested inside one another, fading from deep blue to warm orange and yellow, symbolizing layers of thought or learning at different speeds

La próxima frontera de la inteligencia artificial podría parecerse mucho más a nuestro cerebro

En 2017, un grupo de investigadores de Google publicó un artículo con un título aparentemente anodino, «Attention is all you need«, que acabó provocando una auténtica revolución. Aquella idea aplicada en aquel momento a la
14
IMAGE: OpenAI's DALL·E, via ChatGPT

DeepSeek y el cambio de la atención completa a la atención dispersa

El desarrollo de la inteligencia artificial no se detiene, y ademas, está respondiendo a una enorme diversidad estratégica entre las compañías norteamericanas, empeñadas en una carrera permanente de acumular más procesadores en data centers cada vez más
23