edición general
28 meneos
178 clics
Pero, ¿qué es un GPT? Introducción visual a  los transformadores (Transformers) 3Blue1brown (ENG)

Pero, ¿qué es un GPT? Introducción visual a los transformadores (Transformers) 3Blue1brown (ENG)  

GPT, o Generative Pretrained Transform (transformación generativa preentrenada) es la base de ChatGPT y otros modelos de IA generativa. ¿Qué son, y cómo funcionan?

| etiquetas: transformers , ia , gpt
La verdad, Grant Sanderson esta dejando un legado en youtube impresionante. A aquellos que no lo conozcan, sus series la esencia del calculo y la esencia del algebra, son oro para cualquiera que busque entender un poco mas cosillas que ves en primero de carrera. Mencion de honor a su video de la transformada de fourier, que me hizo verla con otros ojos tras años de usarla a lo tonto en teleco :-D
#1 El tío lo hace de 10, además público como software libre la librería que usa para hacer sus animaciones matemáticas.
DotCSV, tambien lo explico.
invidious.fdn.fr/watch?v=aL-EmKuB078
invidious.fdn.fr/watch?v=xi94v_jl26U

#2
Creo que estos canales en Español tambien esas librerias.
invidious.fdn.fr/channel/UCd_Kj_7JmfFwNqsV8EaaSRw
invidious.fdn.fr/channel/UC-ihtKdODqNE7iPISJD3DnA
invidious.fdn.fr/channel/UC-_kZ3UZBsnCWJEVr8ysMww

#4 Sip el GPT se ha usado para reconstruir imagenes cortadas de forma coherente. No se si tiene aplicaciones practicas, en imagenes. Un…   » ver todo el comentario
¿Ven señores como no hay ninguna base de datos indexada sino correlaciones de diferente orden entre tokens que representan abstracciones matemáticas de la estructura del lenguaje mediante enormes matrices de parámetros? A ver si dejamos de repetir la tontería de que los modelos de IA se limitan a indexar enormes bases de datos que regurgitan cosas que han visto antes.
#3, correlaciones que no solo tienen porque estar en el lenguaje, sino en imágenes, audio o cualquier tipo de dato de entrada que se pueda trocear en una cadena de tokens.
#3 son loros estocásticos como los humanos
comentarios cerrados

menéame