Il s'agit de l'application Linux nommée LaMDA-pytorch dont la dernière version peut être téléchargée en tant que v0.0.2.zip. Il peut être exécuté en ligne dans le fournisseur d'hébergement gratuit OnWorks pour les postes de travail.
Téléchargez et exécutez en ligne gratuitement cette application nommée LaMDA-pytorch avec OnWorks.
Suivez ces instructions pour exécuter cette application :
- 1. Téléchargé cette application sur votre PC.
- 2. Entrez dans notre gestionnaire de fichiers https://www.onworks.net/myfiles.php?username=XXXXX avec le nom d'utilisateur que vous voulez.
- 3. Téléchargez cette application dans ce gestionnaire de fichiers.
- 4. Démarrez l'émulateur en ligne OnWorks Linux ou Windows en ligne ou l'émulateur en ligne MACOS à partir de ce site Web.
- 5. Depuis le système d'exploitation OnWorks Linux que vous venez de démarrer, accédez à notre gestionnaire de fichiers https://www.onworks.net/myfiles.php?username=XXXXX avec le nom d'utilisateur que vous souhaitez.
- 6. Téléchargez l'application, installez-la et exécutez-la.
CAPTURES D'ÉCRAN
Ad
LaMDA-pytorche
DESCRIPTION
Implémentation open-source de pré-formation du document de recherche LaMDA de Google dans PyTorch. L'IA totalement non sensible. Ce référentiel couvrira la mise en œuvre des paramètres 2B de l'architecture de pré-formation, car c'est probablement ce que la plupart peuvent se permettre de former. Vous pouvez consulter le dernier article de blog de Google de 2022 qui détaille LaMDA ici. Vous pouvez également consulter leur précédent article de blog de 2021 sur le modèle.
Caractéristiques
- Mise en œuvre de la pré-formation open source du document de recherche LaMDA de Google dans PyTorch
- T5 Biais positionnel relatif dans l'attention
- Activation GELU fermée dans la couche Feed forward
- Architecture de décodeur de type GPT uniquement
- Autorégressif avec échantillonnage Top-k
- Tokenizer encodé par paire d'octets
Langage de programmation
Python
Catégories
Il s'agit d'une application qui peut également être récupérée à partir de https://sourceforge.net/projects/lamda-pytorch.mirror/. Il a été hébergé dans OnWorks afin d'être exécuté en ligne de la manière la plus simple à partir de l'un de nos systèmes d'exploitation gratuits.