Aceasta este aplicația Linux numită Colossal-AI a cărei ultimă versiune poate fi descărcată ca Versionv0.3.3ReleaseToday!.zip. Poate fi rulat online în furnizorul de găzduire gratuit OnWorks pentru stații de lucru.
Descărcați și rulați online această aplicație numită Colossal-AI cu OnWorks gratuit.
Urmați aceste instrucțiuni pentru a rula această aplicație:
- 1. Ați descărcat această aplicație pe computer.
- 2. Introduceți în managerul nostru de fișiere https://www.onworks.net/myfiles.php?username=XXXXX cu numele de utilizator pe care îl doriți.
- 3. Încărcați această aplicație într-un astfel de manager de fișiere.
- 4. Porniți emulatorul online OnWorks Linux sau Windows online sau emulatorul online MACOS de pe acest site web.
- 5. Din sistemul de operare OnWorks Linux pe care tocmai l-ați pornit, accesați managerul nostru de fișiere https://www.onworks.net/myfiles.php?username=XXXXX cu numele de utilizator dorit.
- 6. Descărcați aplicația, instalați-o și rulați-o.
SCREENSHOTS
Ad
Colosal-AI
DESCRIERE
Arhitectura Transformer a îmbunătățit performanța modelelor de deep learning în domenii precum Computer Vision și Natural Language Processing. Împreună cu o performanță mai bună vin și modele de dimensiuni mai mari. Acest lucru impune provocări peretelui de memorie al hardware-ului de accelerație actual, cum ar fi GPU. Nu este niciodată ideal să antrenezi modele mari, cum ar fi Vision Transformer, BERT și GPT, pe un singur GPU sau pe o singură mașină. Există o cerere urgentă de a antrena modele într-un mediu distribuit. Cu toate acestea, instruirea distribuită, în special paralelismul modelelor, necesită adesea expertiză în domeniul sistemelor informatice și arhitecturii. Rămâne o provocare pentru cercetătorii AI să implementeze soluții complexe de instruire distribuită pentru modelele lor. Colossal-AI vă oferă o colecție de componente paralele. Ne propunem să vă sprijinim să vă scrieți modelele de deep learning distribuite, la fel cum vă scrieți modelul pe laptop.
DESCRIERE
- Managementul eterogen al memoriei
- Dimensiunea modelului de 24 ori mai mare pe același hardware
- Trageți din DockerHub
- Construiește pe cont propriu
- Strategii de paralelism
- Paralelism bazat pe fișierul de configurare
Limbaj de programare
Piton
Categorii
Aceasta este o aplicație care poate fi preluată și de la https://sourceforge.net/projects/colossal-ai.mirror/. A fost găzduit în OnWorks pentru a fi rulat online într-un mod cât mai ușor de pe unul dintre sistemele noastre operative gratuite.