Це програма для Linux під назвою Petastorm, останню версію якої можна завантажити як Releasev0.12.1.zip. Його можна запустити онлайн у безкоштовного хостинг-провайдера OnWorks для робочих станцій.
Завантажте та запустіть цю програму під назвою Petastorm з OnWorks безкоштовно.
Дотримуйтесь цих інструкцій, щоб запустити цю програму:
- 1. Завантажив цю програму на свій ПК.
- 2. Введіть у наш файловий менеджер https://www.onworks.net/myfiles.php?username=XXXXX із потрібним ім'ям користувача.
- 3. Завантажте цю програму в такий файловий менеджер.
- 4. Запустіть онлайн-емулятор OnWorks Linux або Windows або онлайн-емулятор MACOS з цього веб-сайту.
- 5. З ОС OnWorks Linux, яку ви щойно запустили, перейдіть до нашого файлового менеджера https://www.onworks.net/myfiles.php?username=XXXXX з потрібним іменем користувача.
- 6. Завантажте програму, встановіть її та запустіть.
ЕКРАНИ
Ad
Петашторм
ОПИС
Бібліотека Petastorm дає змогу на одній машині або розподілено навчати та оцінювати моделі глибокого навчання з наборів даних у форматі Apache Parquet. Він підтримує фреймворки ML, такі як Tensorflow, Pytorch і PySpark, і може використовуватися з чистого коду Python. Petastorm — це бібліотека доступу до даних з відкритим кодом, розроблена Uber ATG. Ця бібліотека дає змогу проводити навчання та оцінювати моделі глибокого навчання на одній машині або розподілено безпосередньо з наборів даних у форматі Apache Parquet. Petastorm підтримує популярні фреймворки машинного навчання (ML) на основі Python, такі як Tensorflow, PyTorch і PySpark. Його також можна використовувати з чистого коду Python. Набір даних, створений за допомогою Petastorm, зберігається у форматі Apache Parquet. Окрім схеми Parquet, petastorm також зберігає інформацію про схему вищого рівня, яка перетворює багатовимірні масиви на рідну частину набору даних petastorm. Petastorm підтримує розширювані кодеки даних. Вони дозволяють користувачеві використовувати одне зі стандартних стиснень даних (jpeg, png) або реалізувати власне.
Функції
- Вибіркове зчитування колонок
- Бібліотека доступу до відкритих даних
- Кілька стратегій паралелізму: потік, процес, однопоток (для налагодження)
- Простий API Python
- Фільтрування рядків (предикатів рядків)
- Розбиття для навчання з кількома GPU
Мова програмування
Python
Категорії
Це додаток, який також можна завантажити з https://sourceforge.net/projects/petastorm.mirror/. Його розміщено в OnWorks, щоб його можна було найпростіше запускати онлайн з однієї з наших безкоштовних операційних систем.
