Esta es la aplicación de Windows llamada rwkv.cpp cuya última versión se puede descargar como rwkv-master-39ed572-bin-win-avx512-x64.zip. Se puede ejecutar en línea en el proveedor de alojamiento gratuito OnWorks para estaciones de trabajo.
Descargue y ejecute en línea esta aplicación llamada rwkv.cpp con OnWorks de forma gratuita.
Siga estas instrucciones para ejecutar esta aplicación:
- 1. Descargue esta aplicación en su PC.
- 2. Ingrese en nuestro administrador de archivos https://www.onworks.net/myfiles.php?username=XXXXX con el nombre de usuario que desee.
- 3. Cargue esta aplicación en dicho administrador de archivos.
- 4. Inicie cualquier emulador en línea de OS OnWorks desde este sitio web, pero mejor emulador en línea de Windows.
- 5. Desde el sistema operativo OnWorks Windows que acaba de iniciar, vaya a nuestro administrador de archivos https://www.onworks.net/myfiles.php?username=XXXXX con el nombre de usuario que desee.
- 6. Descarga la aplicación e instálala.
- 7. Descargue Wine desde los repositorios de software de sus distribuciones de Linux. Una vez instalada, puede hacer doble clic en la aplicación para ejecutarla con Wine. También puedes probar PlayOnLinux, una elegante interfaz sobre Wine que te ayudará a instalar programas y juegos populares de Windows.
Wine es una forma de ejecutar software de Windows en Linux, pero no requiere Windows. Wine es una capa de compatibilidad de Windows de código abierto que puede ejecutar programas de Windows directamente en cualquier escritorio de Linux. Esencialmente, Wine está tratando de volver a implementar una cantidad suficiente de Windows desde cero para poder ejecutar todas esas aplicaciones de Windows sin necesidad de Windows.
SCREENSHOTS
Ad
rwkv.cpp
DESCRIPCIÓN
Además del FP32 habitual, admite FP16, inferencia cuantificada INT4, INT5 e INT8. Este proyecto se centra en la CPU, pero también es compatible con cuBLAS. RWKV es una nueva arquitectura de modelo de lenguaje grande, y el modelo más grande de la familia tiene 14B parámetros. A diferencia de Transformer con atención O(n^2), RWKV solo requiere el estado del paso anterior para calcular logits. Esto hace que RWKV sea muy compatible con la CPU en contextos de gran longitud.
Caracteristicas
- Windows/Linux/MacOS
- Construye la biblioteca tú mismo
- Obtenga un modelo RWKV
- Requisitos: Python 3.x con PyTorch y tokenizadores
- ggml se mueve rápido y ocasionalmente puede romper la compatibilidad con formatos de archivo más antiguos
- Requisitos: Python 3.x con PyTorch
Lenguaje de programación
C + +
Categorías
Esta es una aplicación que también se puede obtener de https://sourceforge.net/projects/rwkv-cpp.mirror/. Ha sido alojado en OnWorks para poder ejecutarlo online de la forma más sencilla desde uno de nuestros Sistemas Operativos gratuitos.
