Ito ang Linux app na pinangalanang x-transformers na ang pinakabagong release ay maaaring ma-download bilang 1.24.2sourcecode.zip. Maaari itong patakbuhin online sa libreng hosting provider na OnWorks para sa mga workstation.
I-download at patakbuhin online ang app na ito na pinangalanang x-transformers na may OnWorks nang libre.
Sundin ang mga tagubiling ito upang patakbuhin ang app na ito:
- 1. Na-download ang application na ito sa iyong PC.
- 2. Ipasok sa aming file manager https://www.onworks.net/myfiles.php?username=XXXXX kasama ang username na gusto mo.
- 3. I-upload ang application na ito sa naturang filemanager.
- 4. Simulan ang OnWorks Linux online o Windows online emulator o MACOS online emulator mula sa website na ito.
- 5. Mula sa OnWorks Linux OS na kasisimula mo pa lang, pumunta sa aming file manager https://www.onworks.net/myfiles.php?username=XXXX gamit ang username na gusto mo.
- 6. I-download ang application, i-install ito at patakbuhin ito.
MGA LALAKI
Ad
mga x-transformer
DESCRIPTION
Isang simple ngunit kumpletong full-attention transformer na may isang hanay ng mga promising experimental feature mula sa iba't ibang papel. Nagmumungkahi ng pagdaragdag ng natutunang memory key/mga halaga bago pumasok. Nagawa nilang tanggalin ang feedforwards nang buo at makamit ang katulad na pagganap sa orihinal na mga transformer. Nalaman ko na ang pagpapanatili ng feedforwards at pagdaragdag ng memory key/values ay humahantong sa mas mahusay na pagganap. Nagmumungkahi ng pagdaragdag ng mga natutunang token, katulad ng mga CLS token, pinangalanang memory token, na ipinapasa sa mga layer ng atensyon kasama ng mga input token. Maaari mo ring gamitin ang l2 na normalized na mga pag-embed na iminungkahi bilang bahagi ng fixnorm. Nalaman kong humahantong ito sa pinahusay na convergence kapag ipinares sa maliit na pagsisimula (iminungkahi ng BlinkDL). Ang maliit na pagsisimula ay aalagaan hangga't ang l2norm_embed ay nakatakda sa True.
Mga tampok
- Decoder-only (tulad ng GPT)
- Encoder-only (tulad ng BERT)
- State of the art na pag-uuri ng imahe
- Pagpapalaki ng Pansariling Pansin sa Palagiang Memorya
- Mga Transformer na Walang Luha
- Root Mean Square Layer Normalization
Wika ng Programming
Sawa
Kategorya
Ito ay isang application na maaari ding makuha mula sa https://sourceforge.net/projects/x-transformers.mirror/. Na-host ito sa OnWorks upang mapatakbo online sa pinakamadaling paraan mula sa isa sa aming mga libreng Operative System.
