Crawlab എന്ന് പേരിട്ടിരിക്കുന്ന Linux ആപ്പാണിത്, ഇതിന്റെ ഏറ്റവും പുതിയ പതിപ്പ് v0.6.3.zip ആയി ഡൗൺലോഡ് ചെയ്യാം. വർക്ക്സ്റ്റേഷനുകൾക്കായുള്ള സൗജന്യ ഹോസ്റ്റിംഗ് ദാതാവായ OnWorks-ൽ ഇത് ഓൺലൈനായി പ്രവർത്തിപ്പിക്കാം.
Crawlab എന്ന് പേരിട്ടിരിക്കുന്ന ഈ ആപ്പ് OnWorks-നൊപ്പം സൗജന്യമായി ഓൺലൈനായി ഡൗൺലോഡ് ചെയ്ത് പ്രവർത്തിപ്പിക്കുക.
ഈ ആപ്പ് പ്രവർത്തിപ്പിക്കുന്നതിന് ഈ നിർദ്ദേശങ്ങൾ പാലിക്കുക:
- 1. നിങ്ങളുടെ പിസിയിൽ ഈ ആപ്ലിക്കേഷൻ ഡൗൺലോഡ് ചെയ്തു.
- 2. ഞങ്ങളുടെ ഫയൽ മാനേജറിൽ https://www.onworks.net/myfiles.php?username=XXXXX എന്നതിൽ നിങ്ങൾക്ക് ആവശ്യമുള്ള ഉപയോക്തൃനാമം നൽകുക.
- 3. അത്തരം ഫയൽമാനേജറിൽ ഈ ആപ്ലിക്കേഷൻ അപ്‌ലോഡ് ചെയ്യുക.
- 4. ഈ വെബ്സൈറ്റിൽ നിന്ന് OnWorks Linux ഓൺലൈനോ Windows ഓൺലൈൻ എമുലേറ്ററോ MACOS ഓൺലൈൻ എമുലേറ്ററോ ആരംഭിക്കുക.
- 5. നിങ്ങൾ ഇപ്പോൾ ആരംഭിച്ച OnWorks Linux OS-ൽ നിന്ന്, നിങ്ങൾക്ക് ആവശ്യമുള്ള ഉപയോക്തൃനാമത്തോടുകൂടിയ ഞങ്ങളുടെ ഫയൽ മാനേജർ https://www.onworks.net/myfiles.php?username=XXXXX എന്നതിലേക്ക് പോകുക.
- 6. ആപ്ലിക്കേഷൻ ഡൌൺലോഡ് ചെയ്യുക, അത് ഇൻസ്റ്റാൾ ചെയ്ത് പ്രവർത്തിപ്പിക്കുക.
സ്ക്രീൻഷോട്ടുകൾ
Ad
ക്രാൾബ്
വിവരണം
Python, NodeJS, Go, Java, PHP എന്നിവയുൾപ്പെടെ വിവിധ ഭാഷകളെ പിന്തുണയ്‌ക്കുന്ന ഗോലാംഗ് അടിസ്ഥാനമാക്കിയുള്ള വിതരണം ചെയ്ത വെബ് ക്രാളർ മാനേജ്മെന്റ് പ്ലാറ്റ്ഫോം, സ്‌ക്രാപ്പി, പപ്പറ്റീർ, സെലിനിയം എന്നിവയുൾപ്പെടെയുള്ള വിവിധ വെബ് ക്രാളർ ചട്ടക്കൂടുകൾ. ആരംഭിക്കുന്നതിന് ദയവായി ഡോക്കർ-കമ്പോസ് ഉപയോഗിക്കുക. അങ്ങനെ ചെയ്യുന്നതിലൂടെ, നിങ്ങൾ മോംഗോഡിബി ഡാറ്റാബേസ് കോൺഫിഗർ ചെയ്യേണ്ടതില്ല. MongoDB, SeaweedFS, വർക്കർ നോഡുകൾ തുടങ്ങിയ മറ്റ് ഘടകങ്ങളുമായി ആശയവിനിമയം നടത്തുന്ന മാസ്റ്റർ നോഡുമായി ഫ്രണ്ട്‌എൻഡ് ആപ്പ് സംവദിക്കുന്നു. മാസ്റ്റർ നോഡും വർക്കർ നോഡുകളും gRPC (ഒരു RPC ചട്ടക്കൂട്) വഴി പരസ്പരം ആശയവിനിമയം നടത്തുന്നു. മാസ്റ്റർ നോഡിലെ ടാസ്ക് ഷെഡ്യൂളർ മൊഡ്യൂളാണ് ടാസ്‌ക്കുകൾ ഷെഡ്യൂൾ ചെയ്യുന്നത്, കൂടാതെ ടാസ്ക് റണ്ണറുകളിൽ ഈ ടാസ്‌ക്കുകൾ നിർവ്വഹിക്കുന്ന വർക്കർ നോഡുകളിലെ ടാസ്ക് ഹാൻഡ്‌ലർ മൊഡ്യൂളാണ് സ്വീകരിക്കുന്നത്. ടാസ്ക് റണ്ണർമാർ യഥാർത്ഥത്തിൽ സ്പൈഡർ അല്ലെങ്കിൽ ക്രാളർ പ്രോഗ്രാമുകൾ പ്രവർത്തിപ്പിക്കുന്ന പ്രക്രിയകളാണ്, കൂടാതെ മറ്റ് ഡാറ്റ ഉറവിടങ്ങളിലേക്ക് gRPC (SDK-യിൽ സംയോജിപ്പിച്ചത്) വഴി ഡാറ്റ അയയ്ക്കാനും കഴിയും, ഉദാ മോംഗോഡിബി.
സവിശേഷതകൾ
- ടാസ്ക് ഷെഡ്യൂളിംഗ്
- വർക്കർ നോഡ് മാനേജ്മെന്റ് ആൻഡ് കമ്മ്യൂണിക്കേഷൻ
- സ്പൈഡർ വിന്യാസം
- ഫ്രണ്ടെൻഡ്, API സേവനങ്ങൾ
- ടാസ്ക് എക്‌സിക്യൂഷൻ (നിങ്ങൾക്ക് മാസ്റ്റർ നോഡ് ഒരു വർക്കർ നോഡായി കണക്കാക്കാം)
- മറ്റ് ചട്ടക്കൂടുകളുമായുള്ള സംയോജനം
പ്രോഗ്രാമിംഗ് ഭാഷ
പൈത്തൺ, പിഎച്ച്പി, ജാവ, ഗോ
Categories
ഇത് https://sourceforge.net/projects/crawlab.mirror/ എന്നതിൽ നിന്നും ലഭിക്കാവുന്ന ഒരു ആപ്ലിക്കേഷനാണ്. ഞങ്ങളുടെ സൗജന്യ ഓപ്പറേറ്റീവ് സിസ്റ്റങ്ങളിലൊന്നിൽ നിന്ന് ഏറ്റവും എളുപ്പമുള്ള രീതിയിൽ ഓൺലൈനിൽ പ്രവർത്തിപ്പിക്കുന്നതിനായി ഇത് OnWorks-ൽ ഹോസ്റ്റ് ചെയ്തിരിക്കുന്നു.
