s3fs - क्लाउड में ऑनलाइन

कार्यक्रम:

नाम

S3FS - Amazon S3 द्वारा समर्थित FUSE-आधारित फ़ाइल सिस्टम

SYNOPSIS

बढ़ते
s3fs बाल्टी[:/पथ] माउंट पॉइंट [विकल्प]

अनमाउंट
उमाउंट माउंट पॉइंट

उपयोगिता मोड ( हटाना बाधित बहुखण्डीय अपलोडिंग वस्तुओं )
s3fs -u बाल्टी

वर्णन

s3fs एक FUSE फ़ाइल सिस्टम है जो आपको Amazon S3 बकेट को स्थानीय के रूप में माउंट करने की अनुमति देता है
फाइल सिस्टम। यह S3 में फ़ाइलों को मूल रूप से और पारदर्शी रूप से संग्रहीत करता है (यानी, आप अन्य का उपयोग कर सकते हैं)।
समान फ़ाइलों तक पहुँचने के लिए प्रोग्राम)।

प्रमाणीकरण

S3fs पासवर्ड फ़ाइल में यह प्रारूप है (यदि आपके पास केवल एक सेट है तो इस प्रारूप का उपयोग करें)।
साख):
accessKeyId:SecretAccessKey

यदि आपके पास क्रेडेंशियल्स का एक से अधिक सेट है, तो यह सिंटैक्स भी पहचाना जाता है:
बाल्टीनाम:accessKeyId:SecretAccessKey

पासवर्ड फ़ाइलें दो स्थानों पर संग्रहीत की जा सकती हैं:
/etc/passwd-s3fs [0640]
$HOME/.passwd-s3fs [0600]

विकल्प

सामान्य विकल्पों
-h --मदद
प्रिंट सहायता

--संस्करण
प्रिंट संस्करण

-f FUSE अग्रभूमि विकल्प - डेमॉन के रूप में न चलाएँ।

-s FUSE सिंगलथ्रेडेड विकल्प (बहु-थ्रेडेड ऑपरेशन अक्षम करता है)

माउंट विकल्पों
सभी s3fs विकल्प उस फॉर्म में दिए जाने चाहिए जहाँ "ऑप्ट" है:
=

-o default_acl (डिफ़ॉल्ट = "निजी")
सभी लिखित S3 ऑब्जेक्ट पर लागू होने वाला डिफ़ॉल्ट डिब्बाबंद एसीएल, उदाहरण के लिए, "पब्लिक-रीड"।
किसी भी बनाई गई फ़ाइल में यह डिब्बाबंद एसीएल होगा। किसी भी अद्यतन फ़ाइल में यह भी होगा
डिब्बाबंद एसीएल लागू!

-o पुनः प्रयास करें (डिफ़ॉल्ट = "2")
विफल S3 लेनदेन को पुनः प्रयास करने की संख्या।

-o उपयोग_कैश (डिफ़ॉल्ट = "" जिसका अर्थ है अक्षम)
स्थानीय फ़ाइल कैश के लिए उपयोग करने हेतु स्थानीय फ़ोल्डर।

-o del_cache - स्थानीय फ़ाइल कैश हटाएँ
s3fs प्रारंभ होने और बाहर निकलने पर स्थानीय फ़ाइल कैश हटाएँ।

-o स्टोरेज_क्लास (डिफ़ॉल्ट मानक है)
निर्दिष्ट स्टोरेज क्लास के साथ ऑब्जेक्ट को स्टोर करें। यह विकल्प पुराने विकल्प को प्रतिस्थापित करता है
उपयोग_आरआरएस. संभावित मान: मानक, मानक_आईए, और कम_अतिरेक।

-o उपयोग_आरआरएस (डिफ़ॉल्ट अक्षम है)
अमेज़ॅन के रिड्यूस्ड रिडंडेंसी स्टोरेज का उपयोग करें। इस विकल्प को निर्दिष्ट नहीं किया जा सकता
उपयोग_एसएसई. (पुराने संस्करण के लिए use_rrs=1 निर्दिष्ट कर सकते हैं) इस विकल्प को प्रतिस्थापित कर दिया गया है
नया स्टोरेज_क्लास विकल्प।

-o उपयोग_एसएसई (डिफ़ॉल्ट अक्षम है)
तीन प्रकार के अमेज़न के सर्वर-साइट एन्क्रिप्शन निर्दिष्ट करें: SSE-S3, SSE-C या SSE-KMS। एसएसई-
S3 अमेज़न S3-प्रबंधित एन्क्रिप्शन कुंजियों का उपयोग करता है, SSE-C ग्राहक द्वारा प्रदत्त एन्क्रिप्शन का उपयोग करता है
कुंजियाँ, और SSE-KMS मास्टर कुंजी का उपयोग करता है जिसे आप AWS KMS में प्रबंधित करते हैं। आप निर्दिष्ट कर सकते हैं
"use_sse" या "use_sse=1" SSE-S3 प्रकार को सक्षम करता है (use_sse=1 पुराने प्रकार का पैरामीटर है)।
SSE-C सेट करने के मामले में, आप "use_sse=custom", "use_sse=custom" निर्दिष्ट कर सकते हैं:
कुंजी फ़ाइल पथ>" या "use_sse= "(केवल
निर्दिष्ट पुराने प्रकार का पैरामीटर है)। आप संक्षिप्त "कस्टम" के लिए "सी" का उपयोग कर सकते हैं। सीमा - शुल्क
कुंजी फ़ाइल 600 अनुमति होनी चाहिए। फ़ाइल में कुछ पंक्तियाँ हो सकती हैं, प्रत्येक पंक्ति एक है
एसएसई-सी कुंजी। फ़ाइल की पहली पंक्ति का उपयोग ग्राहक द्वारा प्रदत्त एन्क्रिप्शन कुंजी के रूप में किया जाता है
हेडर आदि अपलोड करना और बदलना। यदि पहली पंक्ति के बाद कुछ कुंजियाँ हैं, तो वे
ऑब्जेक्ट डाउनलोड करने के लिए उपयोग किया जाता है जो पहली कुंजी द्वारा एन्क्रिप्ट नहीं किया जाता है। ताकि आप कर सकें
सभी SSE-C कुंजियों को फ़ाइल में रखें, जो SSE-C कुंजी इतिहास है। यदि आप निर्दिष्ट करते हैं
फ़ाइल पथ के बिना "कस्टम" ("सी"), आपको लोड_एसएसई_सी विकल्प या द्वारा कस्टम कुंजी सेट करने की आवश्यकता है
AWSSSECKEYS वातावरण। (AWSSSECKEYS वातावरण में ":" के साथ कुछ SSE-C कुंजियाँ हैं
विभाजक।) इस विकल्प का उपयोग एसएसई प्रकार तय करने के लिए किया जाता है। ताकि यदि आप ऐसा न करें
अपलोड करते समय किसी ऑब्जेक्ट को एन्क्रिप्ट करना चाहते हैं, लेकिन आपको एन्क्रिप्टेड ऑब्जेक्ट को डिक्रिप्ट करने की आवश्यकता है
डाउनलोड करते समय आप इस विकल्प के स्थान पर Load_sse_c विकल्प का उपयोग कर सकते हैं। SSE सेटिंग के लिए-
KMS, "use_sse=kmsid" या "use_sse=kmsid" निर्दिष्ट करें: "। आप इसके लिए "k" का उपयोग कर सकते हैं
लघु "kmsid"। यदि आप अपने साथ SSE-KMS प्रकार निर्दिष्ट करते हैं AWS KMS में, आप
इसे "kmsid:"(या "k:") के बाद सेट कर सकते हैं। यदि आप केवल "kmsid"("k") निर्दिष्ट करते हैं, तो आपको यह करना होगा
AWSSSEKMSID वातावरण सेट करें जो मान है . आपको सावधान रहना चाहिए
कि आप KMS आईडी का उपयोग नहीं कर सकते जो समान EC2 क्षेत्र नहीं है।

-o लोड_एसएसई_सी - एसएसई-सी कुंजी निर्दिष्ट करें
डिक्रिप्टिंग के लिए कस्टम-प्रदत्त एन्क्रिप्शन कुंजी फ़ाइल पथ निर्दिष्ट करें
डाउनलोड हो रहा है। यदि आप अपलोड करते समय कस्टम-प्रदत्त एन्क्रिप्शन कुंजी का उपयोग करते हैं, तो आप
"use_sse=custom" के साथ निर्दिष्ट करें। फ़ाइल में कई पंक्तियाँ हैं, एक पंक्ति का अर्थ है एक कस्टम
चाबी। ताकि आप सभी SSE-C कुंजी को फ़ाइल में रख सकें, अर्थात SSE-C कुंजी इतिहास।
AWSSSECKEYS वातावरण इस फ़ाइल सामग्री के समान है।

-o passwd_फ़ाइल (डिफ़ॉल्ट = "")
पासवर्ड फ़ाइल का पथ निर्दिष्ट करें, जिसे प्राथमिकता दी जाती है
$HOME/.passwd-s3fs और /etc/passwd-s3fs में पासवर्ड

-o ahbe_conf (डिफ़ॉल्ट = "" जिसका अर्थ है अक्षम)
यह विकल्प कॉन्फ़िगरेशन फ़ाइल पथ निर्दिष्ट करता है कि कौन सी फ़ाइल अतिरिक्त HTTP है
फ़ाइल (ऑब्जेक्ट) एक्सटेंशन द्वारा हेडर।
कॉन्फ़िगरेशन फ़ाइल स्वरूप नीचे है:
-----------
लाइन = [फ़ाइल प्रत्यय] HTTP-हेडर [HTTP-मान]
फ़ाइल प्रत्यय = फ़ाइल (ऑब्जेक्ट) प्रत्यय, यदि यह फ़ील्ड खाली है, तो इसका अर्थ है "*"(सभी
वस्तु)।
HTTP-हेडर = अतिरिक्त HTTP हेडर नाम
HTTP-मान = अतिरिक्त HTTP हेडर मान
-----------
नमूना:
-----------
.gz सामग्री-एन्कोडिंग gzip
.Z सामग्री-एन्कोडिंग संपीड़ित
X-S3FS-MYHTTPHEAD myvalue
-----------
एक नमूना कॉन्फ़िगरेशन फ़ाइल "परीक्षण" निर्देशिका में अपलोड की गई है। यदि आप इसे निर्दिष्ट करते हैं
"कंटेंट-एन्कोडिंग" HTTP हेडर सेट करने का विकल्प, कृपया RFC 2616 का ध्यान रखें।

-o public_bucket (डिफ़ॉल्ट = "" जिसका अर्थ है अक्षम)
1 पर सेट होने पर गुमनाम रूप से एक सार्वजनिक बकेट माउंट करें, $HOME/.passwd-s3fs को अनदेखा करें और
/etc/passwd-s3fs फ़ाइलें।

-o कनेक्ट_टाइमआउट (डिफ़ॉल्ट = "300" सेकंड)
हार मानने से पहले कनेक्शन के लिए प्रतीक्षा करने का समय।

-o readwrite_timeout (डिफ़ॉल्ट = "60" सेकंड)
हार मानने से पहले पढ़ने/लिखने की गतिविधि के बीच प्रतीक्षा करने का समय।

-o max_stat_cache_size (डिफ़ॉल्ट = "1000" प्रविष्टियाँ (लगभग 4एमबी))
स्टेट कैश में प्रविष्टियों की अधिकतम संख्या

-o stat_cache_expire (डिफ़ॉल्ट कोई समाप्ति नहीं है)
स्टेट कैश में प्रविष्टियों के लिए समाप्ति समय (सेकंड) निर्दिष्ट करें

-o Enable_noobj_cache (डिफ़ॉल्ट अक्षम है)
उस ऑब्जेक्ट के लिए कैश प्रविष्टियाँ सक्षम करें जो मौजूद नहीं है। s3fs को हमेशा जांचना पड़ता है
क्या फ़ाइल (या उप निर्देशिका) ऑब्जेक्ट (पथ) के अंतर्गत मौजूद है जब s3fs कुछ करता है
कमांड, चूंकि s3fs ने एक ऐसी निर्देशिका को पहचान लिया है जो मौजूद नहीं है और जिसमें फ़ाइलें हैं
या स्वयं के अंतर्गत उप निर्देशिकाएँ। यह ListBucket अनुरोध को बढ़ाता है और बनाता है
प्रदर्शन ख़राब. आप प्रदर्शन के लिए इस विकल्प को निर्दिष्ट कर सकते हैं, s3fs इसमें याद रखता है
स्टेट कैश कि ऑब्जेक्ट (फ़ाइल या निर्देशिका) मौजूद नहीं है।

-o no_check_certificate (डिफ़ॉल्ट रूप से यह विकल्प अक्षम है)
एसएसएल प्रमाणपत्र की जांच न करें. सर्वर प्रमाणपत्र की जाँच नहीं की जाएगी
उपलब्ध प्रमाणपत्र प्राधिकारी.

-o nodnscache - डीएनएस कैश अक्षम करें।
s3fs हमेशा डीएनएस कैश का उपयोग कर रहा है, यह विकल्प डीएनएस कैश को अक्षम कर देता है।

-o nosscache - एसएसएल सत्र कैश अक्षम करें।
s3fs हमेशा ssl सत्र कैश का उपयोग कर रहा है, यह विकल्प ssl सत्र कैश को अक्षम कर देता है।

-o मल्टीरेक_मैक्स (डिफ़ॉल्ट = "20")
वस्तुओं को सूचीबद्ध करने के लिए समानांतर अनुरोध की अधिकतम संख्या।

-o समानांतर_गणना (डिफ़ॉल्ट = "5")
बड़ी वस्तुओं को अपलोड करने के लिए समानांतर अनुरोध की संख्या। s3fs बड़े पैमाने पर अपलोड करता है
मल्टीपार्ट पोस्ट अनुरोध द्वारा ऑब्जेक्ट (डिफ़ॉल्ट: 20 एमबी से अधिक), और समानांतर अनुरोध भेजता है।
यह विकल्प समानांतर अनुरोध संख्या को सीमित करता है जो s3fs एक ही बार में अनुरोध करता है। यह है
सीपीयू और नेटवर्क बैंड के आधार पर यह मान सेट करना आवश्यक है। यह विकल्प है
fd_page_size विकल्प के लिए विलंबित और इसे प्रभावित करता है।

-o fd_page_size(default='52428800'(50एमबी))
प्रत्येक फ़ाइल डिस्क्रिप्टर के लिए आंतरिक प्रबंधन पृष्ठ आकार की संख्या। देरी के लिए
s3fs द्वारा पढ़ना और लिखना, s3fs उन पृष्ठों का प्रबंधन करता है जो ऑब्जेक्ट से अलग होते हैं।
प्रत्येक पृष्ठ पर एक स्थिति होती है कि डेटा पहले ही लोड हो चुका है (या अभी तक लोड नहीं हुआ है)। यह
जब आपको प्रदर्शन में कोई समस्या न हो तो विकल्प नहीं बदलना चाहिए। यह
मान पैरेलल_काउंट और मल्टीपार्ट_साइज़ द्वारा स्वचालित रूप से बदल जाता है
मान (fd_page_size मान = समानांतर_गिनती * मल्टीपार्ट_आकार)।

-o मल्टीपार्ट_साइज़(डिफ़ॉल्ट='10'(10एमबी))
मल्टीपार्ट अपलोडिंग अनुरोध में एक भाग के आकार की संख्या। डिफ़ॉल्ट आकार है
10MB(10485760बाइट), यह मान न्यूनतम आकार है। एमबी और उससे अधिक की संख्या निर्दिष्ट करें
10(एमबी). यह विकल्प fd_page_size विकल्प से जुड़ा हुआ है और इसे प्रभावित करता है।

-o यूआरएल (डिफ़ॉल्ट = "http://s3.amazonaws.com")
अमेज़ॅन S3 तक पहुंचने के लिए उपयोग करने के लिए यूआरएल सेट करता है। अगर आप HTTPS का इस्तेमाल करना चाहते हैं तो सेट कर सकते हैं
url=https://s3.amazonaws.com

-o समापन बिंदु (डिफ़ॉल्ट = "हमें-पूर्व-1")
उपयोग के लिए अंतिम बिंदु सेट करता है। यदि यह विकल्प निर्दिष्ट नहीं है, तो s3fs "us-east-1" का उपयोग करता है
डिफ़ॉल्ट के रूप में क्षेत्र. यदि s3fs द्वारा निर्दिष्ट क्षेत्र से कनेक्ट नहीं हो सका
यह विकल्प, s3fs नहीं चल सका. लेकिन यदि आप इस विकल्प को निर्दिष्ट नहीं करते हैं, और यदि आप
डिफ़ॉल्ट क्षेत्र से कनेक्ट नहीं हो सकता, s3fs स्वचालित रूप से कनेक्ट होने का पुनः प्रयास करेगा
दूसरे क्षेत्र में. इसलिए s3fs सही क्षेत्र का नाम जान सकता है, क्योंकि s3fs जान सकता है
इसे S3 सर्वर से किसी त्रुटि में ढूंढें।

-o sigv2 (डिफ़ॉल्ट हस्ताक्षर संस्करण 4 है)
सिंग सिग्नेचर संस्करण 2 द्वारा एडब्ल्यूएस अनुरोधों पर हस्ताक्षर करना सेट करता है।

-o mp_umask (डिफ़ॉल्ट "0000" है)
माउंट पॉइंट डायरेक्टरी के लिए umask सेट करता है। यदि अनुमति_अन्य विकल्प सेट नहीं है, तो s3fs
केवल स्वामी को माउंट पॉइंट तक पहुंच की अनुमति देता है। विपरीत स्थिति में s3fs
डिफ़ॉल्ट रूप से सभी उपयोगकर्ताओं तक पहुंच की अनुमति देता है। लेकिन यदि आप अनुमति_अन्य को इसके साथ सेट करते हैं
यह विकल्प, आप इसके द्वारा माउंट पॉइंट की अनुमति अनुमतियों को नियंत्रित कर सकते हैं
उमास्क जैसा विकल्प।

-o नोमल्टीपार्ट - मल्टीपार्ट अपलोड अक्षम करें

-o Enable_content_md5 (डिफ़ॉल्ट अक्षम है)
कंटेंट-एमडी5 हेडर द्वारा मल्टीपार्ट के बिना अपलोड किए गए डेटा को सत्यापित करना। भेजने के लिए सक्षम करें
मल्टीपार्ट पोस्टिंग के बिना किसी ऑब्जेक्ट को अपलोड करते समय "कंटेंट-एमडी5" हेडर। यदि यह हो तो
विकल्प सक्षम है, अपलोड करते समय इसका s3fs के प्रदर्शन पर कुछ प्रभाव पड़ता है
छोटी वस्तु. क्योंकि बड़ी वस्तु अपलोड करते समय s3fs हमेशा MD5 की जाँच करता है, यह
विकल्प बड़ी वस्तु पर प्रभाव नहीं डालता.

-o iam_role (डिफ़ॉल्ट कोई भूमिका नहीं है)
IAM भूमिका सेट करें जो इंस्टेंस मेटा-डेटा से क्रेडेंशियल्स की आपूर्ति करेगी।

-o noxmlns - xml नाम स्थान का पंजीकरण अक्षम करें।
ListBucketResult की प्रतिक्रिया के लिए xml नाम स्थान पंजीकृत करना अक्षम करें
ListVersionsResult आदि से डिफ़ॉल्ट नाम स्थान देखा जाता है
"http://s3.amazonaws.com/doc/2006-03-01". यह विकल्प अभी निर्दिष्ट नहीं किया जाना चाहिए,
क्योंकि s3fs v1.66 ​​के बाद स्वचालित रूप से xmlns को देखता है।

-o nocopyapi - अन्य अपूर्ण संगतता वस्तु भंडारण के लिए।
एक वितरित ऑब्जेक्ट भंडारण के लिए जो PUT (कॉपी) के बिना संगतता S3 API है
एपीआई)। यदि आप यह विकल्प सेट करते हैं, तो s3fs "x-amz-copy-source"(कॉपी) के साथ PUT का उपयोग नहीं करते हैं
एपीआई)। चूँकि इस विकल्प से ट्रैफ़िक 2-3 गुना बढ़ जाता है, इसलिए हम अनुशंसा नहीं करते हैं
इस।

-o norenameapi - अन्य अपूर्ण संगतता ऑब्जेक्ट भंडारण के लिए।
एक वितरित ऑब्जेक्ट भंडारण के लिए जो PUT (कॉपी) के बिना संगतता S3 API है
एपीआई)। यह विकल्प nocopyapi विकल्प का एक उपसमूह है। Nocopyapi विकल्प नहीं है
सभी कमांड के लिए कॉपी-एपीआई का उपयोग करें (उदा. चामोद, चाउन, टच, एमवी, आदि), लेकिन यह विकल्प
केवल नाम बदलने के आदेश (उदा. एमवी) के लिए कॉपी-एपीआई का उपयोग नहीं करता है। यदि यह विकल्प निर्दिष्ट है
नोकोपापी के साथ, s3fs इसे अनदेखा कर देता है।

-o उपयोग_पथ_अनुरोध_शैली (विरासत एपीआई कॉलिंग शैली का उपयोग करें)
S3-जैसे API के साथ संगतता सक्षम करें जो वर्चुअल-होस्ट अनुरोध का समर्थन नहीं करता है
शैली, पुराने पथ अनुरोध शैली का उपयोग करके।

-o डीबीजीलेवल (डिफ़ॉल्ट = "क्रिट")
डिबग संदेश स्तर सेट करें. मान को क्रिट (महत्वपूर्ण), त्रुटि (त्रुटि) के रूप में सेट करें,
डिबग स्तर तक चेतावनी (चेतावनी), जानकारी (सूचना)। डिफ़ॉल्ट डिबग स्तर महत्वपूर्ण है.
यदि s3fs "-d" विकल्प के साथ चलता है, तो डिबग स्तर की जानकारी सेट की जाती है। जब s3fs पकड़ते हैं
सिग्नल SIGUSR2, डिबग स्तर बम्पअप है।

-o कर्लडीबीजी - कर्ल डिबग संदेश डालें
यह विकल्प निर्दिष्ट होने पर libcurl से डिबग संदेश डालें।

फ़्यूज़/माउंट विकल्प

'मैन माउंट' में वर्णित अधिकांश सामान्य माउंट विकल्प समर्थित हैं (ro, rw, suid,
nosuid, dev, nodev, exec, noexec, atime, noatime, sync async, dirsync)। फ़ाइल सिस्टम हैं
डिफ़ॉल्ट रूप से '-onodev,nosuid' के साथ माउंट किया गया है, जिसे केवल विशेषाधिकार प्राप्त लोगों द्वारा ही ओवरराइड किया जा सकता है
उपयोगकर्ता.

कई FUSE विशिष्ट माउंट विकल्प हैं जिन्हें निर्दिष्ट किया जा सकता है। उदाहरणार्थ_अन्य को अनुमति दें। देखना
पूरे सेट के लिए FUSE README।

टिप्पणियाँ

अधिकतम फ़ाइल आकार=64जीबी (s3fs द्वारा सीमित, अमेज़न द्वारा नहीं)।

यदि "use_cache" विकल्प के माध्यम से सक्षम किया जाता है, तो s3fs स्वचालित रूप से फ़ाइलों का एक स्थानीय कैश बनाए रखता है
use_cache द्वारा निर्दिष्ट फ़ोल्डर में। जब भी s3fs को S3 पर किसी फ़ाइल को पढ़ने या लिखने की आवश्यकता होती है,
यह सबसे पहले पूरी फ़ाइल को स्थानीय रूप से use_cache द्वारा निर्दिष्ट फ़ोल्डर में डाउनलोड करता है
उस पर काम करता है. जब fuse_release() को कॉल किया जाता है, तो s3fs फ़ाइल को S3 पर फिर से अपलोड करेगा
बदल दिया गया है। S3fs S5 से डाउनलोड को न्यूनतम करने के लिए md3 चेकसम का उपयोग करता है।

use_cache द्वारा निर्दिष्ट फ़ोल्डर केवल एक स्थानीय कैश है। इसे किसी भी समय हटाया जा सकता है.
s3fs मांग पर इसका पुनर्निर्माण करता है।

स्थानीय फ़ाइल कैशिंग md5 चेकसम (ETag HTTP हेडर) की गणना और तुलना करके काम करती है।

s3fs उत्तोलन /आदि/माइम.प्रकार फ़ाइल नाम के आधार पर "सही" सामग्री-प्रकार का "अनुमान" लगाना
विस्तार। इसका मतलब यह है कि आप किसी वेबसाइट को S3 पर कॉपी कर सकते हैं और उसे सीधे S3 से प्रस्तुत कर सकते हैं
सही सामग्री-प्रकार के साथ!

onworks.net सेवाओं का उपयोग करके ऑनलाइन s3fs का उपयोग करें