s3fs - Интернет в облаке

ПРОГРАММА:

ИМЯ

S3FS - файловая система на основе FUSE, поддерживаемая Amazon S3

СИНТАКСИС

монтаж
s3fs ведро [: / путь] Точка монтирования [опции]

размонтирование
размонтировать Точка монтирования

утилита Режим ( удаление прерванный многочастному Подгрузка объекты )
s3fs -u ведро

ОПИСАНИЕ

s3fs - это файловая система FUSE, которая позволяет монтировать корзину Amazon S3 как локальную
файловая система. Он хранит файлы изначально и прозрачно в S3 (т. Е. Вы можете использовать другие
программы для доступа к тем же файлам).

АВТОРИЗАЦИЯ

Файл паролей s3fs имеет этот формат (используйте этот формат, если у вас есть только один набор
реквизиты для входа):
AccessKeyId:секретный ключ доступа

Если у вас есть несколько наборов учетных данных, также распознается этот синтаксис:
ведронаме:AccessKeyId:секретный ключ доступа

Файлы паролей могут храниться в двух местах:
/ и т.д. / passwd-s3fs [0640]
$ HOME / .passwd-s3fs [0600]

ДОПОЛНИТЕЛЬНЫЕ ОПЦИИ

Генеральная кредита
-h --Помогите
помощь при печати

--версия
версия для печати

-f Опция переднего плана FUSE - не запускать как демон.

-s Однопоточная опция FUSE (отключает многопоточную работу)

монтировать кредита
Все параметры s3fs должны быть указаны в форме, где "opt":
знак равно

-o default_acl (по умолчанию = "частный")
стандартный acl-адрес по умолчанию, применяемый ко всем записанным объектам S3, например, «общедоступное чтение».
Все созданные файлы будут иметь этот стандартный acl. Любые обновленные файлы также будут иметь это
консервы acl применены!

-o повторные попытки (по умолчанию = "2")
количество повторных попыток неудачной транзакции S3.

-o use_cache (default = "" что означает отключено)
локальная папка для использования в локальном файловом кеше.

-o del_cache - удалить локальный файловый кеш
удалить локальный файловый кеш при запуске и выходе s3fs.

-o storage_class (по умолчанию - стандартный)
объект-хранилище с указанным классом хранения. эта опция заменяет старую опцию
use_rrs. Возможные значения: standard, standard_ia и уменьшенный_redundancy.

-o use_rrs (по умолчанию отключено)
использовать хранилище с уменьшенной избыточностью Amazon. эта опция не может быть указана с
use_sse. (для старой версии можно указать use_rrs = 1) эта опция заменена на
новая опция storage_class.

-o use_sse (по умолчанию отключено)
Укажите три типа шифрования сервер-сайт Amazon: SSE-S3, SSE-C или SSE-KMS. SSE-
S3 использует ключи шифрования, управляемые Amazon S3, SSE-C использует шифрование, предоставляемое заказчиком.
keys, а SSE-KMS использует главный ключ, которым вы управляете в AWS KMS. Вы можете указать
«use_sse» или «use_sse = 1» включает тип SSE-S3 (use_sse = 1 - параметр старого типа).
В случае настройки SSE-C можно указать use_sse = custom, use_sse = custom:
путь к ключевому файлу> "или" use_sse = "(Только
указан параметр старого типа). Вы можете использовать «c» для краткости «custom». Обычай
ключевой файл должен иметь разрешение 600. В файле может быть несколько строк, каждая строка - одна
Ключ SSE-C. Первая строка в файле используется как ключи шифрования, предоставляемые заказчиком для
загрузка и изменение заголовков и т. д. Если после первой строки есть какие-то ключи, они
используются скачиваемые объекты, зашифрованные не первым ключом. Так что ты можешь
хранить все ключи SSE-C в файле, то есть истории ключей SSE-C. Если вы укажете
"custom" ("c") без пути к файлу, вам нужно установить собственный ключ с помощью опции load_sse_c или
Среда AWSSSECKEYS. (В среде AWSSSECKEYS есть несколько ключей SSE-C с ":"
разделитель.) Эта опция используется для определения типа SSE. Так что если вы не
хотите зашифровать объект при загрузке, но вам нужно расшифровать зашифрованный объект на
downloaing, вы можете использовать опцию load_sse_c вместо этой опции. Для настройки SSE-
KMS, укажите use_sse = kmsid или use_sse = kmsid: ". Вы можете использовать" k "для
короткое "кмсид". Если вы можете указать тип SSE-KMS с вашим в AWS KMS вы
можно установить после «kmsid:» (или «k:»). Если вы укажете только «kmsid» («k»), вам необходимо
установить среду AWSSSEKMSID, значение которой . Вы должны быть осторожны с
что вы не можете использовать идентификатор KMS, который не совпадает с регионом EC2.

-o load_sse_c - указать ключи SSE-C
Укажите путь к файлу ключей шифрования, предоставленный пользователем, для расшифровки на
Duwnloading. Если вы используете предоставленный пользователем ключ шифрования при загрузке, вы
укажите "use_sse = custom". В файле много строк, одна строка означает одну нестандартную
ключ. Чтобы вы могли хранить все ключи SSE-C в файле, то есть истории ключей SSE-C.
Среда AWSSSECKEYS такая же, как и содержимое этого файла.

-o passwd_file (по умолчанию = "")
укажите путь к файлу паролей, который имеет приоритет перед
пароль в $ HOME / .passwd-s3fs и / etc / passwd-s3fs

-o ahbe_conf (по умолчанию = "" что означает отключено)
Этот параметр указывает путь к файлу конфигурации, который является дополнительным файлом HTTP.
заголовок по расширению файла (объекта).
Формат файла конфигурации приведен ниже:
-----------
line = [суффикс файла] HTTP-заголовок [HTTP-значения]
суффикс файла = суффикс файла (объекта), если это поле пустое, значит "*" (все
объект).
HTTP-header = имя дополнительного HTTP-заголовка
HTTP-значения = дополнительное значение HTTP-заголовка
-----------
Пример:
-----------
.gz Кодирование содержимого gzip
.ZСжатие кодирования содержимого
X-S3FS-MYHTTPHEAD мое значение
-----------
Образец файла конфигурации загружен в "тестовую" директорию. Если вы укажете это
для установки HTTP-заголовка Content-Encoding, обратите внимание на RFC 2616.

-o public_bucket (по умолчанию = "" что означает отключено)
анонимно монтировать публичную корзину, если установлено значение 1, игнорирует $ HOME / .passwd-s3fs и
Файлы / etc / passwd-s3fs.

-o connect_timeout (по умолчанию = "300" секунд)
время ждать подключения, прежде чем отказаться.

-o readwrite_timeout (по умолчанию = "60" секунд)
время подождать между операциями чтения / записи, прежде чем отказаться.

-o max_stat_cache_size (по умолчанию = "1000" записей (около 4 МБ))
максимальное количество записей в кеше статистики

-o stat_cache_expire (по умолчанию не имеет срока действия)
указать время истечения срока (в секундах) для записей в кеше статистики

-o enable_noobj_cache (по умолчанию отключено)
включить записи в кеш для несуществующего объекта. s3fs всегда должен проверять
существует ли файл (или подкаталог) в объекте (пути), когда s3fs выполняет некоторые
команда, так как s3fs распознал каталог, который не существует и имеет файлы
или подкаталоги под себя. Это увеличивает запрос ListBucket и делает
производительность плохая. Вы можете указать эту опцию для производительности, s3fs запоминает в
stat кеш, что объект (файл или каталог) не существует.

-o no_check_certificate (по умолчанию эта опция отключена)
не проверяйте сертификат ssl. сертификат сервера не будет проверяться на соответствие
доступные центры сертификации.

-o nodnscache - отключить кеширование DNS.
s3fs всегда использует кеш dns, эта опция отключает кеш dns.

-o nosscache - отключить кеш сессий ssl.
s3fs всегда использует кеш сеанса ssl, эта опция отключает кеш сеанса ssl.

-o multireq_max (по умолчанию = "20")
максимальное количество параллельных запросов на листинг объектов.

-o parallel_count (по умолчанию = "5")
количество параллельных запросов на загрузку больших объектов. s3fs загружает большие
объект (по умолчанию: более 20 МБ) с помощью составного почтового запроса и отправляет параллельные запросы.
Эта опция ограничивает количество параллельных запросов, которые s3fs запрашивает сразу. это
необходимо установить это значение в зависимости от ЦП и полосы пропускания сети. Этот вариант
связан с параметром fd_page_size и влияет на него.

-o fd_page_size (по умолчанию = "52428800" (50 МБ))
количество размеров страницы внутреннего управления для каждого дескриптора файла. Для отложенных
чтение и запись с помощью s3fs, s3fs управляет страницами, которые отделены от объекта.
Каждая страница имеет статус, что данные уже загружены (или еще не загружены). Этот
параметр не следует изменять, если у вас нет проблем с производительностью. Этот
значение изменяется автоматически на parallel_count и multipart_size
значения (значение fd_page_size = parallel_count * multipart_size).

-o multipart_size (по умолчанию = "10" (10 МБ))
количество одной части в запросе на загрузку нескольких частей. Размер по умолчанию
10MB(10485760байт), это минимальный размер. Укажите количество МБ и более
10 (МБ). Этот параметр связан с параметром fd_page_size и влияет на него.

-o url (по умолчанию = "http://s3.amazonaws.com")
устанавливает URL-адрес для доступа к Amazon S3. Если вы хотите использовать HTTPS, вы можете установить
url = https: //s3.amazonaws.com

-o конечная точка (по умолчанию = "us-east-1")
устанавливает конечную точку для использования. Если этот параметр не указан, s3fs использует «us-east-1».
регион по умолчанию. Если s3fs не может подключиться к региону, указанному
этот вариант, s3fs не может работать. Но если вы не укажете эту опцию, и если вы
не может подключиться к региону по умолчанию, s3fs попытается автоматически подключиться
в другой регион. Таким образом, s3fs может знать правильное имя региона, потому что s3fs может
найди это в ошибке с сервера S3.

-o sigv2 (по умолчанию подпись версии 4)
устанавливает подписывание запросов AWS с помощью функции Sing Signature Version 2.

-o mp_umask (по умолчанию "0000")
устанавливает umask для каталога точки монтирования. Если опция allow_other не установлена, s3fs
разрешает доступ к точке монтирования только владельцу. В противном случае s3fs
по умолчанию разрешает доступ всем пользователям. Но если вы установите allow_other с помощью
этот параметр, вы можете контролировать разрешения для точки монтирования с помощью этого
вариант вроде umask.

-o nomultipart - отключить загрузку нескольких частей

-o enable_content_md5 (по умолчанию отключено)
проверка загруженных данных без multipart по заголовку content-md5. Разрешить отправку
Заголовок Content-MD5 при загрузке объекта без составной публикации. Если это
опция включена, она влияет на производительность s3fs при загрузке
небольшой объект. Поскольку s3fs всегда проверяет MD5 при загрузке большого объекта, это
опция не влияет на большой объект.

-o iam_role (по умолчанию - без роли)
установите роль IAM, которая будет предоставлять учетные данные из метаданных экземпляра.

-o noxmlns - отключить регистрацию пространства имен xml.
отключить регистрацию пространства имен xml для ответа ListBucketResult и
ListVersionsResult и т. Д. Пространство имен по умолчанию ищется из
"http://s3.amazonaws.com/doc/2006-03-01". Этот параметр сейчас указывать не нужно,
потому что s3fs автоматически ищет xmlns после v1.66.

-o nocopyapi - для другого хранилища объектов неполной совместимости.
Для распределенного объектного хранилища, совместимого с S3 API без PUT (копия
api). Если вы установите этот параметр, s3fs не будет использовать PUT с «x-amz-copy-source» (копировать
api). Поскольку этот вариант увеличивает трафик в 2-3 раза, мы не рекомендуем
.

-o norenameapi - для другого хранилища объектов неполной совместимости.
Для распределенного объектного хранилища, совместимого с S3 API без PUT (копия
api). Этот параметр является подмножеством параметра nocopyapi. Параметр nocopyapi не
используйте copy-api для всех команд (например, chmod, chown, touch, mv и т. д.), но этот параметр
не использует copy-api только для команды переименования (например, mv). Если эта опция указана
с nocopapi s3fs игнорирует это.

-o use_path_request_style (использовать устаревший стиль вызова API)
Обеспечьте совместимость с S3-подобными API, которые не поддерживают запрос виртуального хоста
style, используя старый стиль запроса пути.

-o dbglevel (по умолчанию = "крит")
Установите уровень отладочного сообщения. установить значение как крит (критическое), err (ошибка),
warn (предупреждение), info (информация) до уровня отладки. уровень отладки по умолчанию имеет решающее значение.
Если s3fs запускается с параметром «-d», устанавливается уровень отладки. Когда s3fs ловит
сигнал SIGUSR2, уровень отладки - повышенный.

-o curldbg - поместить сообщение отладки curl
Поместите отладочное сообщение из libcurl, если указана эта опция.

ПРЕДОХРАНИТЕЛЬ / КРЕПЛЕНИЕ ДОПОЛНИТЕЛЬНЫЕ ОПЦИИ

Поддерживается большинство общих параметров монтирования, описанных в 'man mount' (ro, rw, suid,
nosuid, dev, nodev, exec, noexec, atime, noatime, async sync, dirsync). Файловые системы
по умолчанию монтируется с помощью '-onodev, nosuid', который может быть отменен только привилегированным
пользователь.

Можно указать множество специфичных для FUSE опций монтирования. например, allow_other. Видеть
README ПРЕДОХРАНИТЕЛЯ для полного набора.

ПРИМЕЧАНИЯ

Максимальный размер файла = 64 ГБ (ограничен s3fs, а не Amazon).

Если включено с помощью опции "use_cache", s3fs автоматически поддерживает локальный кеш файлов.
в папке, указанной в use_cache. Когда s3fs нужно прочитать или записать файл на S3,
сначала он загружает весь файл локально в папку, указанную в use_cache и
действует на нем. Когда вызывается fuse_release (), s3fs повторно загружает файл на S3, если он
был изменен. s3fs использует контрольные суммы md5 для минимизации загрузок с S3.

Папка, указанная в use_cache, является просто локальным кешем. Его можно удалить в любой момент.
s3fs восстанавливает его по запросу.

Кэширование локальных файлов работает путем вычисления и сравнения контрольных сумм md5 (HTTP-заголовок ETag).

s3fs рычаги /etc/мим.типы "угадать" "правильный" тип содержимого на основе имени файла
расширение. Это означает, что вы можете скопировать веб-сайт на S3 и обслуживать его прямо с S3.
с правильными типами контента!

Используйте s3fs онлайн с помощью сервисов onworks.net