httrack - Trực tuyến trên đám mây

CHƯƠNG TRÌNH:

TÊN

httrack - trình duyệt ngoại tuyến: sao chép các trang web vào một thư mục cục bộ

SYNOPSIS

httrack [ url ] ... [ -bộ lọc ] ... [ + bộ lọc ] ... [ -Ồ, --con đường ] [ -w, --gương ] [ -À,
--pháp sư gương ] [ -NS, --get-tệp ] [ -tôi, --tiếp tục ] [ -Ừ, --đường dẫn gương ] [ -P,
--Ủy quyền ] [ -% f, --httpproxy-ftp [= N] ] [ -% b, --trói buộc ] [ -rN, --depth [= N] ] [ -% eN,
--ext-depth [= N] ] [ -mN, --max-files [= N] ] [ -MN, - max-size [= N] ] [ -EN, --max-time [= N] ]
[ -MỘT, --tốc độ tối đa [= N] ] [ -% cN, - kết nối mỗi giây [= N] ] [ -GN, --max-pause [= N] ] [
-cN, --sockets [= N] ] [ -TN, --timeout [= N] ] [ -RN, --retries [= N] ] [ -JN, --tốc độ phút [= N] ]
[ -HN, --host-control [= N] ] [ -%P, --extended-parsing [= N] ] [ -N, --gần ] [ -NS, --kiểm tra ]
[ -% L, --danh sách ] [ -%S, --danh sách url ] [ -NN, - cấu trúc [= N] ] [ -% D,
--cache-delay-type-check ] [ -% M, --mime-html ] [ -LN, --long-names [= N] ] [ -KN,
--keep-links [= N] ] [ -NS, --replace-bên ngoài ] [ -% x, - vô hiệu hóa mật khẩu ] [ -% q,
--bao gồm-truy vấn-chuỗi ] [ -ồ, - tạo ra lỗi ] [ -NS, --ge-old [= N] ] [ -%P,
- bảo tồn ] [ -% T, --utf8-chuyển đổi ] [ -bN, --cookies [= N] ] [ -bạn, --check-type [= N] ] [
-NS, --parse-java [= N] ] [ -sN, --robots [= N] ] [ -% h, --http-10 ] [ -% k, --cố sống đi ] [
-% B, --chấp thuận ] [ -%S, - cập nhật ] [ -% u, --urlhack ] [ -%MỘT, --cho rằng ] [ -@trong,
--protocol [= N] ] [ -% w, - mô-đun vô hiệu hóa ] [ -NS, --đại lý người dùng ] [ -% R, - giới thiệu ] [ -% E,
--từ ] [ -% F, --chân trang ] [ -% l, --ngôn ngữ ] [ -%Một, --Chấp nhận ] [ -% X, --tiêu đề ] [ -NS,
--cache [= N] ] [ -k, --store-all-trong-cache ] [ -%N, --không-bắt lại ] [ -% v, --trưng bày ] [
-NS, --không-đăng nhập ] [ -NS, --Yên lặng ] [ -z, --nhật ký bổ sung ] [ -Z, --debug-log ] [ -v, --dài dòng
] [ -NS, --file-log ] [ -f2, --log đơn ] [ -TÔI, --mục lục ] [ -%tôi, --build-top-index ] [
-%TÔI, --chỉ mục tìm kiếm ] [ -pN, - thâm niên [= N] ] [ -NS, --ở lại cùng một thư mục ] [ -NS,
--có thể đi xuống ] [ -Anh, --có thể đi lên ] [ -NS, --có thể-lên-xuống ] [ -một,
--ở cùng một địa chỉ ] [ -NS, --ở trên cùng một tên miền ] [ -l, --ở lại cùng một tld ] [ -e,
--đi khắp nơi ] [ -% H, --tiêu đề gỡ lỗi ] [ -% !, - vô hiệu hóa-bảo mật-giới hạn ] [ -V,
--userdef-cmd ] [ -% W, --gọi lại ] [ -K, --keep-links [= N] ] [

MÔ TẢ

httrack cho phép bạn tải xuống một trang web World Wide Web từ Internet tới một địa chỉ
thư mục, xây dựng đệ quy tất cả các thư mục, nhận HTML, hình ảnh và các tệp khác
từ máy chủ đến máy tính của bạn. HTTrack sắp xếp liên kết tương đối của trang web ban đầu-
kết cấu. Chỉ cần mở một trang của trang web "được sao chép" trong trình duyệt của bạn và bạn có thể
duyệt trang web từ liên kết này đến liên kết khác, như thể bạn đang xem trực tuyến. HTTrack cũng có thể
cập nhật một trang web được sao chép hiện có và tiếp tục tải xuống bị gián đoạn.

VÍ DỤ

httrack www.someweb.com/bob/
trang nhân bản www.someweb.com/bob/ và chỉ trang này

httrack www.someweb.com/bob/ www.a Anothertest.com/mike/ + *. com / *. jpg -mime: ứng dụng / *
phản chiếu hai trang web với nhau (với các liên kết được chia sẻ) và chấp nhận mọi tệp .jpg trên
các trang web .com

httrack www.someweb.com/bob/bobby.html +* -r6
có nghĩa là lấy tất cả các tệp bắt đầu từ bobby.html, với 6 độ sâu liên kết và khả năng
đi khắp mọi nơi trên web

httrack www.someweb.com/bob/bobby.html --nhện -P proxy.myhost.com:8080
chạy trình thu thập thông tin trên www.someweb.com/bob/bobby.html bằng cách sử dụng proxy

httrack - cập nhật
cập nhật một máy nhân bản trong thư mục hiện tại

httrack
sẽ đưa bạn đến chế độ tương tác

httrack --tiếp tục
tiếp tục nhân bản trong thư mục hiện tại

LỰA CHỌN

Tổng Quát lựa chọn:
-O đường dẫn cho mirror / logfiles + cache (-O path mirror [, path cache and logfiles]) (--path
)

Hoạt động lựa chọn:
-w * các trang web phản chiếu (--mirror)

-W phản chiếu các trang web, bán tự động (đặt câu hỏi) (--mirror-wizard)

-g chỉ lấy tệp (được lưu trong thư mục hiện tại) (--get-tệp)

-i tiếp tục nhân bản bị gián đoạn bằng cách sử dụng bộ nhớ cache (- tiếp tục)

-Y nhân bản TẤT CẢ các liên kết nằm trong các trang cấp đầu tiên (liên kết nhân bản) (--mirrorlinks)

Proxy lựa chọn:
-Sử dụng proxy -P (-P proxy: cổng hoặc -P người dùng: pass @ proxy: cổng) (--proxy )

-% f * sử dụng proxy cho ftp (f0 không sử dụng) (--httpproxy-ftp [= N])

-% b sử dụng tên máy chủ cục bộ này để thực hiện / gửi yêu cầu (-% b tên máy chủ) (--bind )

Giới hạn lựa chọn:
-rN đặt độ sâu gương thành N (* r9999) (--depth [= N])

-% eN đặt độ sâu liên kết ngoài thành N (*% e0) (--ext-depth [= N])

-mN độ dài tệp tối đa cho tệp không phải html (--max-files [= N])

-mN, độ dài tệp tối đa N2 cho không phải html (N) và html (N2)

Kích thước tổng thể tối đa của -MN có thể được tải lên / quét (--max-size [= N])

-EN thời gian phản chiếu tối đa tính bằng giây (60 = 1 phút, 3600 = 1 giờ) (--max-time [= N])

-Tốc độ truyền tối đaAN tính bằng byte / giây (tối đa 1000 = 1KB / s) (--tốc độ tối đa [= N])

-% cN số kết nối / giây tối đa (*% c10) (- kết nối trên giây [= N])

-GN tạm dừng truyền nếu đạt đến N byte và đợi cho đến khi tệp khóa bị xóa
(--max-pause [= N])

Dòng chảy điều khiển:
-cN số lượng nhiều kết nối (* c8) (--sockets [= N])

-TN thời gian chờ, số giây sau khi một liên kết không phản hồi bị tắt (--timeout [= N])

-RN số lần thử lại, trong trường hợp hết thời gian chờ hoặc lỗi không nghiêm trọng (* R1) (--retries [= N])

Kiểm soát kẹt xe -JN, tốc độ truyền tối thiểu (byte / giây) được chấp nhận cho một liên kết
(--tốc độ [= N])

Máy chủ lưu trữ -HN bị bỏ qua nếu: 0 = không bao giờ, 1 = thời gian chờ, 2 = chậm, 3 = hết thời gian chờ hoặc chậm
(--host-control [= N])

Liên kết lựa chọn:
-% P * phân tích cú pháp mở rộng, cố gắng phân tích cú pháp tất cả các liên kết, ngay cả trong các thẻ hoặc Javascript không xác định
(% P0 không sử dụng) (--extended-parsing [= N])

-n lấy các tệp không phải html gần tệp html (ví dụ: một hình ảnh nằm bên ngoài) (--near)

-t kiểm tra tất cả các URL (ngay cả những URL bị cấm) (--test)

-% L thêm tất cả URL nằm trong tệp văn bản này (mỗi URL một dòng) (--list )

-%S thêm tất cả các quy tắc quét nằm trong tệp văn bản này (một quy tắc quét trên mỗi dòng)
(--urllist )

Xây dựng lựa chọn:
-Kiểu cấu trúc -NN (0 * cấu trúc ban đầu, 1+: xem bên dưới) (- cấu trúc [= N])

-hoặc cấu trúc do người dùng xác định (-N "% h% p /% n% q.% t")

-% N kiểm tra kiểu bị trì hoãn, không thực hiện bất kỳ kiểm tra liên kết nào mà hãy đợi quá trình tải xuống tệp bắt đầu
thay vào đó (thử nghiệm) (% N0 không sử dụng,% N1 sử dụng cho các phần mở rộng không xác định, *% N2 luôn
sử dụng)

-% D đã lưu trong bộ nhớ cache kiểm tra loại bị trì hoãn, không đợi loại từ xa trong quá trình cập nhật, để tăng tốc độ
họ (% D0 đợi, *% D1 không đợi) (--cached-delay-type-check)

-% M tạo một kho lưu trữ đầy đủ được đóng gói RFC MIME (.mht) (--mime-html)

-LN tên dài (L1 * tên dài / L0 8-3 chuyển đổi / L2 tương thích ISO9660)
(--long-names [= N])

-KN giữ các liên kết gốc (vd: http://www.adr/link) (K0 * liên kết tương đối, K tuyệt đối
liên kết, liên kết gốc K4, liên kết URI tuyệt đối K3, liên kết proxy minh bạch K5)
(--keep-links [= N])

-x thay thế các liên kết html bên ngoài bằng các trang lỗi (--replace-bên ngoài)

-% x không bao gồm bất kỳ mật khẩu nào cho các trang web được bảo vệ bằng mật khẩu bên ngoài (% x0 bao gồm)
(- vô hiệu hóa-mật khẩu)

-% q * bao gồm chuỗi truy vấn cho các tệp cục bộ (vô dụng, chỉ dành cho mục đích thông tin) (% q0
don t bao gồm) (--include-query-string)

-o * tạo tệp html đầu ra trong trường hợp lỗi (404 ..) (o0 don t create)
(- sinh-lỗi)

-X * xóa các tệp cũ sau khi cập nhật (X0 tiếp tục xóa) (--purge-old [= N])

-% p giữ nguyên các tệp html (giống với -K4 -% F "") (--preserve)

-% T liên kết chuyển đổi thành UTF-8 (--utf8-chuyển đổi)

Spider lựa chọn:
-bN chấp nhận cookie trong cookies.txt (0 = không chấp nhận, * 1 = chấp nhận) (--cookies [= N])

-u kiểm tra loại tài liệu nếu không xác định (cgi, asp ..) (u0 don t kiểm tra, * u1 kiểm tra nhưng /, u2
luôn luôn kiểm tra) (--check-type [= N])

-j * phân tích cú pháp Lớp Java (j0 không phân tích cú pháp, bitmask: | 1 phân tích cú pháp mặc định, | 2 phân tích cú pháp không
.class | 4 don t parse .js | 8 don t be hung hăng) (--parse-java [= N])

-sN tuân theo các thẻ robots.txt và meta rô bốt (0 = không bao giờ, 1 = đôi khi, * 2 = luôn luôn, 3 = luôn luôn
(ngay cả các quy tắc nghiêm ngặt)) (--robots [= N])

-% h buộc yêu cầu HTTP / 1.0 (giảm các tính năng cập nhật, chỉ dành cho máy chủ hoặc proxy cũ)
(--http-10)

-% k sử dụng giữ nguyên nếu có thể, giảm đáng kể độ trễ cho các tệp nhỏ và kiểm tra
yêu cầu (% k0 không sử dụng) (- còn tồn tại)

-% B yêu cầu khoan dung (chấp nhận phản hồi không có thật trên một số máy chủ, nhưng không phải tiêu chuẩn!)
(--chấp thuận)

-% s cập nhật hacks: nhiều loại hack khác nhau để hạn chế chuyển lại khi cập nhật (kích thước giống hệt nhau,
phản hồi không có thật ..) (- cập nhật)

-% url hacks: nhiều cách hack khác nhau để hạn chế các URL trùng lặp (dải //, www.foo.com == foo.com ..)
(--urlhack)

-% A giả sử rằng một kiểu (cgi, asp ..) luôn được liên kết với một kiểu mime (-% A
php3, cgi = text / html; dat, bin = application / x-zip) (--assume )

-cũng có thể được sử dụng để buộc một loại tệp cụ thể: --assume foo.cgi = text / html

- Giao thức internet @ iN (0 = cả ipv6 + ipv4, 4 = chỉ ipv4, 6 = chỉ ipv6) (--protocol [= N])

-% w vô hiệu hóa một mô-đun mime bên ngoài cụ thể (-% w htsswf -% w htsjava) (--disable-module
)

trình duyệt ID:
-F trường user-agent được gửi trong tiêu đề HTTP (-F "tên tác nhân người dùng") (--user-agent )

- Trường giới thiệu mặc định% R được gửi trong tiêu đề HTTP (--referer )

-% E từ địa chỉ email được gửi trong tiêu đề HTTP (--từ )

- Chuỗi% F chân trang trong mã Html (-% F "Được sao chép [từ máy chủ% s [tệp% s [tại% s]]]"
(--footer )

-% l ngôn ngữ ưu tiên (-% l "fr, en, jp, *" (--language )

-% a định dạng được chấp nhận (-% a "text / html, image / png; q = 0.9, * / *; q = 0.1" (--accept )

-% X dòng tiêu đề HTTP bổ sung (-% X "X-Magic: 42" (--headers )

Đăng nhập mục lục, bộ nhớ cache
-C tạo / sử dụng bộ nhớ cache để cập nhật và thử lại (C0 không có bộ nhớ cache, bộ nhớ cache C1 là bộ nhớ cache riêng, * C2
kiểm tra bản cập nhật trước) (--cache [= N])

-k lưu trữ tất cả các tệp trong bộ đệm (không hữu ích nếu tệp trên đĩa) (--store-all-in-cache)

-% n không tải xuống lại các tệp bị xóa cục bộ (--do-not-recatch)

-% v hiển thị trên màn hình tên tệp đã tải xuống (trong thời gian thực) - *% v1 phiên bản ngắn -% v2
hoạt ảnh đầy đủ (--display)

-Q no log - chế độ yên tĩnh (--do-not-log)

-q không có câu hỏi - chế độ yên tĩnh (--quiet)

-z log - thông tin bổ sung (--extra-log)

Nhật ký -Z - gỡ lỗi (--debug-log)

-v đăng nhập trên màn hình (--verbose)

-f * đăng nhập tệp (--file-log)

-f2 một tệp nhật ký duy nhất (--single-log)

-I * tạo chỉ mục (I0 don t make) (--index)

-% tôi tạo chỉ mục hàng đầu cho thư mục dự án (*% i0 don t make) (--build-top-index)

-% Tôi tạo chỉ mục có thể tìm kiếm được cho bản sao này (*% I0 không thực hiện) (--search-index)

Chuyên gia lựa chọn:
-pN chế độ ưu tiên: (* p3) (- thâm niên [= N])

-p0 chỉ quét, không lưu bất cứ thứ gì (để kiểm tra liên kết)

-p1 chỉ lưu các tệp html

-p2 chỉ lưu các tệp không phải html

- * p3 lưu tất cả các tệp

-p7 lấy các tệp html trước, sau đó xử lý các tệp khác

-S ở trên cùng một thư mục (--stay-on-same-dir)

-D * chỉ có thể chuyển xuống thành các dãy con (--can-go-down)

-U chỉ có thể chuyển đến các thư mục trên (--can-go-up)

-B đều có thể đi lên và xuống trong cấu trúc thư mục (--can-go-up-and-down)

-a * ở trên cùng một địa chỉ (--stay-on-same-address)

-d ở trên cùng một miền chính (--stay-on-same-domain)

-lẫn trên cùng một TLD (ví dụ: .com) (--stay-on-same-tld)

-chúng tôi đi khắp mọi nơi trên web (- đến mọi nơi)

-% H gỡ lỗi tiêu đề HTTP trong logfile (--debug-headers)

Guru lựa chọn: (làm KHÔNG sử dụng if khả thi)
- # X * sử dụng công cụ được tối ưu hóa (kiểm tra ranh giới bộ nhớ giới hạn) (- động cơ nhanh)

- # 0 kiểm tra bộ lọc (- # 0 * .gif www.bar.com/foo.gif) (--debug-testfilters )

- # 1 đơn giản hóa thử nghiệm (- # 1 ./foo/bar/../foobar)

- # 2 loại kiểm tra (- # 2 /foo/bar.php)

- Danh sách bộ nhớ đệm # C (- # C * .com / spider * .gif (--debug-cache )

- Sửa chữa bộ nhớ cache # R (bộ nhớ cache bị hỏng) (--repair-cache)

- # d trình phân tích cú pháp gỡ lỗi (--debug-parsing)

- # E trích xuất siêu dữ liệu bộ nhớ cache new.zip trong meta.zip

- # f luôn xóa tệp nhật ký (--advanced-flushlogs)

- Số bộ lọc tối đa # FN (--advanced-maxfilters [= N])

- Thông tin phiên bản # h (--version)

- # K quét stdin (gỡ lỗi) (--debug-scanstdin)

- Số lượng liên kết tối đa # L (- # L1000000) (--advanced-maxlinks)

- # p hiển thị thông tin tiến trình xấu (--advanced-progressiveinfo)

- URL bắt # P (--catch-url)

- # R quy trình FTP cũ (gỡ lỗi) (- sửa chữa-bộ nhớ đệm)

- # T tạo hoạt động chuyển giao. ghi nhật ký mỗi phút (--debug-xfrstats)

- # u thời gian chờ (--advanced-wait)

- # Z tạo tĩnh tốc độ truyền mỗi phút (--debug-ratestats)

Nguy hiểm lựa chọn: (làm KHÔNG sử dụng trừ khi bạn chính xác Biết gì bạn đang đang làm)
-%! bỏ qua các giới hạn bảo mật tích hợp nhằm tránh lạm dụng băng thông (băng thông,
kết nối đồng thời) (- vô hiệu hóa-bảo mật-giới hạn)

-QUAN TRỌNG
LƯU Ý: LỰA CHỌN NGUY HIỂM, CHỈ THÍCH HỢP CHO CHUYÊN GIA

- HÃY SỬ DỤNG NÓ VỚI SỰ CHĂM SÓC CỰC KỲ

Dòng lệnh riêng lựa chọn:
-V thực hiện lệnh hệ thống sau mỗi tệp ($ 0 là tên tệp: -V "rm \ $ 0")
(--userdef-cmd )

-% W sử dụng hàm thư viện bên ngoài làm trình bao bọc (-% W myfoo.so [, myparameters])
(--gọi lại )

Chi tiết: Tùy chọn N
-N0 Cấu trúc trang web (mặc định)

-N1 HTML trong web /, hình ảnh / các tệp khác trong web / hình ảnh /

-N2 HTML trong web / HTML, hình ảnh / khác trong web / hình ảnh

-N3 HTML trong web /, hình ảnh / khác trong web /

-N4 HTML trong web /, hình ảnh / khác trong web / xxx, trong đó xxx là phần mở rộng tệp (tất cả gif
sẽ được đưa vào web / gif chẳng hạn)

-N5 hình ảnh / khác trong web / xxx và HTML trong web / HTML

-N99 Tất cả các tệp trong web /, với tên ngẫu nhiên (tiện ích!)

-N100 cấu trúc trang web, không có www.domain.xxx/

-N101 Giống với N1 có nghĩa là "web" được thay thế bằng tên của trang web

-N102 Giống với N2 có nghĩa là "web" được thay thế bằng tên của trang web

-N103 Giống với N3 có nghĩa là "web" được thay thế bằng tên của trang web

-N104 Giống với N4 có nghĩa là "web" được thay thế bằng tên của trang web

-N105 Giống với N5 có nghĩa là "web" được thay thế bằng tên của trang web

-N199 Giống với N99 có nghĩa là "web" được thay thế bằng tên của trang web

-N1001 Giống với N1 ngoại trừ không có thư mục "web"

-N1002 Giống với N2 ngoại trừ không có thư mục "web"

-N1003 Giống với N3 ngoại trừ không có thư mục "web" (tùy chọn được đặt cho tùy chọn g)

-N1004 Giống với N4 ngoại trừ không có thư mục "web"

-N1005 Giống với N5 ngoại trừ không có thư mục "web"

-N1099 Giống với N99 ngoại trừ không có thư mục "web"

Chi tiết: Đã xác định người dùng tùy chọn N
% n Tên tệp không có loại tệp (ví dụ: hình ảnh)
% N Tên tệp, bao gồm loại tệp (ví dụ: image.gif)
% t Loại tệp (ví dụ: gif)
% p Đường dẫn [không có đuôi /] (ví dụ: / someimages)
% h Tên máy chủ (ví dụ: www.someweb.com)
% M URL MD5 (128 bit, 32 byte ascii)
% Q chuỗi truy vấn MD5 (128 bit, 32 byte ascii)
% k chuỗi truy vấn đầy đủ
% r tên giao thức (ví dụ: http)
% q chuỗi truy vấn nhỏ MD5 (16 bit, 4 byte ascii)
%S? Phiên bản tên ngắn (ví dụ:% sN)
% [param] biến param trong chuỗi truy vấn
% [param: before: after: blank: notfound] trích xuất biến nâng cao

Chi tiết: Đã xác định người dùng tùy chọn N và tiên tiến biến khai thác
% [param: before: after: blank: notfound]

-param: tên tham số

-trước
: chuỗi để thêm vào trước nếu tham số được tìm thấy

-after: chuỗi để nối thêm nếu tham số được tìm thấy

-không tìm thấy
: chuỗi thay thế nếu không tìm thấy tham số

-empty: chuỗi thay thế nếu tham số trống

-tất cả các trường, ngoại trừ trường đầu tiên (tên tham số), có thể để trống

Chi tiết: Tùy chọn K
-K0 foo.cgi? Q = 45 -> foo4B54.html? Q = 45 (URI tương đối, mặc định)

-K -> http://www.foobar.com/folder/foo.cgi? q = 45 (URL tuyệt đối) (--keep-links [= N])

-K3 -> /folder/foo.cgi?q=45 (URI tuyệt đối)

-K4 -> foo.cgi? Q = 45 (URL gốc)

-K5 -> http://www.foobar.com/folder/foo4B54.html? q = 45 (URL proxy minh bạch)

Phím tắt:
--gương
* tạo bản sao của (các) trang web (mặc định)

--được
lấy các tệp được chỉ định, không tìm kiếm các URL khác (-qg)

--danh sách
thêm tất cả URL nằm trong tệp văn bản này (-% L)

--đường dẫn gương
phản chiếu tất cả các liên kết trong các trang cấp 1 (-Y)

--liên kết thử nghiệm
kiểm tra liên kết trong các trang (-r1p0C0I0t)

--nhện
(các) trang web spider, để kiểm tra các liên kết: báo cáo Lỗi & Cảnh báo (-p0C0I0t)

--trang web thử nghiệm
giống hệt với --spider

- bộ xương
tạo một bản sao, nhưng chỉ nhận được các tệp html (-p1)

- cập nhật
cập nhật máy nhân bản mà không cần xác nhận (-iC2)

--tiếp tục
tiếp tục nhân bản mà không cần xác nhận (-iC1)

--catchurl
tạo một proxy tạm thời để nắm bắt một URL hoặc một URL của bài đăng trên biểu mẫu

--dọn dẹp
xóa bộ nhớ cache và tệp nhật ký

--http10
buộc yêu cầu http / 1.0 (-% h)

Chi tiết: Tùy chọn % W: Bên ngoài gọi lại nguyên mẫu
xem htsdefines.h

Sử dụng httrack trực tuyến bằng các dịch vụ onworks.net