gfprep - ออนไลน์ในคลาวด์

โครงการ:

ชื่อ

gfprep - ทำซ้ำไฟล์ Gfarm แบบขนาน

เรื่องย่อ

จีเอฟเพรพ [-nqvdpPU] [-mx] [-X regexp] [-NS ชื่อโดเมนต้นทาง] [-ชม แหล่งที่มา-hostfile]
[-NS ชื่อโดเมนปลายทาง] [-ชม ปลายทาง-hostfile] [-NS จำนวนกระบวนการ]
[-NS จำนวนกระบวนการ] [-NS ไบต์ทั้งหมด] [-ซ ไบต์ต่ำสุด] [-ซ ไบต์สูงสุด]
[-ว กำหนดการ] [-ว กิโลไบต์สำหรับเกณฑ์] [-NS KB/s-เพื่อจำลอง]
[-NS num-for-readhead] [-NS จำนวนแบบจำลอง] เส้นทาง

DESCRIPTION

จีเอฟเพรพ สร้างแบบจำลองของไฟล์ Gfarm แบบขนาน

ถ้า เส้นทาง พารามิเตอร์เป็นไดเร็กทอรี ไฟล์ภายใต้ไดเร็กทอรีจะถูกจำลองแบบ
เรียกซ้ำ

เส้นทาง เป็น URL ของ Gfarm หรือเส้นทางบนจุดเชื่อมต่อของ gfarm2fs

สามารถระบุชุดโฮสต์ต้นทาง/ปลายทางได้ด้วยชื่อโดเมนและ/หรือรายการโฮสต์
ไฟล์. เมื่อระบุทั้งชื่อโดเมนและไฟล์รายการโฮสต์ ชุดของโฮสต์คือ
กำหนดโดยทั้งสองเงื่อนไข เมื่อระบุชุดของโฮสต์ต้นทาง เฉพาะไฟล์ที่จัดเก็บ
บนโฮสต์ต้นทางจะถูกจำลองแบบ

โหนดระบบไฟล์ที่ไม่ทำงานจะถูกเลือกสำหรับต้นทางหรือปลายทาง จำนวนสูงสุดของ
ขนานกับการส่งหรือรับต่อโฮสต์คือจำนวนซีพียู โปรดดูหน้าคู่มือของ
gfhost สำหรับข้อมูลเกี่ยวกับจำนวนซีพียู

จีเอฟเพรพ ยังสามารถอ่านไดเร็กทอรีและรับข้อมูลของรายการแบบขนาน

จีเอฟเพรพ OPTIONS

นี่เป็นตัวเลือกสำหรับ .เท่านั้น จีเอฟเพรพ.

-N จำนวนแบบจำลอง
ระบุจำนวนไฟล์เรพพลิกาที่ต้องการ หากมีจำนวนเพียงพอของ
แบบจำลองในโฮสต์ปลายทาง จะไม่มีการคัดลอกหรือลบใดๆ

หากไม่ได้ระบุอ็อพชันนี้ จะถือว่า -N 1

-x
ลบการจำลองไฟล์เพิ่มเติมเมื่อชุดของโหนดปลายทางมีการจำลองไฟล์มากกว่า
กว่าที่ระบุโดยตัวเลือก -N

-m
ย้ายไฟล์เรพลิกาภายในชุดของโหนดต้นทางไปยังโหนดปลายทาง

ตัวเลือกนี้ต้องใช้ตัวเลือก -S หรือ -h หรือ -D หรือ -H

อ็อพชันนี้และอ็อพชัน -N จะไม่เกิดร่วมกัน

ทั่วไป OPTIONS

จีเอฟเพรพ มีตัวเลือกเดียวกันกับ gfpcopy.

-X regexp
ข้ามไฟล์ต้นฉบับที่จับคู่ตามรูปแบบของ regexp. หากระบุหลายแบบ
สามารถระบุตัวเลือก -X ได้หลายตัว

-S ชื่อโดเมนต้นทาง
ระบุชื่อโดเมนเพื่อเลือกไฟล์ เฉพาะไฟล์ที่มีไฟล์จริงบน
โดเมนจะถูกส่ง

-h แหล่งที่มา-hostfile
ระบุไฟล์ที่อธิบายชื่อโฮสต์ของโหนดระบบไฟล์ที่จะทำซ้ำหรือ
คัดลอกไฟล์. เฉพาะไฟล์ที่มีไฟล์จริงในชื่อโฮสต์เท่านั้นที่จะถูกเลือก
เทศกาล แหล่งที่มา-hostfile ประกอบด้วยชื่อโหนดระบบไฟล์ในแต่ละบรรทัด

หากระบุ ``-'' ระบบจะใช้อินพุตมาตรฐานเพื่ออ่านรายการโฮสต์

-L
โหนดระบบไฟล์ที่เลือกโดย -S หรือ -h ใช้เพื่อส่งแหล่งที่มาเท่านั้น

-D ชื่อโดเมนปลายทาง
ระบุชื่อโดเมนสำหรับปลายทาง

ถ้าทั้งนี้และ -H มีการระบุตัวเลือก แบบจำลองอาจถูกคัดลอกไปที่ใด ๆ
โฮสต์ที่มีอยู่

-H ปลายทาง-hostfile
ระบุไฟล์ที่อธิบายชื่อโฮสต์สำหรับปลายทาง NS ปลายทาง-hostfile
ประกอบด้วยชื่อโหนดระบบไฟล์ในแต่ละบรรทัด

หากระบุ ``-'' ระบบจะใช้อินพุตมาตรฐานเพื่ออ่านรายการโฮสต์

-j จำนวนกระบวนการ
ระบุจำนวนกระบวนการสูงสุดในการสร้างแบบจำลองไฟล์ (หรือคัดลอกไฟล์)
พร้อมกัน

ค่าเริ่มต้นคือพารามิเตอร์ของ client_parallel_copy ใน gfarm2.conf (ดูผู้ชาย
gfarm2.conf)

จำนวนกระบวนการสูงสุดต่อโหนดระบบไฟล์สำหรับต้นทางหรือปลายทางคือ
จำนวนซีพียู (ดู man gfhost).

-J จำนวนกระบวนการ
ระบุจำนวนของกระบวนการในการอ่านไดเร็กทอรีแบบขนาน

ค่าเริ่มต้นคือ 8

-M ไบต์ทั้งหมด
ระบุไบต์เพื่อจำกัดขนาดที่คัดลอกทั้งหมด

ค่าเริ่มต้นไม่จำกัด

-z ไบต์ต่ำสุด
ระบุไบต์เพื่อจำกัดขนาดต่ำสุดของไฟล์

ค่าเริ่มต้นไม่จำกัด

-Z ไบต์สูงสุด
ระบุไบต์เพื่อจำกัดขนาดสูงสุดของไฟล์

ค่าเริ่มต้นไม่จำกัด

-w กำหนดการ
ระบุชื่อของวิธีการจัดกำหนดการ ``noplan'' ทำซ้ำ/คัดลอกในขณะที่ไฟล์อยู่
พบ. ``โลภ'' กำหนดเวลาอย่างตะกละตะกลามลำดับของการทำซ้ำ/คัดลอกล่วงหน้า

พฤติกรรมเริ่มต้นคือ ``noplan''

``โลภ'' การตั้งเวลาไม่สามารถใช้ตัวเลือก -N หรือ -m ตัวเลือก

-W กิบิไบต์
ระบุขนาด/ค่าใช้จ่ายตามเกณฑ์ (KiB) ถึงต้นทุนคงที่ของการเชื่อมต่อ การเชื่อมต่อหมายถึง
ข้อมูลการจัดกำหนดการ (ไฟล์ assgined) ต่อกระบวนการย่อย

ตัวเลือกนี้มีผลกับ -w โลภ

ค่าเริ่มต้นคือ 50*1024 KiB (50MiB)

-U
ปิดใช้งานการตรวจสอบพื้นที่ว่างในดิสก์ของโหนดที่เลือกทุกครั้ง

-F จำนวนของ dirents
ระบุจำนวนรายการเพื่อดำเนินการไดเร็กทอรี readahead

ค่าเริ่มต้นคือ 10000

-s กิโลไบต์ต่อวินาที
ระบุปริมาณงาน (KB/s) เพื่อจำลองการจำลอง/คัดลอก และไม่ทำอะไรเลย (ได้รับ
ข้อมูลไฟล์เท่านั้น)

-n
ไม่ทำอะไรเลย

-p
รายงานผลงานรวมและผลงานต่างๆ

-P
รายงานประสิทธิภาพแต่ละรายการและผลรวมและผลลัพธ์ต่างๆ

-q
ระงับข้อความที่ไม่แสดงข้อผิดพลาด

-v
แสดงเอาต์พุตแบบละเอียด

-d
แสดงเอาต์พุตการดีบัก

-?
แสดงรายการตัวเลือกคำสั่ง

ตัวอย่าง

เพื่อทำซ้ำไฟล์ภายใต้ไดเร็กทอรีแบบเรียกซ้ำ

$ gfprep -N 3 gfarm:///dir

$ ซีดี /mnt/gfarm2fs
$ gfprep -N 3 ผบ

เพื่อจำลองไฟล์หรือลดการจำลองส่วนเกินของไฟล์

$ gfprep -N 3 -x gfarm:///dir/file

ในการย้ายเรพลิกาจาก gfsd1.example.com ไปยังโหนดอื่น

$ gfprep -m -S gfsd1.example.com gfarm:///

หมายเหตุ

เมื่อไม่ได้ระบุอ็อพชัน -L หรือ -m โหนดต้นทางจะไม่ถูกเลือกภายใน a . เสมอ
ชุดของโหนดระบบไฟล์ต้นทางที่ระบุ

จีเอฟเพรพ ควรดำเนินการคำสั่งในโฮสต์เดียวกันของ gfmd ถ้า gfmd และ จีเอฟเพรพ อยู่ไกล
ต่างหาก จีเอฟเพรพ การดำเนินการช้า การระบุค่ามากด้วยตัวเลือก -j หรือ -J อาจเป็น
มีผลในกรณีดังกล่าว

ใช้ gfprep ออนไลน์โดยใช้บริการ onworks.net