fs

Definition

HDFS์ƒ์˜ ์ž‘์—…์„ ์ˆ˜ํ–‰ํ•œ๋‹ค. delete, mkdir, move, touchz, chmod,chgrp ๋“ฑ hadoop fs syntax๋กœ ์ˆ˜ํ–‰ํ•  ์ˆ˜ ์žˆ๋Š” ์ž‘์—…์ด ๊ฐ€๋Šฅํ•˜๋‹ค. ์ขŒ์ธก [Flow๊ตฌ์„ฑ]๋…ธ๋“œ ์ค‘ [fs]๋…ธ๋“œ๋ฅผ drag & drop ํ•œ ํ›„ Property ํ•ญ๋ชฉ์„ ์ž…๋ ฅํ•œ๋‹ค. Property ํŒจ๋„์˜ [๋”๋ณด๊ธฐ+] ๋ฒ„ํŠผ์„ ๋ˆ„๋ฅด๋ฉด ์ž…๋ ฅ๊ฐ€๋Šฅํ•œ ์ „์ฒด Property ํ•ญ๋ชฉ์„ ๋ณผ ์ˆ˜ ์žˆ๋‹ค.

Set

[setting], [scheduler], [parameter] ์„ค์ •์€ [์›Œํฌํ”Œ๋กœ์šฐ ์ƒ์„ฑ] > [์„ค์ •]์„ ์ฐธ๊ณ ํ•œ๋‹ค.

property

[Node Description] ์ž‘์„ฑ ์ค‘์ธ ๋…ธ๋“œ๋ช… ์ž…๋ ฅ

flow005

  1. retry : ์žฌ์ˆ˜ํ–‰ ํšŸ์ˆ˜ ๋ฐ ๊ฐ„๊ฒฉ์„ ์‹คํ–‰ํ•œ๋‹ค.
    • max : ์žฌ์ˆ˜ํ–‰ ํšŸ ์ˆ˜
    • period : ์žฌ์ˆ˜ํ–‰ ๊ฐ„๊ฒฉ
  2. delete : ์‚ญ์ œํ•  hdfs path ์„ค์ •
    • skipTrash: ์™„์ „ ์‚ญ์ œ(hadoop์— ์„ค์ •๋œ ํœด์ง€ํ†ต์„ ๊ฑฐ์น˜์ง€ ์•Š์Œ)
  3. mkdir : ์ƒ์„ฑํ•  hdfs directory path ์„ค์ •
  4. move : source path, target path ์„ค์ •์œผ๋กœ ํŒŒ์ผ ์ด๋™
  5. touchz : ํŒŒ์ผํฌ๊ธฐ๊ฐ€ 0์ธ ํŒŒ์ผ์„ ์ƒ์„ฑํ•œ๋‹ค.
  6. chmod : path: ๊ถŒํ•œ ์„ค์ • ๊ฒฝ๋กœ : permissions: ๊ถŒํ•œ์œ ํ˜• : recursive: ์žฌ๊ท€์—ฌ๋ถ€
  7. chgrp : path: ๊ทธ๋ฃน ์„ค์ • ๊ฒฝ๋กœ : recursive: ์žฌ๊ท€์—ฌ๋ถ€ : group: ๊ทธ๋ฃน๋ช…
  8. forceOK : ์‹คํŒจ ์‹œ ๊ฐ•์ œ OK ์ฒ˜๋ฆฌ ์—ฌ๋ถ€

Example

  1. "2.delete" property ์„ค์ • ํ›„ ์›Œํฌํ”Œ๋กœ์šฐ ์‹คํ–‰์‹œ ์„ ํƒํ•œ ํด๋”๊ฐ€ ์‚ญ์ œ๋œ๋‹ค.

flow046

flow047

  1. "3.mkdir" property ์„ค์ • ํ›„ ์›Œํฌํ”Œ๋กœ์šฐ ์‹คํ–‰์‹œ ์„ ํƒํ•œ ํด๋”๊ฐ€ ์‚ญ์ œ๋œ๋‹ค.

flow048

flow049