HDFS
HDFS is a distributed file system for big data, designed for fault tolerance and high throughput on commodity hardware.
рдЕрд╡рд▓реЛрдХрди
HDFS рдХреНрдпрд╛ рд╣реИ?
Hadoop рдбрд┐рд╕реНрдЯреНрд░рд┐рдмреНрдпреВрдЯреЗрдб рдлрд╝рд╛рдЗрд▓ рд╕рд┐рд╕реНрдЯрдо (HDFS) рдПрдХ рд╡рд┐рддрд░рд┐рдд рдлрд╝рд╛рдЗрд▓ рд╕рд┐рд╕реНрдЯрдо рд╣реИ рдЬреЛ рдХрдореЛрдбрд┐рдЯреА рд╣рд╛рд░реНрдбрд╡реЗрдпрд░ рдХреЗ рд╕рдореВрд╣реЛрдВ рдореЗрдВ рдмрдбрд╝реЗ рдбреЗрдЯрд╛рд╕реЗрдЯ рд╕рдВрдЧреНрд░рд╣реАрдд рдХрд░рддрд╛ рд╣реИред рдпрд╣ рдЙрдЪреНрдЪ рджреЛрд╖ рд╕рд╣рдирд╢реАрд▓рддрд╛ рдФрд░ рдереНрд░реВрдкреБрдЯ рдкреНрд░рджрд╛рди рдХрд░рддрд╛ рд╣реИ, рдЬреЛ рдмреИрдЪ рдкреНрд░реЛрд╕реЗрд╕рд┐рдВрдЧ рдФрд░ рд╕реНрдЯреНрд░реАрдорд┐рдВрдЧ рдбреЗрдЯрд╛ рдПрдХреНрд╕реЗрд╕ рдХреЗ рд▓рд┐рдП рдЕрдиреБрдХреВрд▓рд┐рдд рд╣реИред
HDFS рдХрд┐рд╕ рд▓рд┐рдП рдЙрдкрдпреЛрдЧ рдХрд┐рдпрд╛ рдЬрд╛рддрд╛ рд╣реИ?

рд╢реАрд░реНрд╖ рд╕реБрд╡рд┐рдзрд╛рдПрдВ
- рд╡рд┐рддрд░рд┐рдд рднрдВрдбрд╛рд░рдг
- рджреЛрд╖ рд╕рд╣рд┐рд╖реНрдгреБрддрд╛
- рдЙрдЪреНрдЪ рдереНрд░реВрдкреБрдЯ
- рдЕрдиреБрдорд╛рдкрдХрддрд╛
- рдбреЗрдЯрд╛ рдкреНрд░рддрд┐рдХреГрддрд┐
- рд╕реНрдЯреНрд░реАрдорд┐рдВрдЧ рдбреЗрдЯрд╛ рдПрдХреНрд╕реЗрд╕
HDFS рдХрд╛ рдЙрдкрдпреЛрдЧ рдХреИрд╕реЗ рдХрд░реЗрдВ?
NameNode рдФрд░ DataNodes рдХреЗ рд╕рд╛рде рдХреНрд▓рд╕реНрдЯрд░ рдкрд░ HDFS рддреИрдирд╛рдд рдХрд░реЗрдВ, рдлрд╝рд╛рдЗрд▓реЛрдВ рдХреЛ рдкреНрд░рдмрдВрдзрд┐рдд рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП CLI рдпрд╛ API рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░реЗрдВ, рдФрд░ рдбреЗрдЯрд╛ рдкреНрд░реЛрд╕реЗрд╕рд┐рдВрдЧ рдХреЗ рд▓рд┐рдП MapReduce рдЬреИрд╕реЗ рдПрдкреНрд▓рд┐рдХреЗрд╢рди рдЪрд▓рд╛рдПрдВред
рд╡реИрдХрд▓реНрдкрд┐рдХ рдЯреВрд▓
рдлрд╛рдпрджреЗ & рдиреБрдХрд╕рд╛рди
рдлрд╛рдпрджреЗ
- рдмрдбрд╝реЗ рдбреЗрдЯрд╛рд╕реЗрдЯ рдХреЛ рд╕рдВрднрд╛рд▓рддрд╛ рд╣реИ
- рдХрдореЛрдбрд┐рдЯреА рд╣рд╛рд░реНрдбрд╡реЗрдпрд░ рдкрд░ рд▓рд╛рдЧрдд рдкреНрд░рднрд╛рд╡реА
- рдЙрдЪреНрдЪ рдЙрдкрд▓рдмреНрдзрддрд╛
- рд╕рднреА рдкреНрд▓реЗрдЯрдлрд╛рд░реНрдореЛрдВ рдкрд░ рдкреЛрд░реНрдЯреЗрдмрд▓
рдиреБрдХрд╕рд╛рди
- рдХрдо рд╡рд┐рд▓рдВрдмрддрд╛ рд╡рд╛рд▓реЗ рдЗрдВрдЯрд░реИрдХреНрдЯрд┐рд╡ рдЙрдкрдпреЛрдЧ рдХреЗ рд▓рд┐рдП рдирд╣реАрдВ
- рдЬрдЯрд┐рд▓ рд╕реЗрдЯрдЕрдк
- рдПрдХрд▓ NameNode рдПрдХ рдЕрдбрд╝рдЪрди рд╣реЛ рд╕рдХрддрд╛ рд╣реИ
рдЙрдкрдпреЛрдЧ рдХреЗ рдорд╛рдорд▓реЗ
- рдмрдбрд╝рд╛ рдбреЗрдЯрд╛ рдкреНрд░реЛрд╕реЗрд╕рд┐рдВрдЧ
- рд╡реЗрдм рд░реЗрдВрдЧрдирд╛
- рдбреЗрдЯрд╛ рднрдгреНрдбрд╛рд░рдг
- рдмреИрдЪ рд╡рд┐рд╢реНрд▓реЗрд╖рдг
рдЙрдкрдпреЛрдЧрдХрд░реНрддрд╛ рд╕рдореАрдХреНрд╖рд╛рдПрдВ
рдЕрднреА рддрдХ рдХреЛрдИ рд╕рдореАрдХреНрд╖рд╛ рдирд╣реАрдВ
рдЗрд╕ рдЯреВрд▓ рдХреА рдкрд╣рд▓реА рд╕рдореАрдХреНрд╖рд╛ рдХрд░рдиреЗ рд╡рд╛рд▓реЗ рдмрдиреЗрдВ!