1. hadoop과 아마존 s3간 데이터 복사
hadoop distcp -m 100 s3n://test/* /hdfs/test (m : mapper 개수)
2. hadoop과 remote hadoop간 복사
hadoop distcp hdfs://10.10.10.1:8020/tmp hdfs://10.10.10.5:8020/tmp
'NoSQL > Hadoop' 카테고리의 다른 글
| yarn 구조 (0) | 2017.03.08 |
|---|---|
| hadoop read & write (0) | 2017.03.06 |
| hadoop streaming (0) | 2017.03.06 |
| hadoop locality (0) | 2017.03.06 |
| Hadoop streaming (0) | 2016.07.01 |