만약 mydata.csv 를 64mb block size로 설정해서 HDFS 에 넣고싶다면 아래 명령어를 사용한다.
hdfs dfs -D dfs.block.size=67108864 -put mydata.csv /data/
(67108864 = 64*1024*1024)
32mb block size 로 설정해서 넣고싶다면 아래 명령어를 사용한다.
hdfs dfs -D dfs.block.size=33554432 -put mydata.csv /data/
(33554432 = 32*1024*1024)
'Hadoop' 카테고리의 다른 글
[ZooKeeper] 간단한 설명 및 참고 링크 (0) | 2020.07.14 |
---|---|
[Hadoop3] CentOS 위에서 HA Hadoop Cluster 설치 방법 (0) | 2020.07.14 |
[HDFS] S3와 HDFS 차이점 (0) | 2020.02.04 |
[Hadoop] EMR 에서 yarn-site.xml 위치 (0) | 2020.01.20 |
[YARN] memory 기본 지식 및 세팅 방법 (0) | 2020.01.16 |