2.Summary - 2.빅데이터 처리시스템 구성하기
CODEDRAGON ㆍDevelopment/AI
반응형
하둡 에코시스템(Ecosystem)
· 하둡은 특정 모듈 보다는 데이터처리 플랫폼 전체를 뜻합니다.
· 에코 시스템은 하둡 핵심 기능을 보완하는 서브 오픈 소스 소프트웨어들이다. 하둡이란 플랫폼상에 다양한 에코시스템(Eco-system)인 피그(Pig), 주키퍼(Zookeeper), 하이브(Hive), 플럼(Flume), 스쿱(Sqoop), 스파크(Spark) 등 수 많은 오픈소스 기술이 하둡 플랫폼과 함께 사용되며 주로 동물들의 이름을 딴 경우가 많습니다.
https://codedragon.tistory.com/9570
HDFS 명령어 예시
HDFS 파일 시스템에 대한 정보를 확인하는 명령어
hdfs dfsadmin -report |
https://codedragon.tistory.com/7655
'Development > AI' 카테고리의 다른 글
자연어처리 블로그(ratsgo.github.io) (0) | 2019.12.15 |
---|---|
R 데이터 구조 (0) | 2019.12.14 |
2.Summary - 2.빅데이터 저장관리시스템 구성하기 (0) | 2019.12.13 |
4.Summary - 4.실시간 수행모듈 개발하기 (0) | 2019.12.13 |
결측값 대체 방법 (0) | 2019.12.12 |