26. [Docker] 도커 컨테이너 기반의 하둡 클러스터 실행 - hadoop on docker
이 포스트는 http://tashan10.com/yong-dockerda-jian-hadoopwei-fen-bu-shi-ji-qun/ 에 기반해 작성되었습...
blog.naver.com
https://lsjsj92.tistory.com/438
도커(docker)에 하둡과 아파치 하이브(apache hive) 설치 및 배포 - 4
벌써 꽤 되었지만 지난 포스팅에서 도커(docker)에다가 centos7을 구축하고 그 위에 하둡, 스파크, 제플린을 설치해서 배포까지 했습니다. 과정은 아래 링크를 따라가시면 됩니당 https://lsjsj92.tistory.com/418..
lsjsj92.tistory.com
https://jeongchul.tistory.com/574
Docker Hadoop 클러스터 Hive 설치
Docker Hadoop 클러스터 Hive 설치 Docker 설치가 완료된 가정 하에서 진행됩니다. Multi Server -> Docker Swarm 생성 Docker swarm을 생성하기 위해서는 서버 중 마스터(master) 노드로 지정해야 합니다. https:..
jeongchul.tistory.com
https://luran.me/development/installing-spark-cluster/
Docker 기반 Local Spark Cluster 설치하기
Baremetal 서버나 cloud, VM 등에 설치하기에 앞서, docker기반으로 spark cluster 환경을 빨리 쉽게 구축하고 사용할 수 있다. 어떻게 동작하는지 살펴보거나, 간단한 프로젝트를 하고자 한다면 나쁘지 않은 선택이 될 것이다.Spark Cluster Project 받기인터넷에서 다음의 프로젝트를 받아서 설치한다.git clone https://github.com/big-data-europe/docker-hadoop-spark-wor
luran.me
'BigData' 카테고리의 다른 글
Automatic Speech Recognition (0) | 2019.12.26 |
---|---|
IN() v.s. EXISTS v.s. INNER JOIN 성능 비교 (0) | 2019.12.23 |
Crawler & Analysis Example (0) | 2019.12.13 |
데이터 분석 사이트 (0) | 2019.12.13 |
Spark(Hadoop, Hive) & Airflow (0) | 2019.12.12 |