BigData

HDFS

Kyle79 2019. 12. 16. 16:25

 

 

https://m.blog.naver.com/PostView.nhn?blogId=alice_k106&logNo=220408254436&proxyReferer=https%3A%2F%2Fwww.google.com%2F

 

26. [Docker] 도커 컨테이너 기반의 하둡 클러스터 실행 - hadoop on docker

이 포스트는 http://tashan10.com/yong-dockerda-jian-hadoopwei-fen-bu-shi-ji-qun/ 에 기반해 작성되었습...

blog.naver.com

 

 

 

 

https://lsjsj92.tistory.com/438

 

도커(docker)에 하둡과 아파치 하이브(apache hive) 설치 및 배포 - 4

벌써 꽤 되었지만 지난 포스팅에서 도커(docker)에다가 centos7을 구축하고 그 위에 하둡, 스파크, 제플린을 설치해서 배포까지 했습니다. 과정은 아래 링크를 따라가시면 됩니당 https://lsjsj92.tistory.com/418..

lsjsj92.tistory.com

 

 

 

 

 

https://jeongchul.tistory.com/574

 

Docker Hadoop 클러스터 Hive 설치

Docker Hadoop 클러스터 Hive 설치 Docker 설치가 완료된 가정 하에서 진행됩니다. Multi Server -> Docker Swarm 생성 Docker swarm을 생성하기 위해서는 서버 중 마스터(master) 노드로 지정해야 합니다. https:..

jeongchul.tistory.com

 

 

 

 

https://luran.me/development/installing-spark-cluster/

 

Docker 기반 Local Spark Cluster 설치하기

Baremetal 서버나 cloud, VM 등에 설치하기에 앞서, docker기반으로 spark cluster 환경을 빨리 쉽게 구축하고 사용할 수 있다. 어떻게 동작하는지 살펴보거나, 간단한 프로젝트를 하고자 한다면 나쁘지 않은 선택이 될 것이다.Spark Cluster Project 받기인터넷에서 다음의 프로젝트를 받아서 설치한다.git clone https://github.com/big-data-europe/docker-hadoop-spark-wor

luran.me

 

 

'BigData' 카테고리의 다른 글

Automatic Speech Recognition  (0) 2019.12.26
IN() v.s. EXISTS v.s. INNER JOIN 성능 비교  (0) 2019.12.23
Crawler & Analysis Example  (0) 2019.12.13
데이터 분석 사이트  (0) 2019.12.13
Spark(Hadoop, Hive) & Airflow  (0) 2019.12.12