欧美一区二区三区,国内熟女精品熟女A片视频小说,日本av网,小鲜肉男男GAY做受XXX网站

cdh搭建docker(cdh大數(shù)據(jù)平臺(tái)搭建)

CDH是Hadoop生態(tài)系統(tǒng)中的重要組成部分,支持分布式存儲(chǔ)和處理巨大的數(shù)據(jù)集。Docker是一種流行的容器化技術(shù),可以以更加靈活的方式構(gòu)建、部署和管理應(yīng)用程序。

下面是一些步驟,可以幫助您在CDH集群中使用Docker容器:

1. 安裝Docker和Docker Compose
$ sudo apt-get update
$ sudo apt-get install docker-ce docker-ce-cli containerd.io
$ sudo curl -L "https://github.com/docker/compose/releases/download/<version>/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose
$ sudo chmod +x /usr/local/bin/docker-compose
2. 創(chuàng)建Dockerfile文件
$ mkdir cdh-docker
$ cd cdh-docker
$ vi Dockerfile
FROM cloudera/quickstart:latest
RUN echo "deb http://security.ubuntu.com/ubuntu precise-security main universe" >>/etc/apt/sources.list
RUN apt-get update && apt-get install -y postgresql
RUN echo "host all all 0.0.0.0/0 md5" >>/etc/postgresql/9.3/main/pg_hba.conf
RUN echo "listen_addresses='*'" >>/etc/postgresql/9.3/main/postgresql.conf
CMD service postgresql start && tail -f /dev/null
3. 創(chuàng)建Docker Compose文件
$ vi docker-compose.yml
version: '2.1'
services:
cdh:
build: .
image: cdh-docker:latest
ports:
- "8888:8888"
- "7180:7180"
- "5432:5432"
4. 構(gòu)建和啟動(dòng)CDH容器
$ docker-compose build
$ docker-compose up -d
5. 訪問(wèn)CDH管理頁(yè)面
在瀏覽器中輸入http://localhost:7180訪問(wèn)CDH管理頁(yè)面,使用用戶名和密碼cloudera登錄。
6. 提交作業(yè)
您現(xiàn)在可以在CDH集群中提交MapReduce或Spark作業(yè),并且可以配置任務(wù)管理器和資源分配。