湖仓一体电商项目(二):项目使用技术及版本和基础环境准备


本文由 简悦 SimpRead 转码, 原文地址 lansonli.blog.csdn.net

文章目录

项目使用技术及版本和基础环境准备

一、项目使用技术及版本

二、项目基础环境准备


一、项目使用技术及版本

下表列出项目中使用的大数据技术组件及各个组件的版本,如下:

使用技术

版本

zookeeper

3.4.13

HDFS

3.1.4/3.2.2

Hive

3.1.2(MySQL 5.7.32)

iceberg

0.11.1

Hbase

2.2.6

phoenix

5.0.0

kafka

0.11.0.3

redis

2.8.18

flink

1.11.6

flume

1.9.0

maxwell

1.28.2

clickhouse

21.9.4.35

二、项目基础环境准备

这里我们使用 5 台节点来安装各个大数据组件,每台节点给了 3G 内存,4 个 core,并且每台节点已经关闭防火墙、配置主机名、设置 yum 源、各个节点时间同步、各个节点两两免密、安装 JDK 操作。5 台节点信息如下:

节点 IP

节点名称

192.168.179.4

node1

192.168.179.5

node2

192.168.179.6

node3

192.168.179.7

node4

192.168.179.8

node5

下篇一一进行基础技术组件搭建。


  • 📢博客主页:https://lansonli.blog.csdn.net
  • 📢欢迎点赞 👍 收藏 ⭐留言 📝 如有错误敬请指正!
  • 📢本文由 Lansonli 原创,首发于 CSDN 博客🙉
  • 📢停下休息的时候不要忘了别人还在奔跑,希望大家抓紧时间学习,全力奔赴更美好的生活✨

yg9538 2022年7月28日 22:45 976 收藏文档