概述

依赖

依赖

数据库

  1. MySQL 8+
  2. Redis 5+

JDK 1.8

大数据平台组件

  1. ZooKeeper 集群
  2. Hadoop 集群
  3. Hive 集群
  4. HBase 集群
  5. Spark 集群

Apache Atlas 2.2

  1. ZooKeeper 集群
  2. Kafka 集群
  3. HBase 集群
  4. Solr 集群

Apache DolphinScheduler 3.0

  1. ZooKeeper 集群
  2. DataX

Kerberos

大数据平台组件的集中身份认证。

Ranger

大数据平台组件的集中权限认证。

服务器配置

CPU内存硬盘类型网络
8核+16 GB+SAS千兆网卡

Linux 操作系统版本

操作系统版本
Red Hat Enterprise Linux7.0 及以上
CentOS7.0 及以上
Oracle Enterprise Linux7.0 及以上
Ubuntu LTS16.04 及以上