#大数据

11 篇文章

2023年3月6日

Hadoop备忘录

Hadoop 3.x 常用命令速查，涵盖 HDFS 文件操作、集群启停、WordCount 程序运行及常用端口号汇总

2023年11月6日

Spark 3.1.1 Standalone 模式集群部署完整流程，涵盖环境配置、高可用设置、历史服务器搭建及任务提交

2023年11月7日

Spark 3.1.1 在 YARN 模式下的单点部署流程，包括环境配置、内存检查关闭、历史服务器搭建及任务提交

2023年11月8日

Hive 3.1.2 单点部署完整流程，涵盖解压安装、MySQL 元数据库配置、解决 jar 冲突、HiveServer2 与 Beeline 远程连接及 IDEA 远程访问

2023年11月9日

HBase 2.2.3 集群部署完整流程，包含解压安装、环境配置、高可用设置、集群启停与 Web UI 访问

2023年11月10日

ClickHouse 21.9 单点部署指南，涵盖安装、启动、远程连接与卸载等操作步骤

2023年11月11日

Azkaban 3.84.4 集群部署完整流程，涵盖 Executor Server 与 Web Server 的安装配置、数据库初始化及集群启停操作

2023年11月12日

Hive CLI 常用命令速查，涵盖数据库与数据表的增删改操作，以及 Hive 运行参数配置命令汇总

2023年11月12日

大数据离线组件集群启停命令与 Web UI 地址速查表，涵盖 Hadoop、Zookeeper、Spark、Hive、HBase、ClickHouse、Azkaban

2023年11月13日

HBase Shell 常用命令速查，涵盖命名空间、表结构、列族与数据增删改查等核心操作

2023年11月15日

Spark DataFrame 常用 API 速查，涵盖读写操作、Join 连接、日期处理、排序筛选等核心方法