All posts in 2103笔记

Zookeeper 是什么 zookeeper是一个hadoop生态的集群协调管理服务 主要使用场景 . . . Read more

Hive Hive概述 Hive是一个Hadoop生态的数据仓库工具 数据仓库和数据库的对比 对比 . . . Read more

Spark 集群搭建 关于版本： 最新版本 3.1.2 企业开发常用版本 2.1.x ~ 2.4.x . . . Read more

1. 计数器 1.1 产生的原因 由于MapReduce程序在运行时会产生多个Mapper和Redu . . . Read more

MapReduce运行原理 1. 确认输入文件 输入路径可以同时填写多个 如果设置的输入路径是文件夹 . . . Read more

MapReduce 1 是什么 MapReduce是Hadoop中的分布式计算框架，MR将计算任务抽 . . . Read more

Flume 是什么 Flume是hadoop生态的日志收集、聚合和移动的自动化海量日志采集工具。 核 . . . Read more

HDFS 命令操作 语法： hdfs dfs 命令 hadoop fs 命令 具体命令 # -hel . . . Read more

Hadoop入门 1. 准备服务器 1.1 设置静态IP 服务器通常使用远程连接的方式，如果IP不固 . . . Read more

Shell编程 1 是什么 shell编程就是使用shell命令编写脚本文件 脚本script：是一 . . . Read more