10 年前

Hadoop + hive 整合文档

hadoop   Hive   大数据  

环境 CentOS 6.6 x64 hadoop 2.7.2 分布式部署文档 apache-hive-1.2.1-bin.tar.gz 部署 环境变量 su - hadoop echo "export HADOOP_HOME=/home/hadoop/src/hadoop-2.7.2 export HIVE_HOME=/home/hadoop/src/apache-hive-1.2.1-b…

10 年前

hadoop 常用命令收集

hadoop 常用命令   大数据  

1、查看指定目录下内容 hadoop dfs –ls [文件目录] eg: hadoop dfs –ls /test/ 2、打开某个已存在文件 hadoop dfs –cat [file_path] eg:hadoop dfs -cat /test/data.txt 3、将本地文件存储至hadoop hadoop fs –put [本地地址] [hadoop目录] hadoop f…

10 年前

Hadoop2.7.2 完全分布式集群部署

hadoop   完全分布式  

一、系统环境和软件环境 已整合hive+hbase+zookeeper用于线上环境,支撑大数据平台 CentOS 6.6 X64 hadoop-2.7.2.tar.gz jdk-7u79-linux-x64.rpm 主机3台 master.hdp.imdst.com NameNode SecondaryNameNode 1.slave.hdp.imdst.com Data…