Hadoop--快速搭建大数据开发环境_光环大数据培训
10页1、 光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/ 光环大数据光环大数据 http:/Hadoop-Hadoop-快速搭建大数据开发环境快速搭建大数据开发环境_ _光环大数据培训光环大数据培训最近自己电脑的磁盘坏了,导致数据也没了。安装好系统之后就是各种弄环境了,之前的博客也写过 hadoop 环境搭建Hadoop , Hive , HBase , Kafka , Spark , MySQL , Redis 等等一系列的。之前记录的目的也是为了方便自己吧,但整个流程下来还是的花费几个小时。从前面的博客找到从虚拟机的网络配置,下载软件上传在修改配置挺麻烦的。这里再次做个汇总,以后做这个过程或者升级就更加方便( 主要便捷是后面会给出一个 Virtual Box 的包直接导入就有这些所有环境了 )。准备准备软件下载安装安装 linux1. 安装 virtual box(略,这个没什么好说的,一直下一步就 ok!) 2. 安装 Linux 虚拟机注意(选择第一个) 3. 添加虚拟机后网络配置环境准备环境准备规划1. 创建一个 data 目录所有东西都放在那儿: mkdir
2、 /data2. 再在 data 目录下创建一个 data 目录用来保存一些数据,比如 hdfs,kafka 等:mkdir /data/data上传软件光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/ 光环大数据光环大数据 http:/准备1. 关闭防火墙:email protected # service iptables stop email protected # chkconfig -list | grep iptables2. 修改主机名:修改email protected # vi /etc/sysconfig/network# 修改为:HOSTNAME=xiaoxiaomo3. 绑定 hosts Name:email protected # vi /etc/hosts# 添加 192.168.56.102 xiaoxiaomo4. 设置 ssh:email protected # ssh-keygen -t rsa #生成 rsa 格式的 ssh 私钥和公钥email protected # ssh-copy-id -i xiaoxiaomo #把
3、公钥复制到对方节点(这里我复制到自己的主机 xiaoxiaomo01 上)email protected # ssh xiaoxiaomo01 #验证5. 安装国内的 yum 镜像参考:http:/ 安装 JDK 参考,这里我们安装 jdk1.8 : #解压到/data #mysql 启动&停止email protected opt# /etc/init.d/mysqld start #启动服务email protected opt# service mysqld start #启动服务email protected opt# /etc/init.d/mysqld stop #启停止服务email protected opt# service mysqld stop #停止服务安装安装 Hiveemail protected opt# tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /data/email protected opt# mv /data/apache-hive-1.2.1-bin/ /data/hive# 配置环境变量略email p
4、rotected opt# cd $HIVE_HOMEemail protected hive# cp conf/hive-env.sh.template conf/hive-env.shemail protected hive# cp conf/hive-default.xml.template conf/hive-site.xml修改配置1. hive-env.shemail protected hive# vim conf/hive-env.sh #添加如下配置 export JAVA_HOME=/data/jdkexport HIVE_HOME=/data/hiveexport HADOOP_HOME=/data/hadoop2. hive-env.sh光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/ 光环大数据光环大数据 http:/email protected hive# vim conf/hive-env.sh #修改如下配置 hive.querylog.location /data/data/hive/tmp hive.exec.local.sc
《Hadoop--快速搭建大数据开发环境_光环大数据培训》由会员gua****an分享,可在线阅读,更多相关《Hadoop--快速搭建大数据开发环境_光环大数据培训》请在金锄头文库上搜索。
做运营60%靠思维,40%靠经验,你的思维跟得上吗_光环大数据培训
长沙BI大数据培训_BI大数据工程师需要具备哪些高薪技能_光环大数据培训
智慧交通大数据平台搭建过程及应用案例_光环大数据培训
在DevOps中以API看待共享数据库_光环大数据培训
怎样才能成为一个高级Java工程师 —光环java培训机构
这可能是一篇数据化运营的大纲_光环大数据培训
自学大数据能找到工作吗_光环大数据培训
长沙大数据公司有哪些 参加大数据培训有钱途吗_光环大数据培训
中国大数据成熟盈利模型尚未建立_光环大数据培训
针对 MySQL 大规模数据库的性能和伸缩性的优化_光环大数据培训
怎样做数据分析_数据分析方法大全
怎么学习数据分析_数据分析软件汇总
怎样成为数据分析师_光环数据分析师培训
在大数据迅猛发展的今天隐私保护成了难题_光环大数据推出AI智客计划送2000助学金
长沙cpda数据分析培训_cpda考试流程
运营之道,千变万化,存乎一心_光环大数据培训
在Hadoop上运行Docker容器的六大陷阱_光环大数据培训
云计算平台点兵 谁在用AWS 谁在用Azure_光环大数据培训
自学java编程语言和参加java培训哪个更有前途—光环java培训机构
最用心的运营数据指标解读_光环大数据培训
2023-06-01 10页
2023-07-27 10页
2023-01-04 7页
2022-11-03 3页
2024-02-05 4页
2023-02-26 4页
2022-09-11 15页
2022-10-19 6页
2023-05-16 6页
2022-10-21 6页