八，Linux基础环境搭建（CentOS7）- 安装Mysql和Hive

Linux基础环境搭建（CentOS7）- 安装Mysql和Hive

大家注意以下的环境搭建版本号，如果版本不匹配有可能出现问题！

一、Mysql下载及安装

MySQL是一个关系型数据库管理系统，由瑞典MySQL AB 公司开发，属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一，在 WEB 应用方面，MySQL是最好的 RDBMS (Relational Database Management System，关系数据库管理系统) 应用软件之一。

MySQL是一种关系型数据库管理系统，关系数据库将数据保存在不同的表中，而不是将所有数据放在一个大仓库内，这样就增加了速度并提高了灵活性。

MySQL所使用的 SQL 语言是用于访问数据库的最常用标准化语言。MySQL 软件采用了双授权政策，分为社区版和商业版，由于其体积小、速度快、总体拥有成本低，尤其是开放源码这一特点，一般中小型网站的开发都选择 MySQL 作为网站数据库。

在这里插入图片描述
Mysql的下载（slave2）

Mysql下载链接：https://pan.baidu.com/s/1Hh2dnzXEiiHaL7vxwQMtpg

提取码：5l4o

将下载的安装包通过Xftp传输到Linux虚拟机/opt/software/中

Mysql的安装
yum remove mysql-libs			#删除本机的mysql 一路按y
cd /opt/software/
tar -xvf mysql-5.7.20-1.el6.x86_64.rpm-bundle.tar

rpm -ivh mysql-community-common-5.7.20-1.el6.x86_64.rpm
rpm -ivh mysql-community-libs-5.7.20-1.el6.x86_64.rpm
rpm -ivh mysql-community-client-5.7.20-1.el6.x86_64.rpm
rpm -ivh mysql-community-server-5.7.20-1.el6.x86_64.rpm --force --nodeps
Mysql启动服务
systemctl daemon-reload				#重载所有修改过的配置文件
systemctl start mysqld				#开启服务
systemctl enable mysqld				#开机自启 若不成功也不影响
登录MySQL数据库
grep "temporary password" /var/log/mysqld.log		#获取初密码
mysql -uroot -p										#登陆MySQL（注意中英文）
在这里插入图片描述
MySQL密码安全策略设置
set global validate_password_policy=0;								#设置密码强度为低级
set global validate_password_length=4;								#设置密码长度
alter user 'root'@'localhost' identified by '123456';				#修改用户密码
\q																	#退出
设置远程登录
mysql -uroot -p123456											#以新密码登陆MySQL
create user 'root'@'%' identified by '123456';					#创建用户
grant all privileges on *.* to 'root'@'%' with grant option;	#允许远程连接
flush privileges;												#刷新权限
create database if not exists test;								#创建数据库test

二、Hive下载及安装

hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低，可以通过类似SQL语句实现快速MapReduce统计，使MapReduce变得更加简单，而不必开发专门的MapReduce应用程序。hive十分适合对数据仓库进行统计分析。 在这里插入图片描述

Hive的下载（master操作）

Hive下载链接：https://pan.baidu.com/s/1Dxq9Hh-zu0RjuM_R3yNgfw

提取码：96io

将下载的安装包通过Xftp传输到Linux虚拟机/opt/software/中

HIve的安装（master操作）
mkdir -p /usr/hive
cd /opt/software/
tar -zxvf apache-hive-2.1.1-bin.tar.gz -C /usr/hive/
配置profile
vim /etc/profile

添加内容如下：

#set hive
export HIVE_HOME=/usr/hive/apache-hive-2.1.1-bin
export PATH=$PATH:$HIVE_HOME/bin
在这里插入图片描述

刷新profile文件

source /etc/profile
将Hive和profile文件传到slave1
scp -r /usr/hive/ root@slave1:/usr/	
scp -r /etc/profile root@slave1:/etc/profile
解决版本冲突
cp /usr/hive/apache-hive-2.1.1-bin/lib/jline-2.12.jar /usr/hadoop/hadoop-2.7.3/share/hadoop/yarn/lib/
修改hive-site.xml文件
cd /usr/hive/apache-hive-2.1.1-bin/conf/
vim hive-site.xml

修改内容如下：

<configuration>
<!-- Hive产生的元数据存放位置-->
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/user/hive_remote/warehouse</value>
</property>
<!--- 使用本地服务连接Hive,默认为true-->
<property>
<name>hive.metastore.local</name>
<value>false</value>
</property>
<!-- 连接服务器-->
<property>
<name>hive.metastore.uris</name>
<value>thrift://slave1:9083</value>
</property>
</configuration>
在这里插入图片描述
修改hive-env.sh中HADOOP_HOME环境变量
cd /usr/hive/apache-hive-2.1.1-bin/conf/
mv hive-env.sh.template hive-env.sh
vim hive-env.sh

修改内容如下：

HADOOP_HOME=/usr/hadoop/hadoop-2.7.3
export HIVE_CONF_DIR=/usr/hive/apache-hive-2.1.1-bin/conf
在这里插入图片描述

三、Hive的配置（slave1操作）

mysql依赖包下载

mysql依赖包下载链接：https://pan.baidu.com/s/1bjQPoaMab3CMiS1-5ojGgw

提取码：a4l3

将mysql依赖包放入slave1 Hive中
cd /usr/hive/apache-hive-2.1.1-bin/lib 
cp /opt/software/mysql-connector-java-5.1.47-bin.jar /usr/hive/apache-hive-2.1.1-bin/lib/
修改hive-env.sh文件
cd /usr/hive/apache-hive-2.1.1-bin/conf/
cp hive-env.sh.template hive-env.sh
vim hive-env.sh

修改内容如下：

HADOOP_HOME=/usr/hadoop/hadoop-2.7.3
export HIVE_CONF_DIR=/usr/hive/apache-hive-2.1.1-bin/conf
在这里插入图片描述
修改hive-site.xml文件
vim /usr/hive/apache-hive-2.1.1-bin/conf/hive-site.xml

添加内容如下：

<configuration>
<!-- Hive产生的元数据存放位置-->
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/user/hive_remote/warehouse</value>
</property>
<!-- 数据库连接JDBC的URL地址-->
<property>
<name>javax.jdo.option.ConnectionURL</name> 
<value>jdbc:mysql://slave2:3306/hive?createDatabaseIfNotExist=true&useSSL=false</value>
</property>
<!-- 数据库连接driver，即MySQL驱动-->
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<!-- MySQL数据库用户名-->
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<!-- MySQL数据库密码-->
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>123456</value>
</property>
<property>
<name>hive.metastore.schema.verification</name>
<value>false</value>
</property>
<property>
<name>datanucleus.schema.autoCreateAll</name>
<value>true</value>
</property>
</configuration>
检查profile文件
vim /etc/profile

在这里插入图片描述 如果没有错误的话，source一下profile文件

source /etc/profile

四、Mysql和Hive启动

启动hadoop集群（master上）
cd /usr/hadoop/hadoop-2.7.3/sbin/
start-all.sh
启动hive server服务（slave1上）
cd /usr/hive/apache-hive-2.1.1-bin/
bin/hive --service metastore
在这里插入图片描述
启动hive client(master上)
cd /usr/hive/apache-hive-2.1.1-bin/
bin/hive

成功就会跳到hive的输入界面 在这里插入图片描述

五、测试hive是否启动成功

查看数据库
hive>show databases;
在这里插入图片描述
创建数据库
hive>create database testbase;
在这里插入图片描述
复制一个master会话，查看一下master进程

在这里插入图片描述 如果可以查看以及建立数据库，进程中有RunJar进程，则代表Mysql和Hive安装成功啦~

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/904206.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

计算机毕业设计Python+大模型恶意木马流量检测与分类 恶意流量监测 随机森林模型 深度学习 机器学习 数据可视化 大数据毕业设计 信息安全 网络安全

计算机毕业设计Python+大模型恶意木马流量检测与分类 恶意流量监测 随机森林模型 深度学习 机器学习 数据可视化 大数据毕业设计 信息安全 网络安全

温馨提示：文末有 CSDN 平台官方提供的学长联系方式的名片！ 温馨提示：文末有 CSDN 平台官方提供的学长联系方式的名片！ 温馨提示：文末有 CSDN 平台官方提供的学长联系方式的名片！ Python大模型恶意木马流量检…
阅读更多...
Conditional DETR论文笔记

Conditional DETR论文笔记

原文链接 [2108.06152] Conditional DETR for Fast Training Convergencehttps://arxiv.org/abs/2108.06152 原文笔记 What 《Conditional DETR for Fast Training Convergence》 这个工作也是针对于DETR Query的工作 用于解决DETR训练收敛慢（Object query需要…
阅读更多...
LoRA微调，真的有毒！

LoRA微调，真的有毒！

本文介绍一篇相当有意思的文章，该文章的内容对我们使用指令微调将预训练模型改造为 Chat 模型和下游专业模型相当有指导意义。 本文的标题听起来有些唬人，有些标题党，但是这个论点在一定的限定条件下是成立的，笔者归纳为&#xf…
阅读更多...
Qt——信号和槽

Qt——信号和槽

一.信号和槽概述 谈及信号，很容易联想到在Linux系统中所分享到的信号。那么Linux信号和Qt信息有什么不同？ 在 Qt 中，用户和控件的每次交互过程称为⼀个事件。比如 "用户点击按钮" 是⼀个事件，"用户关 闭窗口&quo…
阅读更多...
Nginx反向代理(下)

Nginx反向代理(下)

1. WebSocket的反向代理 WebSocket 是目前比较成熟的技术了, WebSocket 协议为创建客户端和服务器端需要实时双向通讯的 webapp 提供了一个选择。服务器可以向浏览器推送相关消息，这样在前端实现的某个页面中我们可以及时看到服务器的状态变化而不用使用定时刷新去…
阅读更多...
2024年10月中国数据库排行榜：TiDB续探花，GaussDB升四强

2024年10月中国数据库排行榜：TiDB续探花，GaussDB升四强

10月中国数据库流行度排行榜如期发布，再次印证了市场分层的加速形成。国家数据库测评结果已然揭晓，本批次通过的产品数量有限，凸显了行业标准的严格与技术门槛的提升。再看排行榜，得分差距明显增大，第三名与后续竞争者…
阅读更多...
【C++】RBTree——红黑树

【C++】RBTree——红黑树

文章目录 一、红黑树的概念1.1 红⿊树的规则：1.2 理解最长路径长度不超过最短路径长度的 2 倍1.3 红⿊树的效率 二、 红⿊树的实现2.1 红⿊树的结构2.2 红⿊树的插⼊2.2.1 红⿊树树插⼊⼀个值的⼤概过程 2.3 红⿊树的插⼊代码实现 一、红黑树的概念 红⿊树是⼀棵⼆…
阅读更多...
git下载和配置

git下载和配置

git是什么？ Git是一种分布式版本控制系统，用于跟踪文件的变化，尤其是源代码。它允许多个开发者在同一项目上进行协作，同时保持代码的历史记录。Git的主要特点包括： 分布式：每个开发者都有项目的完整副本&a…
阅读更多...
[MySQL#6] 表的CRUD (1) | Create | Retrieve(查) | where

[MySQL#6] 表的CRUD (1) | Create | Retrieve(查) | where

目录 1. 插入 1.1 单行数据 - 全列插入 指定列插入 1.2 多行数据 - 全列插入 指定列插入 1.3 更新 1.4 替换 2. 查找 2.1 select 列 2.2 where 条件 具体案例 2.3 结果排序 总结关键字执行顺序 2.4 筛选分页结果 CRUD : Create(创建)，Retrieve(读取)&…
阅读更多...
C语言：代码运行的底层奥秘，编译和链接

C语言：代码运行的底层奥秘，编译和链接

目录 翻译环境和运行环境编译环境预编译（预处理）编译词法分析语法分析语义分析 汇编 链接运行环境 翻译环境和运行环境 在ANSI C的任何⼀种实现中，存在两个不同的环境。 第1种是翻译环境，在这个环境中源代码被转换为可执行的机器…
阅读更多...
2024 FinTechathon 校园行：助力高校学生探索金融科技创新

2024 FinTechathon 校园行：助力高校学生探索金融科技创新

在金融科技蓬勃发展的当下，人才培养成为推动行业前行的关键。为推进深圳市金融科技人才高地建设，向高校学子提供一个展示自身知识、能力和创意的平台，2024 FinTechathon 深圳国际金融科技大赛——西丽湖金融科技大学生挑战赛重磅开启&#xf…
阅读更多...
第7章 内容共享

第7章 内容共享

第 7 章　内容共享 bilibili学习地址 github代码地址 本章介绍Android不同应用之间共享内容的具体方式，主要包括：如何利用内容组件在应用之间共享数据，如何使用内容组件获取系统的通讯信息，如何借助文件提供器在应用之间共享文件…
阅读更多...
控制台安全内部：创新如何塑造未来的硬件保护

控制台安全内部：创新如何塑造未来的硬件保护

在 Help Net Security 的采访中，安全研究人员 Specter 和 ChendoChap 讨论了游戏机独特的安全模型，并强调了它与其他消费设备的不同之处。 他们还分享了对游戏机安全性的进步将如何影响未来消费者和企业硬件设计的看法。 斯佩克特 (Specter) 是本周在阿…
阅读更多...
开源项目-投票管理系统

开源项目-投票管理系统

哈喽，大家好，今天主要给大家带来一个开源项目-投票管理系统 投票管理系统主要有首页，发起投票，管理投票，参与投票，查看投票等功能 首页 为用户提供了一键导航到各个功能模块的便捷途径。 新增投票 用户…
阅读更多...
Unity 两篇文章熟悉所有编辑器拓展关键类 （上）

Unity 两篇文章熟悉所有编辑器拓展关键类 （上）

本专栏基础资源来自唐老狮和siki学院，仅作学习交流使用，不作任何商业用途，吃水不忘打井人，谨遵教诲 编辑器扩展内容实在是太多太多了（本篇就有五千字） 所以分为两个篇章而且只用一些常用api举例&#xff0c…
阅读更多...
rnn/lstm

rnn/lstm

tip：本人比较小白，看到july大佬的文章受益匪浅，现在其文章基础上加上自己的归纳、理解，以及gpt的答疑，如果有侵权会删。 july大佬文章来源：如何从RNN起步，一步一步通俗理解LSTM_rnn lstm-CSDN博…
阅读更多...
【Docker大揭秘】

【Docker大揭秘】

Docker 调试一天的血与泪的教训：设备条件：对应的build preparation相应的报错以及修改 作为记录 构建FASTLIO2启动docker获取镜像列出镜像运行containerdocker中实现宿主机与container中的文件互传 调试一天的血与泪的教训： 在DOCKER中跑通F…
阅读更多...
APISQL企业版离线部署教程

APISQL企业版离线部署教程

针对政务、国企、医院、军工等内网物理隔离的客户，有时需要多次摆渡才能到达要安装软件的服务器。本教程将指导您使用Linux和Docker Compose编排服务，实现APISQL的离线部署。 准备 准备一台Linux(x86_64)服务器。 安装Docker Engine（推荐版本…
阅读更多...
音视频入门基础：AAC专题（11）——AudioSpecificConfig简介

音视频入门基础：AAC专题（11）——AudioSpecificConfig简介

音视频入门基础：AAC专题系列文章： 音视频入门基础：AAC专题（1）——AAC官方文档下载 音视频入门基础：AAC专题（2）——使用FFmpeg命令生成AAC裸流文件 音视频入门基础：AAC…
阅读更多...
docker 可用镜像服务地址（2024.10.25亲测可用）

docker 可用镜像服务地址（2024.10.25亲测可用）

1.错误 Error response from daemon: Get “https://registry-1.docker.io/v2/” 原因：镜像服务器地址不可用。 2.可用地址 编辑daemon.json： vi /etc/docker/daemon.json内容修改如下： {"registry-mirrors": ["https://…
阅读更多...
最新文章

Copyright @ 2022~2023