第 1 章 VMware
1.1 VMware 安装
一台电脑本身是可以装多个操作系统的,但是做不到多个操作系统切换自如,所以我们 需要一款软件帮助我们达到这个目的,不然数仓项目搭建不起来。
推荐的软件为 VMware,VMware 可以使用户在一台计算机上同时运行多个操作系统, 还可以像 Windows 应用程序一样来回切换。用户可以如同操作真实安装的系统一样操作虚拟机系统,甚至可以在一台计算机上将几个虚拟机系统连接为一个局域网或者连接到互联 网。
以下是 VMware Workstation Pro 15.5 的安装步骤。
1.1.1 VMware Workstation Pro 15.5 安装包
1.2.2 欢迎界面
1.2.3 同意许可证
1.2.4 选择安装路径(虚拟机软件安装位置)
1.2.5 用户体检计划
每次开启虚拟机时,会提醒让你更新版本,建议两个都不勾。
1.2.6 快捷方式
建议勾选,安装后使用起来会比较方便。
1.2.7 开始安装
1.2.8 等待安装完成
1.2.9 安装完成
输入许可证,激活 VMware。
注:如果点击的是完成也没关系,后面还是输入许可证的。
1.2.10 输入许可证
-
输入秘钥
-
点击完成
1.2.11 VMware 安装完毕
- 会自动在桌面上的快捷方式,双击它就可以使用啦。
第 2 章 CentOS
系统的安装得分两个步骤,第一步得配置一台电脑,选配 cpu,内存,磁盘,网卡等硬件。第二步才是安装系统。
2.1 配置电脑
2.1.1 进入 VMware
双击 VMware 图标,看到如下界面。
2.1.2 自定义新的虚拟机
2.1.3 解决虚拟机的兼容性
说明:安装什么版本的虚拟机就选哪个版本,默认就是。
2.1.4 选择当前虚拟机的操作系统
我们先配置电脑,再安装系统。
2.1.5 选择虚拟机将来需要安装的系统
因为不同的操作系统需要解决不同的兼容性问题,所以需要选择将来用什么系统,提前 做适配。
2.1.6 配置电脑(虚拟机安装位置)
说明:
- 给自己配置的电脑取个名字,并设置存放在物理机的位置在哪。
- 在虚拟机软件中可以创建一个个的虚拟机电脑,这是虚拟机电脑的存放位置。
2.1.7 选择 CPU 的个数
有个原则就是选满(跟物理机的 CPU 个数相同,但是不能超过)。
1)查看物理机 CPU 个数(windows10 为例)
2)设置虚拟机处理器的数量
- 本机电脑为12核,所以最后结果选择不超过12核的,如:2*4 = 8为例。
2.1.8 设置虚拟机的内存
内存大小有一定要求,建议 4g,不能给太多,后期会有多台虚拟机同时启动。
2.1.9 选择虚拟机上网方式
1)选择 NAT 的方式
2)没有 VMware 之前物理机的网络适配器信息(每个人不同,我只有 3 个)
3)安装 VMware 之后物理机的网络适配器信息(会多两个 vmnet1 和 vmnet8)
注:vmnet8 是虚拟机使用 NAT 模式上网的网卡
2.1.10 选择对应的文件系统的 IO 方式
2.1.11 选择磁盘的类型
2.1.12 选择磁盘的种类
2.1.13 选择虚拟机的磁盘大小
2.1.14 虚拟机文件的存放位置
2.1.15 电脑配置完毕
2.2 安装系统(CentOS7)
说明
- 上面的过程相当于是把电脑安装好了,现在我们需要做的是给电脑安装操作系统。
注意:
-
在安装系统之前需要检查自己 bios 的虚拟化设置是否打开(一般电脑是默认打开的)
-
以下是查看虚拟机 bios 是否开启的方式:
-
window10
-
window7 里面看不到(得去 bios 里面看)
-
-
如果发现 bios 虚拟化没有开启,解决办法:
- 重启电脑,在加载界面时按 f1-f10,或者电脑旁边一个小洞,具体怎么进入得去查一下(按照自己电脑的型号去查)
- 修改虚拟化为开启(thinkpad 为例)找到 security 里面的 VT 并改成 enabled
-
注:如果虚拟化没有开启报的是以下错误:
2.2.1 选择 cd/dvd 的方式安装系统
选择下载到磁盘目录下的liunux系统:
2.2.2 系统安装引导界面
说明:你得需要将鼠标点击进入界面中,但是鼠标会消失,你此刻得用键盘的上下键来控制选 项,图标变白了表示当前选中的是哪个选项,然后敲回车,表示执行所选选项。
注:如果这个时候你需要鼠标可以使用 ctrl+alt 一起按呼出鼠标。
耐心等待它的安装。
会自动跳转下面的界面。
2.2.3 需要定制化的内容
说明:按照编号顺序依次点击。
-
点击日期和时间,调整时间差
-
点击软件选择,安装GHOME(图形化界面的方式)
-
点击安装位置,配置磁盘分区
-
手动添加分区
-
添加 boot 区 给上 1G 容量后点击添加挂载点
CentOS7推荐使用:xfs。
-
添加 swap 交换分区
-
配置根
(/)
目录
根目录作为存储使用,将剩下的空间都给他(50 - 4 - 1)= 45、我配置的是40G,所以(40 - 4 - 1)= 35
3 个分区都配置完毕过后可以点击完成。
分区配置完毕,点击接受更改
-
-
关闭 kdump ,本身虚拟机内存就不够,他会吃掉一部分内存,我们尽量省一点
-
修改主机名
-
是否打开安全协议(
开启与否都可以
)
-
开始安装
-
安装时间比较长 大概需要 10 几分钟
-
一定要设置 root 用户密码,在安装的过程中就可以设置。
root、123456
-
密码设置成什么自己决定,但是不要忘,建议使用(123456)
-
2.2.4 虚拟机的使用引导界面
1)安装完成 重启虚拟机
2)选择接受许可凭证
3)创建普通用户:root用户权限太高,当然测试的话无所谓
xiaoming、123456
4)完成配置
5)登录
2.2.5 切换 root 用户
当前登录的用户是刚刚创建的用户,权限会缺少,所以使用 root,修改一些内容更加方便。
1)切换 root 用户
刚才的引导再来一遍(就不再放图片了)。
最后的用户变成 root 表示切换成功。
2.3 网络配置
对安装好的 VMware 进行网络配置,方便虚拟机连接网络,本次设置建议选择 NAT 模式,需要宿主机的 Windows 和虚拟机的 Linux 能够进行网络连接,同时虚拟机的 Linux 可以通过宿主机的 Windows 进入互联网。
说明:
- 在修改静态ip之前还可以修改虚拟子网的一些配置,紧接着外面对应的主机ip也要跟着修改(如果是自动获取就不需要修改了,如果是指定ip也要跟着修改)。
- 这里直接使用默认的配置不用修改了。
- 总结:2.3网络配置中,2.3.1、2.3.2使用默认的不用修改,需要修改2.3.3的静态ip
2.3.1 编辑 VMware 的网络配置(选做)
然后全部点击确定,VMware 的网络配置就好了。
2.3.2 windows 的网络配置(选做)
以下以 window10 为例。
1)找到
按如上格式修改 IP 信息(地址,网关,DNS 服务器),修改完毕后全部点击确定退出。
2.3.3 虚拟机网络 IP 修改地址配置
(1)修改网络 IP 地址为静态 IP 地址,避免 IP 地址经常变化,从而方便节点服务器间的互相通信。
[root@hadoop100 ~]#vim /etc/sysconfig/network-scripts/ifcfg-ens33
(2)以下加粗的项必须修改,有值的按照下面的值修改,没有该项的则需要增加。
TYPE="Ethernet" #网络类型(通常是 Ethemet)
PROXY_METHOD="none"
BROWSER_ONLY="no"
BOOTPROTO="static" #IP 的配置方法[none|static|bootp|dhcp](引导时不使用协议|静态
分配 IP|BOOTP 协议|DHCP 协议)
DEFROUTE="yes"
IPV4_FAILURE_FATAL="no"
IPV6INIT="yes"
IPV6_AUTOCONF="yes"
IPV6_DEFROUTE="yes"
IPV6_FAILURE_FATAL="no"
IPV6_ADDR_GEN_MODE="stable-privacy"
NAME="ens33"
UUID="e83804c1-3257-4584-81bb-660665ac22f6" #随机 id
DEVICE="ens33" #接口名(设备,网卡)
ONBOOT="yes" #系统启动的时候网络接口是否有效(yes/no)
#IP 地址
IPADDR=192.168.10.100
#网关
GATEWAY=192.168.10.2
#域名解析器
DNS1=192.168.10.2
(3)修改 IP 地址后的结果如图所示,执行“:wq”命令,保存退出
(4)执行 service network restart 命令,重启网络服务。
[root@hadoop100 ~]# service network restart
(5)使用 ifconfig 命令查看当前 IP
修改后的当前虚拟主机ip:192.168.10.100
[root@hadoop100 ~]# ifconfig
(6)保证 Linux 系统 ifcfg-ens33 文件中 IP 地址、虚拟网络编辑器地址和 Windows 系
统 VM8 网络 IP 地址相同。
2.3.4 测试
主机ping虚拟机:ping 192.168.10.100
虚拟机ping主机
2.4 修改主机名和hosts 文件
2.4.1 修改主机名(选做)
1)基本语法
hostname (功能描述:查看当前服务器的主机名称)
2)修改主机名称
[root@hadoop100 ~]# vim /etc/hostname
shuai
3)修改完成后重启生效
修改是为了后面学习别的框架,这里暂时不学习所以还用之前的主机名即可:hadoop100
2.4.2 配置hosts文件
1)修改 linux 的主机映射文件(hosts 文件)
目的:保存映射关系,相当于手机的通讯录(电话备注和电话号码),把主机名和ip地址进行映射,这样别人才能通过主机名直接访问到机器而不需要一个个的输入ip号了。
(1.1)打开/etc/hosts
[root@hadoop100 桌面]# vim /etc/hosts
添加如下内容
192.168.10.100 hadoop100
192.168.10.101 hadoop101
192.168.10.102 hadoop102
192.168.10.103 hadoop103
192.168.10.104 hadoop104
192.168.10.105 hadoop105
2)修改 windows 的主机映射文件(hosts 文件)
说明:主机也要跟虚拟机进行通信,所以也要知道主机名和ip,所以同样要修改hosts文件。(需要管理员权限)
(2.1)进入 C:\Windows\System32\drivers\etc 路径
(2.2)打开 hosts 文件并添加如下内容
192.168.10.100 hadoop100
192.168.10.101 hadoop101
192.168.10.102 hadoop102
192.168.10.103 hadoop103
192.168.10.104 hadoop104
192.168.10.105 hadoop105
3)测试:此时直接可以ping 主机名了
第 3 章 远程终端工具安装
通常在工作过程中,公司中使用的真实服务器或者是云服务器,都不允许除运维人员之 外的员工直接接触,因此就需要通过远程登录的方式来操作。所以,远程登录工具就是必不 可缺的,目前,比较主流的有 Xshell,SSH Secure Shell,SecureCRT,FinalShell 等,同学们可以根据自己的习惯自行选择,以下以 Xshell5 为例。
3.1 Xshell5 安装和配置
3.1.1 安装 Xshell5
1)一直点击下一步,但是有一页收费页,点击免费版,图如下
2)出现如下界面安装成功
3.1.2 配置 Xshell 终端
1)打开安装好的 Xshell
2)编辑新链接
3)测试链接
4)连接成功
3.2Xftp 传输工具
说明:除了远程登录还需要做上传和下载文件,这就需要使用Xshell的配套工具Xftp。
下载步骤:查看百度。
中文官网:https://www.xshellcn.com/
3.2.1 安装 Xftp
1)一直点击下一步,但是有一页收费页,点击免费版,图如下
2)出现如下界面表示安装成功
3.2.2 配置 Xftp
1)打开安装好的 Xftp
2)创建新链接
3)编辑新链接
4)测试新链接
出现以上界面表示链接成功,可以进行 windows 和 linux 系统互传数据。
注:有可能会有部分人右边是乱码,可以使用以下方式修改,修改后重启 Xftp。