APM链路监控： Linux 部署 pinpoint

目录

一、实验

1.环境

2. 准备

3.HBase单机部署

4.pinpoint部署

二、问题

1.pinpoint有哪些功能

2.pinpoint架构是如何组成的

3.Linux中自带的jdk 如何设置JAVA_HOME

4. hbase启动报错

5.hbase的master启动失败

6.JPS命令如何安装和使用

一、实验

1.环境

（1）主机

表1-1 主机

主机架构组件IP备注
pinepoint

all in one

pinpoint-web-boot

pinpoint-collector-boot

hbase

 192.168.204.233
agent        agentpinpoint-agent 192.168.204.130

2. 准备

（1）下载软件

1）jdk
jdk1.8（下面的hbase GC调优主要针对jdk1.8，其他版本会有所不同）

2)pinpoint组件
#下载地址 https://github.com/pinpoint-apm/pinpoint/releases/tag/v2.3.3
pinpoint-web-boot-2.3.3.jar
pinpoint-collector-boot-2.3.3.jar
pinpoint-agent-2.3.3.tar.gz

3）hbase
#下载地址  http://archive.apache.org/dist/hbase/1.4.9/
hbase-1.4.9-bin.tar.gz

#下载地址  https://github.com/pinpointapm/pinpoint/tree/master/hbase/scripts）
hbase-create.hbase

3.HBase单机部署

（1）查看目录

（2）解压

tar -xzvf hbase-1.4.9-bin.tar.gz

（3）切换目录

（4）修改HBase配置文件hbase-site.xml

vim hbase-site.xml

<configuration>
        <property>
                <name>hbase.rootdir</name>
                <value>file:///app/application/data/hbase</value>
        </property>
        <property>
                <name>hbase.zookeeper.property.dataDir</name>
                <value>/app/application/data/zookeeper</value>
        </property>
        <property>
                <name>zookeeper.session.timeout</name>
                <value>300000</value>
                <description>加大zookeeper会话超时时间</description>
        </property>
        <property>
                <name>hbase.regionserver.restart.on.zk.expire</name>
                <value>true</value>
                <description>设置 regionserver 起死回生</description>
        </property>
        <property>
                <name>hbase.regionserver.handler.count</name>
                <value>50</value>
                <description>regionserver处理IO请求的线程数</description>
        </property>
        <property>
                <name>hbase.zookeeper.property.tickTime</name>
                <value>60000</value>
                <description>Client端与zk发送心跳的时间间隔</description>
        </property>
        <property>
                <name>zookeeper.session.timeout.localHBaseCluster</name>
                <value>300000</value>
                <description>本地模式HMasterCommandLine类中的startMaster方法会将zookeeper.session.timeout.localHBaseCluster设置给zookeeper.session.timeout,本地模式默认10000ms</description>
        </property>
        <property>
                <name>hbase.localcluster.assign.random.ports</name>
                <value>false</value>
                <description>本地模式端口号是随机分配,取消随机端口才能变成默认端口</description>
        </property>
</configuration>

修改前

修改后：

（5）修改启动文件hbase-env.sh的JAVA_HOME环境变量位置

vim hbase-env.sh

# 在27行左右的位置，修改如下
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk
 
# 在128行开启自带zookeeper
export HBASE_MANAGES_ZK=true

修改前：

修改后

(6) 配置环境变量

#配置环境变量HBASE_HOME
vim /etc/profile

#在末尾添加：
export HBASE_HOME=/opt/hbase-1.4.9

#让环境变量生效
source /etc/profile

(7)启动HBase

cd /opt/hbase-1.4.9/bin
./start-hbase.sh

（8）验证是否启动成功

jps

启动成功会看到HMaster进程

（9）初始化HBase的pinpoint库

① 执行pinpoint提供的Hbase初始化语句

cd /opt/hbase-1.4.9/bin
./hbase shell /opt/hbase-create.hbase

16张表已建好

（10）结果验证

方法1：进入数据库，查看初始化表

#进入数据库
cd /opt/hbase-1.4.9/bin
./hbase shell
#查看初始化表
list

方法2：登录web，查看初始化数据是否成功（可看到16张表已建好）

HbaseWeb地址 : http://192.168.204.233:16010/master-status,IP地址为hbase数据库所在服务器的IP地址

(11) 命令

① 进入自带zookeeper模式命令

./hbase zkcli

②进入hbase命令

./hbase shell

4.pinpoint部署

（1）安装pinpoint-collector

pinpoint-collector-boot-2.3.3.jar默认端口为8081，可自行修改application.yml的端口地址

nohup java -Dpinpoint.zookeeper.address=localhost -jar /opt/pinpoint-collector-boot-2.3.3.jar >/var/log/pinpoint-collector.log 2>&1 &

(2) 安装pinpoint-web

① pinpoint-collector-boot-2.3.3.jar默认端口为8080，可自行修改application.yml的端口地址

nohup java -Dpinpoint.zookeeper.address=localhost -jar /opt/pinpoint-web-boot-2.3.3.jar >/var/log/pinpoint-web.log 2>&1 &

② 浏览器上输入：http://ip:8080，可以进入到PinPoint主界面。由于此时还没有在被测服务上运行agent，因此页面上没有应用可以显示。

（3）安装pinpoint-agent（pinpoint-agent 需要与被测应用安装在一起）

①解压并修改agent配置文件 

tar -xvf pinpoint-agent-2.3.3.tar.gz 

vim /opt/pinpoint-agent-2.3.3/profiles/release/pinpoint.config

profiler.transport.grpc.collector.ip=192.168.204.233   # 即安装pinpoint-collector的虚拟机IP
profiler.collector.ip=192.168.204.233   #hbase服务器地址
profiler.sampling.counting.sampling-rate=1 #采样率配置，访问量不大的情况，建议全部采集

修改前

修改后

② 增加监控的服务的启动命令

# 启动应用demoA
nohup java -javaagent:/opt/pinpoint-agent-2.3.3/pinpoint-bootstrap-2.3.3.jar -Dpinpoint.agentId=demoA -Dpinpoint.applicationName=demoA -jar /opt/dubbo-admin-backend-0.0.1-SNAPSHOT.jar > nohup.out 2>&1 &

③ 命令解析

-javaagent:/opt/pinpoint-agent-2.3.3/pinpoint-bootstrap-2.3.3.jar：agent所在位置

-Dpinpoint.agentId：这个参数只能唯一

-Dpinpoint.applicationName：可以重复，但为了更好地查看应用间的调用关系，这里按照应用名取值

④刷新pinpoint页面，即可看到新增应用demoA

#启动应用eureka_demo
nohup java -javaagent:/opt/pinpoint-agent-2.3.3/pinpoint-bootstrap-2.3.3.jar -Dpinpoint.agentId=eureka_demo -Dpinpoint.applicationName=eureka_demo -jar /opt/eureka_demo-0.0.1-SNAPSHOT.jar > nohup.out 2>&1 &

⑤再次刷新pinpoint页面，看到新增应用eureka_demo

二、问题

1.pinpoint有哪些功能

（1）概念

pinpoint是开源在github上的一款APM监控工具，它是由java编写的，用于大规模分布式系统的监控；它对性能的影响最小(只增加约3%资源利用率)，安装agent是无侵入式的，只需要在被测试的Tomcat中加上3句话，打下探针，就可以监控整套程序了。

（2）功能

1）服务拓扑图
对整个系统中应用的调用关系进行了可视化的展示，单击某个服务节点，可以显示该节点的详细信息，比如当前节点状态、请求数量等

2）实时活跃线程图
监控应用内活跃线程的执行情况，对应用的线程执行性能可以有比较直观的了解

3）请求响应散点图
以时间维度进行请求计数和响应时间的展示，拖过拖动图表可以选择对应的请求查看执行的详细情况

4）请求调用栈查看
对分布式环境中每个请求提供了代码维度的可见性，可以在页面中查看请求针对到代码维度的执行详情，帮助查找请求的瓶颈和故障原因。

5）应用状态、机器状态检查
通过这个功能可以查看相关应用程序的其他的一些详细信息，比如CPU使用情况，内存状态、垃圾收集状态，TPS和JVM信息等参数。

2.pinpoint架构是如何组成的

（1）组成

pinpoint由pinpoint agent、pinpoint collector、pinpoint web、HBase 4部分组成；

1）Pinpoint Agent
用于收集应用端监控数据，无侵入式，只需要在启动命令中加入部分参数即可;

2）Pinpoint Collector
数据收集模块，接收Agent发送过来的监控数据，并存储到HBase;

3）Pinpoint Web
监控展示模块，展示系统调用关系、调用详情、应用状态等，并支持报警等功能;

4）HBase
数据库，用于保存监控数据。

（2）架构图

3.Linux中自带的jdk 如何设置JAVA_HOME

（1） 查看java版本

java -version

（2）查看jdk的安装路径（最后2行）

java -verbose

（3）查看 java的位置

which java

（4）root用户下改配置文件

vim /etc/profile

找到export PATH USER LOGNAME MAIL HOSTNAME HISTSIZE HISTCONTROL

在下面写上：

export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk
export PATH=$PATH:$JAVA_HOME/bin
export CLASSPATH=.:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/rt.jar

更新查看

source /etc/profile

echo $JAVA_HOME

java -version

4. hbase启动报错

（1）报错

（2）原因分析

java8已经摈弃了Perm的配置，不能再配置Perm永久代参数。而是引入了一个新的概念Metaspace。

在java虚拟机内部，class文件中包括类的版本、字段、方法、接口等描述信息，还有运行时常量池，用于存放编译器生成的各种字面量和符号引用。存放这些“永久”数据的区域叫做永久代（Permanent Generation，简称PermGen）。永久代是一片连续的堆空间。在JVM启动时通过命令行指定参数-XX：MaxPermSize来设定永久代最大可分配的内存空间。一个明显的问题是，PermGen的size很难调整，并且一旦这个值设置不当，当JVM加载的类信息容量超过了这个设定值后，应用将会报OOM错误（OutOfMemoryError）。
JAVA从JDK7的HotSpot虚拟机开始永久代的移除工作。

永久代在JDK8中被完全的移除了。所以永久代的参数-XX:PermSize和-XX：MaxPermSize也被移除了。
在JDK8中，类的元数据信息（class metadata）不再存储在连续的堆空间上，而是被存储在叫做Metaspace的本地内存（native memory）中。
由于类的元数据可以在本地内存(native memory)之外分配,所以其最大可利用空间是整个系统内存的可用空间。这样，我们程序猿将不再会遇到OOM错误。

（3）解决方法

修改配置文件，注释相关内容。

vim hbase-env.sh

修改前

修改后

5.hbase的master启动失败

（1）报错

（2）原因分析

进程占用

（3）解决方法

kill掉这个56686的进程，重启Hbase服务

kill -9 56686

6.JPS命令如何安装和使用

（1）概念

jps(Java Virtual Machine Process Status Tool)是JDK 1.5提供的一个显示当前所有java进程pid的命令，简单实用，非常适合在linux/unix平台上简单察看当前java进程的一些简单情况。

（2）查询已安装的java软件包

rpm -qa |grep java

（3）安装安装openjdk-devel包

 yum install java-1.8.0-openjdk-devel.x86_64

（4）命令使用

jps -help
usage: jps [-help]
       jps [-q] [-mlvV] [<hostid>]

Definitions:
    <hostid>:      <hostname>[:<port>]

（5）常用参数

1）-q 只显示pid
jps -q

2）-m 输出传递给main 方法的参数，在嵌入式jvm上可能是null
jps -m

3）-l 输出应用程序main class的完整package名 或者 应用程序的jar文件完整路径名
jps -l

4）-v 输出传递给JVM的参数
jps -v

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/317050.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

Centos7.9服务器编译安装Nginx1.24.0和php8.3

Centos7.9服务器编译安装Nginx1.24.0和php8.3

Centos7.9服务器编译安装Nginx1.24.0和php8.3 服务器nginx原版本有安全漏洞，需要升级，由于原始是yum源安装，通过yum直接升级，无法正常升级完成，故而需要卸载yum源，重新编译安装。 1、查看原来nginx版本，ps查看原来nginx进程，运行状态： ps aux | grep nginx ​ root …
阅读更多...
JAVAEE——request对象（三）

JAVAEE——request对象（三）

1. request对象 1.1 知识点 &#xff08;1&#xff09;乱码问题的两种解决方式 &#xff08;2&#xff09;post和get提交的区别 &#xff08;3&#xff09;request接收同名参数的问题 1.2 具体内容 使用request接收参数 <%page contentType"text/html; charsetut…
阅读更多...
一个命令查看linux系统是Centos还是Ubuntu

一个命令查看linux系统是Centos还是Ubuntu

目 录 一、 背景介绍 二、一个命令查看linux系统的简单方法 1、 uname -a 2、cat /etc/issue 3、lsb_release -a 4、 dmesg | grep Ubuntu 一、 背景介绍 Linux 系统基本上分为两大类&#xff1a; 1. Red Hat 系列&#xff1a;包括 Red Ha…
阅读更多...
ipv6（centos布置-亲自操刀）

ipv6（centos布置-亲自操刀）

这一篇本来不太想写&#xff0c;但想想&#xff0c;不写出来后面又忘记了&#xff0c;就写写看了&#xff0c; 切记&#xff0c;大家看完别去用来做别的事情哈 正文来了&#xff1a; 开始就去注册一个Ipv6隧道服务吧 在隧道信息的下方有Example IPv6 Tunnel Configurations …
阅读更多...
openEuler安装Docker艰辛路程

openEuler安装Docker艰辛路程

文章目录 安装docker测试docker关于windows docker拉取镜像查看所有镜像删除镜像删除不在运行的进程强制删除正在运行的进程 启动docker容器服务-d测试 停止docker容器服务查看docker启动进程更新容器(没有自启动功能&#xff0c;更新为自启动)docker端口映射进入容器修改内容退…
阅读更多...
python + selenium 初步实现数据驱动

python + selenium 初步实现数据驱动

如果在进行自动化测试的时候将测试数据写在代码中&#xff0c;若测试数据有变&#xff0c;不利于数据的修改和维护。但可以尝试通过将测试数据放到excel文档中来实现测试数据的管理。 示例&#xff1a;本次涉及的项目使用的12306 selenium 重构------三层架构 excel文件数据如…
阅读更多...
单机物理机部署Datax

单机物理机部署Datax

一、概述 DataX 是阿里巴巴开源的一个异构数据源离线同步工具&#xff0c;致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。 源码地址&#xff1a;https://github.com/alibaba/DataX 为了解决异构数据…
阅读更多...
Portalgraph VR空间投影仪：可以将VR空间投射到任意平面上的新型VR投影技术

Portalgraph VR空间投影仪：可以将VR空间投射到任意平面上的新型VR投影技术

通过一项创新的科技突破&#xff0c;Portalgraph VR空间投影仪成功地在现实与虚拟空间之间搭建起了一座神奇的“时空传送门”。这投影一技术不仅打破了传统虚拟现实设备的局限&#xff0c;更让人们无需佩戴任何头戴显示器&#xff0c;仅凭裸眼就能在任何平面上看到虚拟现实空间…
阅读更多...
RibbonGroup添加QAction

RibbonGroup添加QAction

实际项目中&#xff0c;group中需要添加按钮与点击事件&#xff1a; 添加实例如下&#xff1a; if (Qtitan::RibbonGroup* groupClipboard pageHome->addGroup(tr("Clipboard"))) { //右下角按钮显示 groupClipboard->setO…
阅读更多...
高效办公：在文件夹名称左边插入关键字，提高文件管理效率

高效办公：在文件夹名称左边插入关键字，提高文件管理效率

在繁忙的工作环境中&#xff0c;经常要处理大量的文件和文件夹。有效的文件管理是一个挑战&#xff0c;大量的文件和文件夹难以找到所需的资料。下面一起来看云炫文件管理器如何在文件夹名称左边批量插入关键字。 文件夹名称左边添加关键字前后对比图。 文件夹名称左边批量插…
阅读更多...
电脑扩容升级硬盘选1T还是2T

电脑扩容升级硬盘选1T还是2T

SSD固态有必要升级2TB吗&#xff1f;----------吴中函 某大二学生用的一台笔记本电脑&#xff0c;512GB的硬盘空间已经严重不够用了&#xff0c;想给笔记本扩容升级一下硬盘&#xff1b; 这位学生是学设计专业的、平时也喜欢摄影、电脑里面也装了一些游戏&#xff0c;经常整理、…
阅读更多...
OFBiz RCE漏洞复现（CVE-2023-51467）

OFBiz RCE漏洞复现（CVE-2023-51467）

漏洞名称 Apache OFBiz 鉴权绕过导致命令执行 漏洞描述 Apache OFBiz是一个非常著名的电子商务平台&#xff0c;是一个非常著名的开源项目&#xff0c;提供了创建基于最新J2EE/XML规范和技术标准&#xff0c;构建大中型企业级、跨平台、跨数据库、跨应用服务器的多层、分布式…
阅读更多...
【java八股文】之MYSQL基础篇

【java八股文】之MYSQL基础篇

1、数据库三大范式是什么 第一范式&#xff1a;每个列都不可以再拆分。 第二范式&#xff1a;在第一范式的基础上&#xff0c;非主键列完全依赖于主键&#xff0c;而不能是依赖于主键的一部分。 第三范式&#xff1a;在第二范式的基础上&#xff0c;非主键列只依赖于主键&#…
阅读更多...
数模学习day13-典型相关分析

数模学习day13-典型相关分析

典型相关分析&#xff08;Canonical Correlation analysis&#xff09; 研究两组变量&#xff08;每组变量中都可能有多个指标&#xff09;之间相关关系的一种多元统计方法。它能够揭示出两组变量之间的内在联系。 注&#xff1a;本文源于数学建模学习交流相关公众号观…
阅读更多...
手把手教你在Ubuntu下建gitlab，试用于Ubuntu20、Ubuntu22、Ubuntu23

手把手教你在Ubuntu下建gitlab，试用于Ubuntu20、Ubuntu22、Ubuntu23

一、gitlab说明 略 二、准备工作 更新系统&#xff0c;安装依赖库$ sudo apt update && sudo apt upgrade $ sudo apt install apt install ca-certificates curl openssh-server postfix配置安装GitLab所需要的源$ curl -sS https://packages.gitlab.com/install/re…
阅读更多...
Qt点击按钮在附近弹出下拉框

Qt点击按钮在附近弹出下拉框

效果 MainWindow.h #ifndef MAINWINDOW_H #define MAINWINDOW_H#include <QMainWindow> #include"toollayout.h" QT_BEGIN_NAMESPACE namespace Ui { class MainWindow; } QT_END_NAMESPACEclass MainWindow : public QMainWindow {Q_OBJECTpublic:MainWindow…
阅读更多...
js动态设置关键侦@keyframes

js动态设置关键侦@keyframes

js动态设置关键侦keyframes 1.前置知识 关键侦keyframes规则通过在动画序列中定义关键侦的样式来控制CSS动画序列的中间步骤 keyframes slidein {from {transform: translateX(0%);}to {transform: translateX(100%);} } // from 等价于 0%&#xff1b;to 等价与 100% // 或…
阅读更多...
如何确定测试用例的优先级？5个方面

如何确定测试用例的优先级？5个方面

测试用例优先级的确定&#xff0c;有助于测试团队合理分配测试资源&#xff0c;集中精力测试重点功能和场景&#xff0c;确保重点功能测试用例的覆盖率&#xff0c;从而有利于快速发现和解决重点功能缺陷&#xff0c;确保项目进度和质量。 如果测试用例没有明确的优先级&#x…
阅读更多...
函数的秘密

函数的秘密

1. 函数的概念 在数学中我们学习过函数&#xff0c;而在C语言中其有着与数学不同的概念&#xff1a; 在C语言中&#xff0c;函数是指一组执行特定任务的语句&#xff0c;这些语句可以重复使用&#xff0c;并且可以在程序的不同部分调用。通过使用函数&#xff0c;程序员可以将…
阅读更多...
GIS融合之路（五）番外-山海鲸的体积云又又又升级了

GIS融合之路（五）番外-山海鲸的体积云又又又升级了

一转眼自上一篇文章已经过去半年之久&#xff0c;承诺的CesiumJS的天气文章竟然又又又又跳票了&#xff0c;没办法。开发任务时间紧&#xff0c;任务重。GIS的进一步整合进入深水区&#xff0c;每向前迈一步都是步履维艰&#xff0c;好不容易把体积雾&#xff0c;接触阴影&…
阅读更多...
最新文章

Copyright @ 2022~2023