【openGauss/MogDB使用mog_xlogdump解析 xlog文件内容】

openGauss/MogDB的mog_xlogdump工具类似于PostgreSQL的pg_xlogdump/pg_waldump,可以解析xlog日志,获取xlog里的相关记录。可以通过MogDB的官网下载对应的版本使用,
https://www.mogdb.io/downloads/mogdb

一、 创建表并增加主键(模拟数据)

omm1@ubuntu-linux-22-04-desktop:~$ gsql -r
gsql ((openGauss 3.0.5 build b54d05de) compiled at 2023-09-23 09:23:38 commit 0 last mr )
Non-SSL connection (SSL connection is recommended when requiring high-security)
Type "help" for help.

openGauss=# create table test_tab1(id int, name varchar(20),insert_time timestamp not null default now());
CREATE TABLE
openGauss=# \d test_tab1
​           Table "public.test_tab1"
  Column  |      Type       |    Modifiers
-------------+-----------------------------+------------------------
 id     | integer           |
 name    | character varying(20)    |
 insert_time | timestamp without time zone | not null default now()

openGauss=# show wal_level ;
 wal_level
-------------
 hot_standby
(1 row)

openGauss=# alter table test_tab1 add primary key(id);
NOTICE: ALTER TABLE / ADD PRIMARY KEY will create implicit index "test_tab1_pkey" for table "test_tab1"
ALTER TABLE
openGauss=# \d test_tab1
​           Table "public.test_tab1"
  Column  |      Type       |    Modifiers
-------------+-----------------------------+------------------------
 id     | integer           | not null
 name    | character varying(20)    |
 insert_time | timestamp without time zone | not null default now()
Indexes:
  "test_tab1_pkey" PRIMARY KEY, btree (id) TABLESPACE pg_default

在这里插入图片描述

二、插入数据(模拟数据)

openGauss=# insert into test_tab1 values(1,'ysl');
INSERT 0 1

//查看数据的xmin,xmax,通过xmin可以看到这条数据属于事务13263

openGauss=# select xmin,xmax,* from test_tab1;
 xmin | xmax | id | name |    insert_time
-------+------+----+------+----------------------------
 13263 |  0 | 1 | ysl | 2023-12-15 14:49:35.975264
(1 row)

//查看表的filenode

openGauss=# select pg_relation_filenode('test_tab1');
 pg_relation_filenode
----------------------
​        16384
(1 row)


//看到当前使用的wal文件对应的xlog_location
openGauss=# select pg_current_xlog_location();
 pg_current_xlog_location
-------------------------
 0/22B8508
(1 row)

//可以用如下直接转成使用的xlog文件

openGauss=# select pg_xlogfile_name(pg_current_xlog_location());
   pg_xlogfile_name
--------------------------
 000000010000000000000002
(1   row)

在这里插入图片描述

三、使用mog_xlogdump解析xlog文件

//指定事物id,表应的filenode

mog_xlogdump -x 13263 -o 16384 -R int,varchar,timestamp 000000010000000000000002

'insert','tuple':{'int':'1','varchar':'ysl','timestamp':'2023-12-15 14:49:35.975264'}mog_xlogdump: FATAL: error in WAL record at 0/22B8B28: invalid record length at 0/22B8BC8: wanted 32, got 0

在这里插入图片描述

//或者不指定事物id,只指定表对应的filenode

 mog_xlogdump -o 16384 -R int,varchar,timestamp 000000010000000000000002

 'insert','tuple':{'int':'1','varchar':'ysl','timestamp':'2023-12-15 14:49:35.975264'}mog_xlogdump: FATAL: error in WAL record at 0/22B8C48: invalid record length at 0/22B8CE8: wanted 32, got 0

在这里插入图片描述

四、关于REPLICA IDENTITY和解码数据对比

REPLICA IDENTITY {DEFAULT | USING INDEX index_name | FULL | NOTHING} 调整逻辑复制时写入WAL日志中的信息量,该选项仅在wal_level配置为logical时才有效。

当原数据表发生更新时,默认的逻辑复制流只包含主键的历史记录,如果需要输出所需字段更新或删除的历史记录,可修改本参数。

  • DEFAULT(非系统表的默认值): 会记录主键字段的旧值。
  • USING INDEX : 会记录名为index_name索引包含的字段的旧值,索引的所有列必须NOT NULL。
  • FULL : 记录了所有列的旧值。
  • NOTHING(系统表默认值): 不记录旧值的信息。

在REPLICA IDENTITY默认未修改的情况下,update的解码数据对比如下

数据更新:未设置wal_level=logical,未修改replica identity

‘update’,‘new_tuple’:{‘(null)’:‘2’,‘(null)’:‘tt’,‘(null)’:‘2022-04-25 20:05:28.159008’}

数据更新:设置wal_level=logical,未修改replica identity

‘update’,‘new_tuple’:{‘(null)’:‘2’,‘(null)’:‘ttt’,‘(null)’:‘2022-04-25 20:05:28.159008’}

更新非主键列

‘update’,‘new_tuple’:{‘(null)’:‘2’,‘(null)’:‘tttt’,‘(null)’:‘2022-04-25 20:05:28.159008’}

更新主键列

‘update’,‘old_tuple’:{‘(null)’:‘2’,},‘new_tuple’:{‘(null)’:‘3’,‘(null)’:‘ttttt’,‘(null)’:‘2022-04-25 20:05:28.159008’}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/339901.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

【HarmonyOS】体验鸿蒙电商平台的未来之旅!

从今天开始,博主将开设一门新的专栏用来讲解市面上比较热门的技术 “鸿蒙开发”,对于刚接触这项技术的小伙伴在学习鸿蒙开发之前,有必要先了解一下鸿蒙,从你的角度来讲,你认为什么是鸿蒙呢?它出现的意义又是…

OceanBase在作业帮业务的应用实践

作业帮成立于 2015 年,致力于用科技手段助力教育普惠,运用人工智能、大数据等技术,为学生、老师、家长提供学习、教育解决方案,智能硬件产品等。 在业务初期,作业帮使用阿里云 ECS 自建 MySQL,同时最大程度…

揭开Spring MVC的真面目

官方对于Spring MVC的描述为: Spring Web MVC是基于Servlet API框架构建的原始Web框架,从一开始就包含在Spring框架中。它的正式名称“Spring Web MVC”来自其源模块的名称(Spring-webmvc),但它通常被称为“Spring-MVC…

网络通信(Socket/TCP/UDP)

一、Socket 1.概念: Socket(又叫套接字)是通信的基石,是支持TCP/IP协议的网络通信的基本操作单元。它是网络通信过程中端点的抽象表示,包含进行网络通信必须的五种信息:连接协议,客户端的IP地址,客户端的端口,服务器的IP地址,服务器的端口。 一个Socket是一对IP地址…

OpenGPTs:一款外挂般的GPTs管理器,由ChatPaper团队开源!

OpenGPTs-非常好用的开源GPTs管理器. 一句话介绍 非常好用的GPTs管理器,ChatPaper团队开源一款功能强大的浏览器插件,适合所有拥有Plus权限的朋友。 为什么要做OpenGPTs? 🤔💡 众所周知,OpenAI官网的GPT…

飞书+ChatGPT+cpolar搭建企业智能AI助手并实现无公网ip远程访问

文章目录 推荐 前言环境列表1.飞书设置2.克隆feishu-chatgpt项目3.配置config.yaml文件4.运行feishu-chatgpt项目5.安装cpolar内网穿透6.固定公网地址7.机器人权限配置8.创建版本9.创建测试企业10. 机器人测试 推荐 前些天发现了一个巨牛的人工智能学习网站,通俗易懂…

Vue2中CesiumV1.113.0加载离线地图

Vue2中CesiumV1.113.0加载离线地图,本文以天地图为例。 1.使用nodejs获取天地图 新建nodejsdownmap项目文件夹,初始化项目 npm init -y src/index.js // An highlighted block var Bagpipe require(bagpipe) var fs require("fs"); var r…

项目解决方案:某城区(区县)社会面视频监控资源接入汇聚解决方案

目 录 一、概述 二、建设目标及需求 1.建设目标 2.需求分析 2.1 总体需求 2.2 需求细化 三、方案设计 1.设计依据 2.设计原则 3.设计方案 3.1.方案描述 3.2.组网说明 四、产品介绍 1.视频监控综合资源管理平台介绍 2.视频录像服务器和存储 2.1…

基于SpringBoot的SSM整合案例

项目目录: 数据库表以及表结构 user表结构 user_info表结构 引入依赖 父模块依赖: <parent><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-parent</artifactId><version>2.2.12.RELEASE</version>…

自动弹性,QPS线性提升|一文读懂云原生数仓AnalyticDB弹性技术原理

前言 在全球经济增长放缓的大背景之下&#xff0c;企业在加强数字化建设的过程中&#xff0c;实现效益最大化成为一个绕不开的话题。阿里云瑶池旗下的云原生数仓AnalyticDB MySQL湖仓版&#xff08;以下简称AnalyticDB MySQL&#xff09;在发布之初提供了定时弹性功能&#xf…

本地读取Excel文件并进行数据压缩传递到服务器

在项目开发过程中&#xff0c;读取excel文件&#xff0c;可能存在几百或几百万条数据内容&#xff0c;那么对于大型文件来说&#xff0c;我们应该如何思考对于大型文件的读取操作以及性能的注意事项。 类库&#xff1a;Papa Parse - Powerful CSV Parser for JavaScript 第一步…

漏洞复现-SpringBlade export-user SQL 注入漏洞(附漏洞检测脚本)

免责声明 文章中涉及的漏洞均已修复&#xff0c;敏感信息均已做打码处理&#xff0c;文章仅做经验分享用途&#xff0c;切勿当真&#xff0c;未授权的攻击属于非法行为&#xff01;文章中敏感信息均已做多层打马处理。传播、利用本文章所提供的信息而造成的任何直接或者间接的…

什么是ORM?

ORM&#xff08;Object-Relational Mapping&#xff0c;对象关系映射&#xff09;是一种编程技术&#xff0c;它的目标是实现面向对象编程语言与关系型数据库之间的数据映射和转换。ORM系统允许开发人员使用面向对象的方式来操作数据库&#xff0c;而无需直接编写复杂的SQL查询…

Cesium叠加超图二维服务、三维场景模型

前言 Cesium作为开源的库要加超图的服务则需要适配层去桥接超图与Cesium的数据格式。这个工作iClient系列已经做好&#xff0c;相比用过超图二维的道友们可以理解&#xff1a;要用Openlayer加载超图二维&#xff0c;那就用iClient for Openlayer库去加载&#xff1b;同样的要用…

mac自带录屏

1、打开 快捷键&#xff1a;Shift Command5 可以在指定存储位置 2、结束 快捷键&#xff1a; CommandControlEsc&#xff08;也可以点击顶部工具栏的结束按钮&#xff09;

图像数据增广

目录 一、常用的图像增广方法 1、随机翻转 2、随机裁剪 3、随机颜色变换 二、图像代码实现 1、定义图像显示辅助函数 2、随机翻转 3、随机裁剪 4、随机颜色变换 5、结合多种图像增广方法 三、使用图像增广进行训练 1、下载数据集 2、读取图像并增广 3、多GPU训练 …

麦芯(MachCore)应用开发教程2 --- 时序

黄国强 2024/01/22 正如计算机的本质是状态机一样&#xff0c;设备也是一个状态机。笔者之前文章“什么是时序”用 switch/case 实现了状态机。在麦芯中&#xff0c;我们用Lambda实现了状态机。相对于switch/case&#xff0c;Lambda更优雅&#xff0c;更符合面向对象。先上代码…

单元化(Set)架构设计详解:异地多活、突破扩展上限的优选方案

文章目录 一、单元化架构基础1、扩展性&#xff08;Scalability&#xff09;概述2、扩展性 - 横向扩展&#xff08;Horizontal Scale&#xff09;3、扩展性 - 纵向扩展&#xff08;Vertical Scale&#xff09;4、扩展性 - 扩展魔方5、一致性 - 数据库事务一致性&#xff08;ACI…

【中文版ChatGPT4.0!国内可直接用】

中文版ChatGPT4.0&#xff01;国内可直接用 文心一言微软Copilot迅捷AI写作 在国内使用ChatGPT 4.0可能需要支付每月20美元的费用&#xff0c;约合人民币145元。如果不愿意付费&#xff0c;也可以考虑使用其他免费的AI工具。 目前有许多公司在研发出色的AI大模型&#xff0c;这…

Python进阶-Anaconda使用总结

本文是 Anaconda 的使用总结&#xff0c;旨在帮助用户快速搭建 Python 环境、进行数据科学和机器学习工作。首先&#xff0c;介绍了在 Windows 系统上安装 Anaconda 的步骤&#xff0c;包括下载安装程序、配置环境变量以及验证安装。随后&#xff0c;详细列举了 Anaconda 的常用…