growdu

2022

10

25

zookeeper主备集群demo

使用zookeeper搭建主备集群，要求实现如下功能：有且只有一个节点作为master，履行master的职责，在例子中是注册调度器；其他实例作为slave，不提供调度功能，但是在master节点挂掉之后，可以重新进行选主调度。 k

2022-10-25 集群

集群

25

zookeeper使用说明文档

安装部署需对每一台zookeeper集群节点做如下操作：安装openjdk并设置JAVA_HOME sudo apt-get install openjdk-8-jdk export JAVA_HOME=/usr&#

2022-10-25 集群

集群

25

zookeeper使用说明文档

安装部署需对每一台zookeeper集群节点做如下操作：安装openjdk并设置JAVA_HOME sudo apt-get install openjdk-8-jdk export JAVA_HOME=/usr&#

2022-10-25 集群

集群

25

stats

1. 设置存储临时统计数据的目录。这可以是一个相对于数据目录的路径或一个绝对路径。默认值是pg_stat_tmp。在一个基于 RAM 的文件系统上指明这个参数将降低物理 I/O 需求，并且提高性能。这个参数只能在postgres

2022-10-25 PostgreSQL

PostgreSQL

25

tcp_user_timeout与keepalive的关系与生效机制

仅开启tcp_user_timeout当tcp流中有数据交互时，tcp流不会进入keepalive，此时的超时主要受tcp_user_timeout影响。数据包被发送后未接收到ACK确认的达到tcp_user_timeout时会断开连接。t

2022-10-25 协议

性能调优协议

06

13

Patroni详解

2022-06-13 集群

集群

13

raft协议动态调整quorum

raft协议基础jraft实现raft协议动态调整quorum按照当前raft协议实现，当n个节点的集群超过n/2个节点宕机时，集群将无法提供服务。如5个节点的集群，当有3个节点宕机时，集群将无法提供服务。假设当前集群5个节点，

2022-06-13 集群

集群分布式一致性

13

repmgr网络割裂问题

分布式存储。

2022-06-13 集群

集群高可用与复制

13

分布式高可用

2022-06-13 集群

集群高可用与复制

13

分布式一致性协议

当前业界主流的分布式一致性协议主要有如下几种： totem协议（简单即有效） totem协议，全称是The Totem Single-Ring Ordering and Membership Protocol，是一个基于令牌环的分布式一致

2022-06-13 集群

集群分布式一致性

13

分布式数据库高可用方案设计

分布式数据库高可用的要求数据一致性可用性分区容错性通俗的来说，分布式数据库高可用要求即使仅存一个集群节点，也需要对外提供服务。分布式数据库高可用的实现方案对于分布式数据库来说，根据存储数据库元信息的不同，大致有两种方案来实现高可

2022-06-13 集群

集群高可用与复制

13

数据库分布式集群动态调整quorum值方案对比

背景在数据库分布式集群中，在半数以上节点宕机后，期望剩下的节点机器仍然能提供服务。举例来说，一个包含5个节点的数据库集群，当集群挂掉3个节点后，因为不符合半数以上节点正常原则，数据库集群将无法对外提供服务，需要人为介入。但在数据库的实际使

2022-06-13 集群

集群

13

常用分布式解决方案

基本概念集中式存储传统的存储也称为集中式存储，从概念上可以看出来是具有集中性的，也就是整个存储是集中在一个系统中的，但集中式存储并不是一个单独的设备，是集中在一套系统当中的多个设备。集中式存储最大的特点是有一个统一的入口，所有数据都要

2022-06-13 集群

集群

13

autoconf使用

简介 Autoconf是一个用于生成shell脚本的工具，可自动配置源码包以适应多种类Posix的系统,产生的配置脚本通常叫做configure。Autoconf的目标是为每个用户提供可移植的配置。 Autoconf解决了一个重要的问题 -

2022-06-13 编程语言

编程语言

13

initdb

启动Breakpoint 2, bootstrap_template1 () at initdb.c:1309 1309 { (gdb) bt #0 bootstrap_template1 () at initdb.c:1

2022-06-13 PostgreSQL

PostgreSQL

13

pg_ctl

启动(gdb) c Continuing. [Attaching after Thread 0x7ffff7d80740 (LWP 2093) fork to child process 2100] [New inferior 2 (pro

2022-06-13 PostgreSQL

PostgreSQL

13

repmgr搭建集群

编译git clone git@github.com:EnterpriseDB/repmgr.git 检查pg是否安装，主要看pg_config在不在$PATH下面。 pg_config --help 然后使用如下命令编译 .&#

2022-06-13 PostgreSQL

高可用与复制 PostgreSQL

13

数据库数据完整性问题（块折断）

数据库保证数据库完整性（解决块折断问题）当前主要有如下三种方式：操作日志加double write机制（mysql采用该机制）; 操作日志加full page write机制（postgresql同时采用这两种机制）；混合方式，既

2022-06-13 PostgreSQL

PostgreSQL

05

23

docker与宿主机共享内存通信

docker中的进程要与宿主机使用共享内存通信，需要在启动容器的时候指定“–ipc=host”选项。然后再编写相应的共享内存的程序，一个跑在宿主机上，另一个跑在docker上面。宿主机程序准备 shm_data.h #ifnd

2022-05-23 Docker

Docker

23

pg_walreceiver

启动流程启动receiver进程graph TB main-->PostmasterMain-->StartChildProcess-->fork_process-->AuxiliaryProcessMain--&g

2022-05-23 PostgreSQL

PostgreSQL

23

流复制心跳超时问题

基本概念 walsender 主库数据发送进程 walreceiver 备库数据接收进程问题现象在当前流复制过程中，当walreceiver进程在收到大量数据报文时会出现walsender因keepalive心跳报文超时而导致流复制断开

2022-05-23 PostgreSQL

高可用与复制 PostgreSQL

23

缩短tcp超时时间的方法

在tcp链路中，当网络异常时，缩短tcp超时时间一般有如下方法： TCP_USER_TIMEOUT(需要内核2.6.37及其以上版本) SIOCOUTQ tcp_retries2 应用层keepalive TCP_USER_TIMEOU

2022-05-23 协议

协议

16

程序基本构造

程序的目的就是等待输入，进行处理，完成后输出。数据模型（数据结构）全局数据内存数据文件数据临时数据存储数据初始化数据模型内存分配处理逻辑（算法）数据存储

2022-05-16 编程语言

编程语言

16

pg编译运行

源码获取git clone http://git.postgresql.org/git/postgresql.git 编译sudo apt install bison yacc sudo apt i

2022-05-16 PostgreSQL

PostgreSQL

16

pg源码对象管理

pg中对于xlog、buffer等均采用全局变量的方式进行管理。 bufferBlock *LocalBufferBlockPointers = NULL; BufferDesc *LocalBufferDescriptor

2022-05-16 PostgreSQL

内核基础 PostgreSQL

16

codeserver_docker

安装dockersudo apt install docker-ce 制作镜像dockerfile如下： FROM linuxserver/code-server WORKDIR /config RUN apt upda

2022-05-16 工具

工具

16

pg_checksum

pg在将数据写入磁盘时才会进行checksum的计算写入。写入流程graph TB PageSetChecksumCopy-->pg_checksum_page-->pg_checksum_block char * PageS

2022-05-16 PostgreSQL

PostgreSQL

16

pg共享内存

基本数据结构 PGShmemHeader typedef struct PGShmemHeader /* standard header for all Postgres shmem */ { int32

2022-05-16 PostgreSQL

PostgreSQL

16

xlog

全局变量 static XLogCtlData *XLogCtl = NULL; typedef uint64 XLogRecPtr; typedef struct XLogwrtRqst { XLogRecP

2022-05-16 PostgreSQL

PostgreSQL

04

29

C语言变长数组（柔性数组）

C99支持变长数组，定义时可以不指定数组长度，分配时再根据实际长度进行分配。变长数组一般只能放在结构体的最后一个成员，在变长数组之前至少得有一个结构体成员且一个结构体只能有一个变长数组变长数组实际是利用结构体的地址作为起始地址往

2022-04-29 编程语言

编程语言