阮胜昌的技术记录站-LinuxMySQL数据库运维

2020年07月14日

mysql2ch-0.5.3-clickhouse从MySQL增量时时同步数据

摘要：介绍mysql2ch 是一个用于同步 MySQL 到 ClickHouse 的工具，支持全量同步与增量同步。特性支持全量同步与增量同步。支持 DDL 与 DML，当前支持 DDL 字段新增与删除，支持所有的 DML。丰富的配置项。依赖软件版本kafka-2.1.0，用户缓冲 MySQL binlog 的消息队列。需要先安装好redis-5.0.6，缓存 MySQL binlog position 与 file。需要先安装好Python 3.6.8 运行环境安装pip3 inst

2020年07月14日

战斗民族开源OLAP利器-ClickHouse列式数据库安装配置

摘要：安装前准备：单机版和集群版都需要配置：在/etc/security/limits.conf,/etc/security/limits.d/90-nproc.conf,在2个文件的末尾加入以下内容：vim /etc/security/limits.conf* soft nofile 65535* hard nofile 65535* soft nproc 131072* hard nproc 131072vim /etc/security/limits.d/90-nproc.conf* soft nofile 65535* hard nofile 65535* soft nproc 1310

2020年06月17日

MySQL-通过SSL加密连接数据库详解

摘要：默认创建的用户，既可以通过帐号密码登录，也可以通过--SSL来登录，还可以通过密钥来登录查看当前数据库是否启用SSL: [5.7之后默认启动，5.6需要手动启动](root@DB)[(none)]> show variables like'%ssl%' -> ; +---------------+-----------------+ | Variable_name | Value | +---

2020年05月13日

号外号外：一个“锁表”损失800万，运维被判5年半

摘要：近日，云头条发布的“一个违规操作、损失 800 万、被判五年半：运维夏某某致郑大一附院智慧医院系统瘫痪 2 个小时，判破坏计算机信息系统罪”一文引发了技术圈的热议。事件经过夏某某任职北京中科某某科技有限公司，负责该公司为郑大一附院开发的“软件信息系统”的维护工作。2017 年 10 月 31 日 20 时许，夏某某参与并直接操作了郑大一附院“HIS 数据库”的账号密码修改

2020年05月13日

UNDO段的原理以及自动UNDO段管理

摘要：undo和redo undo 用于撤销修改的操作（事务回滚） rollforeword redo用于将数据的修改重演一遍（恢复） rollback UNDO的目的事务的回滚实例的恢复提供查询的一致性读显式开启一个事务：SQL> create table t (id int ) SQL> begin 2 insert into t value

2020年05月11日

PHP-FPM child exited on signal 7 异常退出完美解决方法

摘要：某个子站是php写的，访问的时候nginx时不时会冒出现502错误，高峰时更频繁，检查php-fpm的日志发现大量的 child exited on signal 7 (SIGBUS)，并且和accesslog里的502时间完全吻合，排除了php进程过载的可能，然后又排除了apc的嫌疑。 1，安装straceyum install strace -y2，查看php-fpm进程vagrant@vagrant-ubuntu-precise-64:~$ ps -ef | grep php-fpmroot

2020年05月09日

MYSQL5.7.18 数据库物理增量备份恢复脚本（xtrabackup2.4.20）

摘要：功能说明：整套功能需要三个脚本 innobackupex_all.sh、innobackupex_increment.sh、innobackupex_restore.sh我们知道xtrabackup可以第一次备份全量数据，之后设置增量备份。Linux crontab以数字0-6表示”周日”-“周六”。所以，我以一周为周期：周日进行全备，存放于0目录；周一至周六增备，存放于1-6目录；下次周日清空目录重新全备。上面以0-6这样的目录名存放备份数据，是

2020年05月03日

Oracle-重做日志文件详解

摘要：日志文件的状态：SQL> select group#,status from v$log; GROUP# STATUS---------- ---------------- 1 INACTIVE 2 INACTIVE #表示日志文件的数据在实例恢复时不需要这个数据文件 3 CURRENT &nbs

2020年05月03日

Oracle-参数文件详解

摘要：参数文件的作用：控制程序的行为或者是功能的开关，性能的约束,控制实例的运行设定数据库的限制设定用户或进程的限制设定数据库资源的限制设定系统的性能几个常用的参数文件：SGA_TARGET Oracle内存的区域PGA_AGGREGATE_TARGET PGA总合的大小DB_CACHE_SIZE 数据库缓存的大小DB_FILES

2020年05月03日

Oracle-控制文件详解

摘要：控制文件至少包含以上的信息：1.数据库名称DBID2.数据库建立的时间3.数据文件，在线日志文件，归档文件的信息4.表空间信息5.RMAN的备份信息控制文件的作用：它包含数据文件，在线日志文件，归档文件的信息，这些信息用于数据库OPEN时的文件验证当数据库的架构改变时，比如增减，删除文件时，会更新控制文件包含了数据库恢复时候需要的一些信息，用

2020年04月29日

MongoDBv4.0.18 Sharding 高可用集群搭建 (CentOS7.2)全网独有

摘要：从图中可以看到有四个组件：mongos、config server、shard、replica set。mongos，数据库集群请求的入口，所有的请求都通过mongos进行协调，不需要在应用程序添加一个路由选择器，mongos自己就是一个请求分发中心，它负责把对应的数据请求请求转发到对应的shard服务器上。在生产环境通常有多mongos作为请求的入口，防止其中一个挂掉所有的mongodb请求都没有办法操作。config se

2020年04月29日

MongoDBv4.0.18 replica set 高可用集群搭建 (CentOS7.6)全网独有

摘要：单节点mongodb软件安装配置：配置环境： [root@node250 ~]# uname -a Linux node250 3.10.0-957.el7.x86_64 #1 SMP Thu Nov 8 23:39:32 UTC 2018 x86_64 x86_64 x86_64 GNU/Linux [root@node250 ~]# cat /etc/redhat-release CentOS Linux release 7.6.1810 (Core) 节点功能清单：功能节点主机名： &n

2020年04月16日

CentOS6,CentOS7 源码编译安装svn-1.6.11

摘要：参考文档：官方安装文档，安装方法已经制作成一键安装脚本位于码云。git clone https://gitee.com/vazd/subversion-installer.git运行install_svn.sh即可完成安装。一、安装必备组件依赖项：yum install autoconf libtool expat-devel -y1.1 安装apr和apr-utilapr全名Apache Portable Runtime，必需的依赖项。下载地址：apr和apr-util下载地址# 安装aprwget http://mirrors.tun

2020年04月01日

武汉火神山医院基建世界里的云原生缩影

摘要：二神山医院选址与技术应用选型火神山雷神山建造这么快，在工程实践层面的最主要的一个因素就是建造模式选择（装配式建筑也叫工业化建筑），这也是基建狂魔的核心技术。当然还有重要的一点，是参考了已有的小汤山模式的医院结构设计。火神山雷神山的快速建造中有哪些实践可以借鉴到软件领域的？本次分析首先对总体需求进行拆解，分析出满足需求的关键点；然后基于这些需求关键点

2020年03月25日

MySQL性能优化实践全解

摘要：数据查询慢，不代表 SQL 语句写法有问题。首先，我们需要找到问题的源头才能“对症下药”。无需更多言语，从图中可以清楚地看出，导致数据查询慢的原因有多种，如：缓存失效，在此一段时间内由于高并发访问导致 MySQL 服务器崩溃；SQL 语句编写问题；MySQL 服务器参数问题；硬件配置限制 MySQL 服务性能问题等。三、查看 MySQL 服务器运行的状态值如果系统的并发请求数不高，且

2020年03月10日

MongoDB分库分集合备份SHELL脚本全解

摘要：运行环境：[root@node10 ~]# uname -aLinux node10 2.6.32-696.el6.x86_64 #1 SMP Tue Mar 21 19:29:05 UTC 2017 x86_64 x86_64 x86_64 GNU/Linux[root@node10 ~]# cat /etc/redhat-release CentOS release 6.9 (Final)1.多个数据库备份脚本[root@node10 Mongodb_shell_scripts]# cat get_mongodb_dbs.sh#!/bin/bash/usr/bin/mongo 127.0.0.1:27017/admin -u admin&

2020年02月29日

Centos7 通过kubeadm 搭建 Kubernetes(k8s)v1.14.0 三节点集群配置全解

摘要：1、Kubernetes集群几种部署方式 minikube方式Minikube是一个工具，可以在本地快速运行一个单点的Kubernetes，适合尝试Kubernetes或日常开发的用户使用，但是不能用于生产环境。kubeadm方式Kubeadm也是一个工具，提供kubeadm init和kubeadm join，可用于快速部署Kubernetes集群。（本文配置方式）二进制包方式从官方下载发行版的二进制包，手动部署每个组件，组成Kubernete

2020年02月25日

gitlab项目URL点击报错404的解决方法

摘要：之前创建了项目之后，今天重启了服务器，点击项目URL报错404谷歌了很多资料，最后觉得靠谱的还是缓存问题，按照下面小哥的方法清了下缓存，就可以了A gitlab-rake cache:clear solves this issue immediately, so the problem is apparently an incoherent cache.It is reproducible, a formerly renamed or deleted project triggers the cached 404.原文的连接如下：https://

2020年02月15日

腾讯微服务框架Tars配置全解

摘要：环境：[root@izj6cilg0dtunfc49dqpxgz ~]# cat /etc/redhat-releaseCentOS Linux release 7.2.1511 (Core)[root@izj6cilg0dtunfc49dqpxgz ~]# uname -aLinux izj6cilg0dtunfc49dqpxgz 3.10.0-514.26.2.el7.x86_64 #1 SMP Tue Jul 4 15:04:05 UTC 2017 x86_64 x86_64 x86_64 GNU/Linuxtars版本：https://github.com/TarsCloud/Tars/releases/tag/v1.5.0安装包准备：1,依赖yum in

2020年01月18日

Goldengate之Mysql到Mysql的单向多表同步

摘要：在同一台服务器，同一个mysql实例中，使用Goldengate完成Mysql到Mysql的数据同步，源库的hexin库同步到目标库的product_center库，表名hexin_erp_product_supplier实验准备：系统: CentOS 6.9mysql版本 : 5.7.18mysql-1:192.168.67.151 库：hexin 表：hexin_erp_product_suppliermysql-2:192.168.67.151 库：hexin 表：hexin_erp_produc

分页：« 6 7 8 9 10 11 12 13 14 15 »

2020年07月14日

分类:DataBase

2020年07月14日

分类:系统管理

2020年06月17日

分类:DataBase

2020年05月13日

分类:Linux世界

2020年05月13日

分类:DataBase

2020年05月11日

分类:LANMPT

2020年05月09日

分类:DataBase

2020年05月03日

分类:DataBase

2020年05月03日

分类:DataBase

2020年05月03日

分类:DataBase

2020年04月29日

分类:系统管理

2020年04月29日

分类:系统管理

2020年04月16日

分类:系统管理

2020年04月01日

分类:Linux世界

2020年03月25日

分类:DataBase

2020年03月10日

分类:系统管理

2020年02月29日

分类:虚拟化

2020年02月25日

分类:系统管理

2020年02月15日

分类:自动化运维

2020年01月18日

分类:DataBase

关于我

站内搜索

联系我

内容分类

最火博文

最新评论

友情链接