-
从Mysql slave system lock延缓说开去
所属栏目:[编程] 日期:2022-03-25 热度:135
本文主要分析 sql thread中system lock出现的原因,但是笔者并明没有系统的学习过master-slave的代码,这也是2018年的一个目标,2018年我都排满了,悲剧。所以如果有错误请指出,也作为一个笔记用于后期学习。同时也给出笔者现在知道的几种造成延迟的可能和[详细]
-
MySQL 高并发配备优化
所属栏目:[编程] 日期:2022-03-25 热度:164
最近在搞一个报表系统,不是很负责,但是就是数据量比较大,单次写入上万条数据,加上在同一个事务里面,部署到linux服务器后,发现特别慢,后面发现mysql安装后没有优化配置文件,导致写入特别慢。服务器mysql版本: [root@localhost ~]# mysql -Vmysql Ver[详细]
-
Too many connections 举例一则
所属栏目:[编程] 日期:2022-03-25 热度:100
Too many connections 案例一则: 一 前言 DBA 运维就是填坑的过程,其他人挖坑,自己填;自己挖坑,自己填,说多了都是泪。好吧言归正传,今天凌晨忙碌了一个通宵做IDC 交互机维护改造以及升级数据库服务器的事情,需要重启服务器。重启完成OS和重新部署数[详细]
-
常驻查询引发的thread pool 性能难题
所属栏目:[编程] 日期:2022-03-25 热度:127
常驻查询引发的thread pool 性能问题: 一 现象 某业务单机4个实例中的一个实例出现连接数远高于其他三个实例(正常是4K,问题实例是8K+),但是这4个实例的配置完全相同。业务开发反馈为部分连接失败。 执行show processlist结果显示: 存在大量的Killed状[详细]
-
mysql定时器event解说
所属栏目:[编程] 日期:2022-03-24 热度:54
mysql定时器event解说: 一. 事件简介 事件(event)是MySQL在相应的时刻调用的过程式数据库对象。一个事件可调用一次,也可周期性的启动,它由一个特定的线程来管理的,也就是所谓的事件调度器。 事件取代了原先只能由操作系统的计划任务来执行的工作,而且[详细]
-
MySQL数据库最强连接数
所属栏目:[编程] 日期:2022-03-24 热度:127
知识背景: MySQL最大连接数的默认值是100, 对于并发连接数很大的数据库来说,当连接请求大于默认连接数后,就会出现无法连接数据库的错误,因此我们需要把它适当调大一些,在使用MySQL数据库的时候,经常会遇到这么一个问题,就是Can not connect to MySQL[详细]
-
MySQL之父解读数据库最新闪光点
所属栏目:[编程] 日期:2022-03-24 热度:76
大家好,我是MariaDB的 Michael Widenius,我们今天来简单的聊下MariaDB10.5新特性和即将要做的事情。10.5已经是RC了,应该是下周四GA,所以非常近了。 Monty分析MariaDB10.5新特性_腾讯视频 v.qq.com MySQL之父解读数据库最新亮点 所以,表转换这里,你可以[详细]
-
mysql之 percona-xtrabackup 2.4.7安置
所属栏目:[编程] 日期:2022-03-24 热度:50
准备:os是centos6.7,提前下载并上传 percona-xtrabackup 安装包 1.安装依赖包 [root@localhost xtrabackup]# yum -y install perl perl-devel libaio libaio-devel perl-Time-HiRes perl-DBD-MySQL Dependency Installed: perl-DBI.x86_64 0:1.609-4.el6 Co[详细]
-
MySQL MHA工具的好坏点归纳
所属栏目:[编程] 日期:2022-03-24 热度:124
MHA是由日本DeNA公司youshimaton(现就职于Facebook公司)开发的一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。 优点: 由perl语言开发的开源工具 可以支持基于GTID的复制模式 同一个监控节点可以监控多个集群 缺点: 需要编写脚本或者[详细]
-
基于GTID的主从复制创建
所属栏目:[编程] 日期:2022-03-24 热度:102
前置检查 server-id = 10,master/slave不允许重复 log-bin gtid-mode = ON enforce-gtid-consistency = ON 1,利用mysqlpump复制master数据到slave,搭建基于GTID的主从复制,缺少GTID处理方法,暂不成功。 mysqlpump --host= --user= --password= --single[详细]
-
MySQL 用随机数据补充外键表
所属栏目:[编程] 日期:2022-03-24 热度:151
准备环境 1.创建数字辅助表 create table nums(id int not null primary key); delimiter $$ create procedure pFastCreateNums(cnt int) begin declare s int default 1; truncate table nums; insert into nums select s; while s*2=cnt do insert into nu[详细]
-
小型存储步骤笔记
所属栏目:[编程] 日期:2022-03-24 热度:61
快速创建存储过程 CREATE TABLE IF NOT EXISTS `index_user`( `id` INT UNSIGNED AUTO_INCREMENT, `name` VARCHAR(100) NOT NULL, `email` VARCHAR(40) NOT NULL, `mobile` BIGINT(11) NOT NULL, `submission_date` DATE, PRIMARY KEY ( `id` ) )ENGINE=Inno[详细]
-
Emoji表情符号入MySQL数据库报错的解决方式
所属栏目:[编程] 日期:2022-03-24 热度:154
auther:Jane.Hoo 上周有开发人员反馈一个问题:前台应用抓取微博信息,每天总有几条数据插入不成功。应用日志显示: java.sql.SQLException: Incorrect string value: xF0x9Fx92xAA,... for column raw_json at row 1, 异常:org.springframework.jdbc.Un[详细]
-
swap占用过高时 如何查视哪个经常占用了swap
所属栏目:[编程] 日期:2022-03-24 热度:169
近日发现swap告警。 此刻 如果我想知道 swap主要是被哪个经常占用。 因为 我这是一台mysql服务器。。如果不是被mysql占用 我理论上 可以不去处理这个swap 使用命令 for i in $( cd /proc;ls |grep ^[0-9]|awk $0 100) ;do awk /Swap:/{a=a+$2}END{print $i,a[详细]
-
Mysql优化器对in list的处置
所属栏目:[编程] 日期:2022-03-24 热度:110
select * from table where id in (....) 这样的查询,是走范围索引还是走等值索引? select * from table where key_part1 in (....) and key_part2=XX; 这样的查询,第二部分还走不走索引? 测试目的,想知道,MYSQL对IN LIST是如何选择执行计划的;在单字[详细]
-
percona-server-5.7.11-4源码安置手册
所属栏目:[编程] 日期:2022-03-24 热度:162
MySQL5.7出来有段时间了,一直没时间玩玩,这两天有时间下了percona的装了下,发现还是有很多好玩的东西,下面是简单的源码安装记录(二进制安装比较简单,源码安装对OS包的依赖比较严重,尤其是zlib包,建议用RHEL6.5以上版本,本实验用的是centos7) 操作[详细]
-
my.cnf文件关于组选项的归纳
所属栏目:[编程] 日期:2022-03-24 热度:96
my.cnf文件关于组选项的总结: 1、[server]和[mysqld]的区别,没有看到官方文档,个人感觉server指整台服务器,mysqld指实例,当一台服务器上多个实例使用同一个配置文件my.cnf时,[server]通用于所有实例,[mysqld_3306] [[mysqld_3307] [mysqld_3308]对应单[详细]
-
Mysql故障处置
所属栏目:[编程] 日期:2022-03-24 热度:182
要过年了nnd问题也特别多,今天就碰到2个,一个是mysql复制进程往前走但数据不同步,一个是性能问题导致所有写和读的全部阻塞。[@more@] 手下做mysql复制,做好了之后发现read master position在不断移动,但是数据就是不同步。其实稍微理解一点mysql复制中s[详细]
-
MySQL8.0的MGR多主创建与测试
所属栏目:[编程] 日期:2022-03-24 热度:94
环境: 虚拟机VMware, OS:CentOS Linux release 7.3.1611 (Core) 按照下述的单机Mysql8.0的安装方式进行安装完之后,将该机复制两台,分别修改IP为192.168.1.78和192.168.1.78,以及两台新机器配置文件/etc/my.cnf的serverid,还有要去数据路径下删掉auto.[详细]
-
mysql链接很多,批量删掉异常进程processlist
所属栏目:[编程] 日期:2022-03-24 热度:62
正常情况发现一个进程异常的话。。 可以通过kill id 的方式杀掉进程 但是 如果 大批量的访问 删除方式 手工就杀不过来 处理方式(通过mysql -e 的方式得到异常的id,然后通过xargs命令传值给mysqladmin) 如果是生产环境 mysql -udba -p**** -h 192.1.1.1 -P[详细]
-
MySQL slave 延缓一列 外键检测和自增加锁
所属栏目:[编程] 日期:2022-03-24 热度:148
本文没有太多可读性,完全是自己的笔记 一、现象 延迟大,大事物。 表结构 MySQL:slave 延迟一列 外键检查和自增加锁 image.png 无IO MySQL:slave 延迟一列 外键检查和自增加锁 image.png SQL THREAD占用CPU 100% 二、pscak 采样 采样30个点 外键检查 占70[详细]
-
MySQL复制滞后、延迟问题及处理方法
所属栏目:[编程] 日期:2022-03-24 热度:77
确认复制延迟的方法 Slave_IO_Running: Yes Slave_SQL_Running: Yes 确认一下两个线程是否运行,如果没有正常运行,确认一下错误日志里面的内容,然后使其运行。 接下来需要确认,是否 Master_log_file Relay_Master_Log_File Read_Master_Log_Pos Exec_Mast[详细]
-
ERROR 1290 HY000 解决方法
所属栏目:[编程] 日期:2022-03-24 热度:172
select * into outfile /home/update_testdbtest.txt from update_test; ERROR 1290 (HY000): The MySQL server is running with the --secure-file-priv option so it cannot execute this statement mysql select * from update_test; +------+-------+ |[详细]
-
MSSQL数据库ndf文件大小变为0KB数据恢复步骤
所属栏目:[编程] 日期:2022-03-24 热度:122
MSSQL数据库ndf文件大小变为0KB数据恢复步骤: 一、故障描述 成都某客户,存储损坏,数据库崩溃。重组存储,恢复数据库文件,发现有四个ndf文件大小变为0 KB。数据库大小约80TB。数据库中有1223个文件,数据库每10天生成一个NDF文件,每个NDF大约500GB,数据[详细]
-
MYSQL order by排序导致效率低小优化
所属栏目:[编程] 日期:2022-03-23 热度:140
有一个主表left join 同一个小表两次分页语句,因为order by 导致执行时做排序,从执行计划中Using filesort ,以及profile中creating sort index 耗时可以看出。 从trace文件可以看出filesort的计算: join_execution: { select#: 1, steps: [ { filesort_i[详细]