6-13MySQL

2. DBA职业规划

2.1 需要学习的内容

(1)MySQL 5.7 安装部署(二进制)*****

编译自己扩展

(2)MySQL升级步骤扩展 ***

(3)MySQL5.7 体系结构原理 *****

(4)MySQL基础管理  *****

(5)基础SQL语句使用 *****

(6)SQL高级应用  ***

(7)Information_schema获取元数据 ***

(8)索引、执行计划管理(基础优化)*****

(9)存储引擎  *****

(10)日志管理 *****

(11)备份与恢复 ******

(12)主从复制及架构演变 ******

(13)传统的高可用及读写分离(MHA&Atlas)****

(14)传统分布式架构设计与实现-扩展(Mycat--->DBLE,DRDS)**

(15)MySQL 5.7 高可用及分布式架构-扩展(MGR,InnoDB Cluster)***

(16)MySQL优化(安全、性能) ****

(17)MySQL 监控(zabbix、Open-falcon)    ****

(18) RDS(阿里云课程)    *****

额外要会的:

Redis

mongodb

了解:

PG

Oracle

RDBMS ---> NOSQL+RDBMS ---> NoSQL(RDBMS),RDBMS(NoSQL)----> NewSQL (spanner TiDB  PDB)

3、DBA职业素养

3.1、人品

责任-----权利

3.2

3.2.1 严谨

磁带库----->备份软件-----17楼

数据库修改\删除类的命令时 再三考虑,而且要有理论或者实践的支撑

3.2.2 请收起你的好奇心!!!!!

注意规范:

脱库? 华住网(ip root 密码),“脱敏”!!!!!。

学会保护自己!!!

3.3、细心

把最简单的事情做的最漂亮,最专业。

3.4、心态

别惹事,出事别怕事

-----------

职业技能有关:

3.5、熟悉操作系统(精通)

3.6、熟悉公司业务

业务?

产品的功能

用户的行为(热功能,热数据)

3.7、熟悉行业

熟悉行业发展趋势

版本

数据库产品类型

https://db-engines.com/en/ranking

3.8、喜欢数据库

体验很重要

其实成功的门槛并不拥挤,因为大部分人在路上就放弃了。

---oldguo

4. 数据库产品

4.1 什么是数据?

4.2 DBMS 数据库管理系统

RDBMS  : Oracle ,MySQL ,PG,MSSQL

NoSQL  : MongoDB ,Redis ,ES

NEWSQL (分布式): TiDB,Spanner ,AliSQL ,OB ,PolarDB

4.3 MySQL 企业版本GA选择

5.6 : 5.6.34 5.6.36 5.6.38(2017913) 5.6.40

5.7 : 5.7.18 ,20(2017913) ,24 ,(上课版本:5726)

8.0 : 8014, 8015 ,8016

4.4 关于数据库版本面试

你们公司用的什么版本的MySQL?  你在公司干几年了?

4.5 MySQL 5.7.26 二进制版本安装

4.5.1 下载并上传软件至/server/tools

[root@db01 ~]# mkdir -p /server/tools

[root@db01 ~]# cd /server/tools/

[root@db01 /server/tools]# yum install -y lrzsz

[root@db01 /server/tools]# ls

mysql-5.7.26-linux-glibc2.12-x86_64.tar.gz

4.5.2 解压软件

[root@db01 /server/tools]# tar xf mysql-5.7.26-linux-glibc2.12-x86_64.tar.gz

[root@db01 ~]# mkdir /application

[root@db01 /server/tools]# mv mysql-5.7.26-linux-glibc2.12-x86_64  /application/mysql

4.5.3 用户的创建处理原始环境

[root@db01 ~]# yum remove mariadb-libs-5.5.60-1.el7_5.x86_64 -y

[root@db01 ~]# rpm -qa |grep mariadb

[root@db01 ~]# useradd -s /sbin/nologin mysql

4.5.4 设置环境变量

vim /etc/profile

export PATH=/application/mysql/bin:$PATH

[root@db01 ~]# source /etc/profile

[root@db01 ~]# mysql -V

mysql  Ver 14.14 Distrib 5.7.26, for linux-glibc2.12 (x86_64) using  EditLine wrapper

4.5.5 创建数据路径并授权

1. 添加一块新磁盘模拟数据盘

2. 格式化并挂载磁盘

[root@db01 ~]# mkfs.xfs /dev/sdb

[root@db01 ~]# mkdir /data

[root@db01 ~]# blkid

[root@db01 ~]# vim /etc/fstab

[root@db01 ~]# UUID="b21ec3e0-e251-4ded-bc12-2d940f938dd5" /data xfs defaults 0 0

[root@db01 ~]# mount -a

[root@db01 ~]# df -h

3. 授权

[root@db01 ~]# chown -R mysql.mysql /application/*

[root@db01 ~]# chown -R mysql.mysql /data

4.5.6 初始化数据(创建系统数据)

# 5.6 版本 初始化命令  /application/mysql/scripts/mysql_install_db

# 5.7 版本

[root@db01 ~]# mkdir /data/mysql/data -p

[root@db01 ~]# chown -R mysql.mysql /data

[root@db01 ~]# mysqld --initialize --user=mysql --basedir=/application/mysql --datadir=/data/mysql/data

说明:

--initialize 参数:

1. 对于密码复杂度进行定制:12位,4种

2. 密码过期时间:180

3. 给root@localhost用户设置临时密码

报错:

mysqld: error while loading shared libraries: libaio.so.1: cannot open shared object file: No such file or directory

解决:

[root@db01 ~]# yum install -y libaio-devel

[root@db01 ~]# mysqld --initialize --user=mysql --basedir=/application/mysql --datadir=/data/mysql/data

2019-06-13T04:21:27.706564Z 1 [Note] A temporary password is generated for root@localhost: =mrV)_16is4U

--initialize-insecure 参数:

无限制,无临时密码

[root@db01 /data/mysql/data]# \rm -rf /data/mysql/data/*

[root@db01 ~]# mysqld --initialize-insecure --user=mysql --basedir=/application/mysql --datadir=/data/mysql/data

4.5.7 配置文件的准备

cat >/etc/my.cnf <<EOF

[mysqld]

user=mysql

basedir=/application/mysql

datadir=/data/mysql/data

socket=/tmp/mysql.sock

server_id=6

port=3306

[mysql]

socket=/tmp/mysql.sock

EOF

4.5.8 启动数据库

1. sys-v

[root@db01 /etc/init.d]# cp /application/mysql/support-files/mysql.server  /etc/init.d/mysqld

[root@db01 /etc/init.d]# service mysqld restart

2. systemd

注意: sysv方式启动过的话,需要先提前关闭,才能以下方式登录

cat >/etc/systemd/system/mysqld.service <<EOF

[Unit]

Description=MySQL Server

Documentation=man:mysqld(8)

Documentation=http://dev.mysql.com/doc/refman/en/using-systemd.html

After=network.target

After=syslog.target

[Install]

WantedBy=multi-user.target

[Service]

User=mysql

Group=mysql

ExecStart=/application/mysql/bin/mysqld --defaults-file=/etc/my.cnf

LimitNOFILE = 5000

EOF

5. 如何分析处理MySQL数据库无法启动

5.1 without updating PID 类似错误

查看日志:

在哪?

/data/mysql/data/主机名.err

[ERROR] 上下文

可能情况:

/etc/my.cnf 路径不对等

/tmp/mysql.sock文件修改过 或 删除过

数据目录权限不是mysql

参数改错了

6.管理员密码的设定(root@localhost)

[root@db01 ~]# mysqladmin -uroot -p password oldboy123

Enter password:

7. 管理员用户密码忘记了?

7.1 关闭数据库

[root@db01 ~]# /etc/init.d/mysqld stop

Shutting down MySQL.. SUCCESS!

7.2 启动数据库到维护模式

[root@db01 ~]# mysqld_safe --skip-grant-tables --skip-networking &

7.3 登录并修改密码

mysql> alter user root@'localhost' identified by '1';

ERROR 1290 (HY000): The MySQL server is running with the --skip-grant-tables option so it cannot execute this statement

mysql> flush privileges;

mysql> alter user root@'localhost' identified by '1';

Query OK, 0 rows affected (0.01 sec)

7.4 关闭数据库,正常启动验证

8. MySQL体系结构与管理

8.1 MySQL C/S结构介绍 ***

两种连接方式:

TCP/IP:mysql -uroot -poldboy123 -h 10.0.0.51 -P3306

Socket:mysql -uroot -poldboy123 -S /tmp/mysql.sock

8.2 MySQL实例的构成 ***

公司: 老板  +  经理  + 员工 + 办公区

实例: mysqld +  master thread  + 干活的Thread  + 预分配的内存

8.3 MySQL中mysqld服务器进程结构

8.3.1 SQL语句引入

结构化的查询语言

DQL

DDL

DML

DCL

mysql> select user,host from mysql.user;

8.3.2 连接层

(1) 提供连接协议

Socket 

TCPIP

(2) 验证用户名(root@localhost)密码合法性,进行匹配专门的授权表。

(3) 派生一个专用连接线程(接收SQL,返回结果)

  mysql> show processlist;

思考:

忘记密码的参数在哪做的手脚?

--skip-grant-tables 

--skip-networking  

8.3.3 SQL层(优化方面至关重要的)

(1)验证SQL语法和SQL_MODE

(2)验证语义

(3)验证权限

(4)解析器进行语句解析,生成执行计划(解析树)

(5)优化器(各种算法,基于执行代价),根据算法,找到代价最低的执行计划。

代价:CPU  IO  MEM

(6)执行器按照优化器选择执行计划,执行SQL语句,得出获取数据的方法。

(7)提供query cache(默认不开),一般不开,会用redis

(8)记录操作日志(binlog),默认没开

未完待续

8.3.4 存储引擎层

真正和磁盘打交道的一个层次

根据SQL层提供的取数据的方法,拿到数据,返回给SQL,结构化成表,再又连接层线程返回给用户。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,686评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,668评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,160评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,736评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,847评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,043评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,129评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,872评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,318评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,645评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,777评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,470评论 4 333
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,126评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,861评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,095评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,589评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,687评论 2 351

推荐阅读更多精彩内容