MySQL | Записки системного администратора

Установка и использование Percona XtraBackup

Декабрь 17th, 2015

Evgeniy Kamenev

1.Установка Percona XtraBackup Centos

# yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

1	# yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

# yum install percona-xtrabackup

1	# yum install percona-xtrabackup

Ubuntu Импортируем публичный GPG-ключ

# apt-key adv --keyserver keys.gnupg.net --recv-keys 1C4CBDCDCD2EFD2A

1	# apt-key adv --keyserver keys.gnupg.net --recv-keys 1C4CBDCDCD2EFD2A

Добавляем репозитарий Percona

# echo "deb http://repo.percona.com/apt "$(lsb_release -sc)" main" | tee /etc/apt/sources.list.d/percona.list

1	# echo "deb http://repo.percona.com/apt "$(lsb_release -sc)" main" \| tee /etc/apt/sources.list.d/percona.list

Проверяем,что добавился новый репозитарий

# cat  /etc/apt/sources.list.d/percona.list

1	# cat /etc/apt/sources.list.d/percona.list

deb http://repo.percona.com/apt trusty main

1	deb http://repo.percona.com/apt trusty main

Обновляем локальный кеш и устанавливаем пакет

# apt-get update && apt-get install percona-xtrabackup

1	# apt-get update && apt-get install percona-xtrabackup

Также можно скачать конкретную версию Percona XtraBackup для требуемой операционной системы с официального сайта Percona

https://www.percona.com/downloads/XtraBackup/

1	https://www.percona.com/downloads/XtraBackup/

Update: Установка XtraBackup-2.4 на Ubuntu/Debian

# wget https://repo.percona.com/apt/percona-release_0.1-4.$(lsb_release -sc)_all.deb

1	# wget https://repo.percona.com/apt/percona-release_0.1-4.$(lsb_release -sc)_all.deb

# dpkg -i percona-release_0.1-4.xenial_all.deb

1	# dpkg -i percona-release_0.1-4.xenial_all.deb

# apt-get update

1	# apt-get update

# apt-get install percona-xtrabackup-24

1	# apt-get install percona-xtrabackup-24

[…]

Опубликовано в рубрике Centos, Debian/Ubuntu, MySQL, MySQL, Other

Метки: backup, innobackupex, mysql, Percona, Percona XtraBackup

Комментарии отключены

Установка и использование Percona Toolkit

Декабрь 13th, 2015

Evgeniy Kamenev

Установка Percona Toolkit Debian/Ubuntu

# wget https://repo.percona.com/apt/percona-release_0.1-4.$(lsb_release -sc)_all.deb

1	# wget https://repo.percona.com/apt/percona-release_0.1-4.$(lsb_release -sc)_all.deb

# dpkg -i percona-release_0.1-4.$(lsb_release -sc)_all.deb

1	# dpkg -i percona-release_0.1-4.$(lsb_release -sc)_all.deb

# apt-get update

1	# apt-get update

# apt-get install percona-toolkit

1	# apt-get install percona-toolkit

Centos

# yum install perl-IO-Socket-SSL perl-Digest-MD5 perl-TermReadKey

1	# yum install perl-IO-Socket-SSL perl-Digest-MD5 perl-TermReadKey

# yum install http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm

1	# yum install http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm

# yum install percona-toolkit

1	# yum install percona-toolkit

pt-variable-advisor

1	pt-variable-advisor

Анализ переменных MySQL(на основе SHOW VARIABLES) и вывод рекомендаций

# pt-variable-advisor localhost

1	# pt-variable-advisor localhost

pt-query-digest

1	pt-query-digest

Анализ slow-log,списка процессов(show processlist) или tcpdump 1)Отчет самых медленных запросов из файла

# pt-query-digest /var/log/mysql/mysql-slow.log

1	# pt-query-digest /var/log/mysql/mysql-slow.log

2)Отчет самых медленных запросов из списка процессов

# pt-query-digest --processlist h=127.0.0.1

1	# pt-query-digest --processlist h=127.0.0.1

Либо через анализ tcpdump

# tcpdump -s 65535 -x -nn -q -tttt -i any -c 10 port 3306 > mysql.tcp.txt

1	# tcpdump -s 65535 -x -nn -q -tttt -i any -c 10 port 3306 > mysql.tcp.txt

# pt-query-digest --type tcpdump mysql.tcp.txt

1	# pt-query-digest --type tcpdump mysql.tcp.txt

pt-ioprofile

1	pt-ioprofile

Просмотр […]

Опубликовано в рубрике Centos, Debian/Ubuntu, MySQL, MySQL, Other

Метки: mysql, Percona, percona toolkit

Комментарии отключены

Установка и настройка Percona XtraDB Cluster на Centos7/Ubuntu14

Декабрь 11th, 2015

Evgeniy Kamenev

Разработчик продукта рекомендует использовать минимум 3 ноды для создания кластера(причины описаны в статье). С целью знакомства с этим продуктом использовалось две ноды на виртуальных машинах. 1.Установка Percona XtraDB Cluster Centos

# yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

1	# yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

Подключаем EPEL-репозитарий(если он еще не был подключен)

# rpm -Uvh http://dl.fedoraproject.org/pub/epel/7/x86_64/e/epel-release-7-5.noarch.rpm

1	# rpm -Uvh http://dl.fedoraproject.org/pub/epel/7/x86_64/e/epel-release-7-5.noarch.rpm

Устанавливаем пакет, необходимій для Percona XtraDB Cluster

# yum install socat

1	# yum install socat

Устанавливаем PXC

# yum install Percona-XtraDB-Cluster-56

1	# yum install Percona-XtraDB-Cluster-56

Отклчаем SELinux, если он […]

Опубликовано в рубрике Centos, Debian/Ubuntu, Highload, MySQL, MySQL

Метки: mysql, Percona, Percona XtraDB Cluster, replication, wsrep

Комментарии отключены

Установка и настройка Holland для бекапа MySQL-баз данных на Centos/Ubuntu

Сентябрь 5th, 2015

Evgeniy Kamenev

1.Установка Holland на Centos(предварительно нужно подключить Epel-репозитарий)

# yum install holland holland-mysqldump

1	# yum install holland holland-mysqldump

2.Установка Holland на Ubuntu Версию Ubuntu заменяем согласно установленной

# cat /etc/issue

1	# cat /etc/issue

Ubuntu 14.04.3 LTS \n \l Т.е вместо

wget http://download.opensuse.org/repositories/home:/holland-backup/xUbuntu_XX.XX/Release.key -O - | sudo apt-key add –

1	wget http://download.opensuse.org/repositories/home:/holland-backup/xUbuntu_XX.XX/Release.key -O - \| sudo apt-key add –

выполняем

wget http://download.opensuse.org/repositories/home:/holland-backup/xUbuntu_14.04/Release.key -O - | sudo apt-key add –

1	wget http://download.opensuse.org/repositories/home:/holland-backup/xUbuntu_14.04/Release.key -O - \| sudo apt-key add –

# nano /etc/apt/sources.list.d/holland.list

1	# nano /etc/apt/sources.list.d/holland.list

deb http://download.opensuse.org/repositories/home:/holland-backup/xUbuntu_14.04/ ./

1	deb http://download.opensuse.org/repositories/home:/holland-backup/xUbuntu_14.04/ ./

# apt-get update

1	# apt-get update

# apt-get install holland-common holland-mysqldump

1	# apt-get install holland-common holland-mysqldump

Настройка Holland (одинакова для обоих операционных систем) 3.Настройка основного конфигурационного файла Holland

# cat /etc/holland/holland.conf | grep -v ^$ | grep -v \#

1	# cat /etc/holland/holland.conf \| grep -v ^$ \| grep -v \#

[holland]

plugin_dirs = /usr/share/holland/plugins

# Место хранения бекапов

backup_directory = /backup/databases

#имя должно совпадать с названием файла без расширения .conf в папке /etc/holland/backupsets/

backupsets = <strong>mysqldump</strong>

umask = 0007

path = /usr/local/bin:/usr/local/sbin:/bin:/sbin:/usr/bin:/usr/sbin

[logging]

filename = /var/log/holland/holland.log

level = info

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

[holland]

plugin_dirs = /usr/share/holland/plugins

# Место хранения бекапов

backup_directory = /backup/databases

#имя должно совпадать с названием файла без расширения .conf в папке /etc/holland/backupsets/

backupsets = <strong>mysqldump</strong>

umask = 0007

path = /usr/local/bin:/usr/local/sbin:/bin:/sbin:/usr/bin:/usr/sbin

[logging]

filename = /var/log/holland/holland.log

level = info

[…]

Опубликовано в рубрике Centos, Debian/Ubuntu, MySQL, MySQL

Метки: backup, holland, mysql

Комментарии отключены

Установка и настройка mysql-mmm-кластера(MySQL Master-Master replication Manager) на Centos

Декабрь 28th, 2013

Evgeniy Kamenev

Инструмент управления тиражированием с несколькими основными репликами (MultiMaster replication Manager) использует для репликации традиционный механизм “master-slave”. Он работает на основе набора серверов MySQL с, как минимум, двумя основными репликами с набором подчиненных реплик, а также с выделенным узлом мониторинга. Поверх этого набора узлов настраивается пул IP-адресов, который MMM может динамически перемещать от узла к узлу, […]

Опубликовано в рубрике Centos, Highload, MySQL, MySQL

Метки: mysql-mmm

Комментарии отключены

Настройка MySQL-репликации master-master на Centos

Декабрь 18th, 2013

Evgeniy Kamenev

Server1 - 192.168.1.110 centos641vz110.kama.dnsalias.com - первый сервер

1	Server1 - 192.168.1.110 centos641vz110.kama.dnsalias.com - первый сервер

Server2 - 192.168.1.111 centos641vz111.kama.dnsalias.com - второй сервер.

1	Server2 - 192.168.1.111 centos641vz111.kama.dnsalias.com - второй сервер.

Второй сервер — зеркало первого, который должен реплицировать все с первого, а также передавать ему свои изменения. Просматриваем все файлы, установленные пакетом Percona-Server

# rpm -ql Percona-Server-server-55-5.5.34-rel32.0.591.rhel6.i686 | less

1	# rpm -ql Percona-Server-server-55-5.5.34-rel32.0.591.rhel6.i686 \| less

Копируем конфиг соответствующий Вашим аппаратным ресурсам

# cp /usr/share/doc/Percona-Server-server-55-5.5.34/my-large.cnf /etc/my.cnf

1	# cp /usr/share/doc/Percona-Server-server-55-5.5.34/my-large.cnf /etc/my.cnf

# mkdir /var/log/mysql

1	# mkdir /var/log/mysql

# chown -R mysql:mysql /var/log/mysql/

1	# chown -R mysql:mysql /var/log/mysql/

Настраиваем репликацию на первом сервере 1.Настраиваем Mysql на первом сервере

# nano /etc/my.cnf

1	# nano /etc/my.cnf

pid_file = /var/lib/mysql/centos641vz110.kama.dnsalias.com.pid
log_error = /var/log/mysql/centos641vz110.kama.dnsalias.com.err

log-bin=/var/log/mysql/centos641vz110-bin.log
log-bin-index=/var/log/mysql/centos641vz110-bin.index

binlog_format=mixed

auto_increment_offset = 1
auto_increment_increment = 2

server-id       = 1

relay-log = /var/log/mysql/centos641vz110-relay-bin
relay-log-index = /var/log/mysql/centos641vz110-relay-bin.index

log-slave-updates = 1

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

pid_file = /var/lib/mysql/centos641vz110.kama.dnsalias.com.pid

log_error = /var/log/mysql/centos641vz110.kama.dnsalias.com.err

log-bin=/var/log/mysql/centos641vz110-bin.log

log-bin-index=/var/log/mysql/centos641vz110-bin.index

binlog_format=mixed

auto_increment_offset = 1

auto_increment_increment = 2

server-id = 1

relay-log = /var/log/mysql/centos641vz110-relay-bin

relay-log-index = /var/log/mysql/centos641vz110-relay-bin.index

log-slave-updates = 1

Логи смотрим

# tail -f /var/log/mysql/centos641vz110.kama.dnsalias.com.err

1	# tail -f /var/log/mysql/centos641vz110.kama.dnsalias.com.err

[…]

Опубликовано в рубрике Centos, Highload, MySQL, MySQL

Метки: mysql

Комментарии отключены

Установка MariaDB вместо MySQL на Centos

Декабрь 6th, 2013

Evgeniy Kamenev

Генерируем свой репозитарий https://downloads.mariadb.org/mariadb/repositories/#mirror=nucleus Создаем репозитарий (например, Centos6 64bit)

# nano /etc/yum.repos.d/MariaDB.repo

1	# nano /etc/yum.repos.d/MariaDB.repo

[mariadb]
name = MariaDB
baseurl = http://yum.mariadb.org/5.5/centos6-amd64
gpgkey=https://yum.mariadb.org/RPM-GPG-KEY-MariaDB
gpgcheck=1

1

2

3

4

5

[mariadb]

name = MariaDB

baseurl = http://yum.mariadb.org/5.5/centos6-amd64

gpgkey=https://yum.mariadb.org/RPM-GPG-KEY-MariaDB

gpgcheck=1

# yum update

1	# yum update

В процессе обновления конфликтующие библиотеки от mysql будут автоматически замещены Устанавливаем непосредственно сервер и клиент

# yum install MariaDB-server MariaDB-client

1	# yum install MariaDB-server MariaDB-client

Запускаем MySQL

# /etc/init.d/mysql start

1	# /etc/init.d/mysql start

Проводим базовую настройку

# mysql_secure_installation

1	# mysql_secure_installation

Добавление mysql в автозагрузку

# chkconfig --level 2345 mysql on

1	# chkconfig --level 2345 mysql on

Опубликовано в рубрике Centos, Linux/Unix General, MySQL, MySQL

Метки: MariaDB, mysql

Комментарии отключены

Настройка MySQL-репликации master-slave на Centos

Декабрь 6th, 2013

Evgeniy Kamenev

Настройка MySQL-репликации master—slave на Centos

Master(192.168.1.39) - centos642.kama.dnsalias.com
Slave(192.168.1.50) - centos64raidlvm.kama.dnsalias.com

1 2	Master(192.168.1.39) - centos642.kama.dnsalias.com Slave(192.168.1.50) - centos64raidlvm.kama.dnsalias.com

На главном сервере(master) 1.В my.cnf в секции [mysqld] включаем ведение двоичного(бинарного) журнала

# nano /etc/my.cnf

1	# nano /etc/my.cnf

[mysqld]
server-id = 39
log-bin = centos642-bin
relay-log = /var/log/mysql/centos642-relay-bin
relay-log-index = /var/log/mysql/centos642-bin.index

1

2

3

4

5

[mysqld]

server-id = 39

log-bin = centos642-bin

relay-log = /var/log/mysql/centos642-relay-bin

relay-log-index = /var/log/mysql/centos642-bin.index

# mkdir /var/log/mysql

1	# mkdir /var/log/mysql

# chown -R mysql:mysql /var/log/mysql/

1	# chown -R mysql:mysql /var/log/mysql/

2.Перезапускаем MySQL

# /etc/init.d/mysqld restart

1	# /etc/init.d/mysqld restart

3. Создаем учетную запись для подключения с Slave сервера. т.е наделяем пользователя repluser подключающегося с подчиненного сервера с паролем replpassword правом читать информацию из двоичных журналов […]

Опубликовано в рубрике Centos, Highload, MySQL, MySQL

Метки: mysql, replicaton, slave

Комментарии отключены

MySQL — полезные мелочи

Ноябрь 29th, 2013

Evgeniy Kamenev

Оптимизация параметров Mysql с помощью скриптов Mysqltuner Mysqlprimer 1. mysqltuner.pl (http://blog.mysqltuner.com/) 2. tuning-primer.sh (http://www.day32.com/MySQL/) Логирование медленных запросов + запросов не использующих индексы

[mysqld]

# логгируем запросы длиннее 5 секунд
long_query_time = 5
log-slow-queries = /var/log/mysqld-slow-query.log
# логгируем запросы, не использующие индексы
log-queries-not-using-indexes

1

2

3

4

5

6

7

[mysqld]

# логгируем запросы длиннее 5 секунд

long_query_time = 5

log-slow-queries = /var/log/mysqld-slow-query.log

# логгируем запросы, не использующие индексы

log-queries-not-using-indexes

Увеличение количества открытых MySQL файлов Часто при использовании Inndb MySQL открывает очень много файлов и сваливается, т.к. упирается в лимит (1024 открытых файла). Текущее использование открытых файлов можно узнать так: […]

Опубликовано в рубрике MySQL, MySQL

Метки: mysql

Комментарии отключены

Синхронизация MySQL slave-серверов с active master-сервером с помощью Percona-toolkit

Ноябрь 25th, 2013

Evgeniy Kamenev

Установка Percona-toolkit на Centos 6 http://www.percona.com/downloads/ Отсюда загружаем пакет percona-toolkit-XXXXX. noarch.rpm

# yum install perl-IO-Socket-SSL

1	# yum install perl-IO-Socket-SSL

# rpm -ihv percona-toolkit-2.2.5-2.noarch.rpm

1	# rpm -ihv percona-toolkit-2.2.5-2.noarch.rpm

1.Определяем активный master-сервер баз данных Ssh lb01.domain.com/lb02.domain.com

lb01 ~ # mmm_control show | grep writer

1	lb01 ~ # mmm_control show \| grep writer

db02(XXX.XXX.XXX.XXX) master/ONLINE. Roles: writer(yyy.yyy.yyy.yyy)

1	db02(XXX.XXX.XXX.XXX) master/ONLINE. Roles: writer(yyy.yyy.yyy.yyy)

2.На активном мастер сервере (ssh db02.domain.com) Проверка конкретной таблицы(например, mybase.mytable) на наличие рассинхронизации с мастером(есть ли Errors или DIFFS отличны от нуля)

db02 ~ # pt-table-checksum --no-check-binlog-format --databases mybase --tables mytable

1	db02 ~ # pt-table-checksum --no-check-binlog-format --databases mybase --tables mytable

…………………………………………………………………………………………………
TS ERRORS  DIFFS     ROWS  CHUNKS SKIPPED    TIME TABLE
11-24T21:34:16      0      1    69650       4       0   0.482 mybase.mytable

1

2

3

…………………………………………………………………………………………………

TS ERRORS DIFFS ROWS CHUNKS SKIPPED TIME TABLE

11-24T21:34:16 0 1 69650 4 0 0.482 mybase.mytable

3.Проверка, какие именно slave-сервера имеют проблемы […]

Опубликовано в рубрике Centos, MySQL, MySQL

Метки: mysql, Percona, pt-table-checksum, pt-table-sync, toolkit

Комментарии отключены

Архивы рубрики ‘MySQL’

Установка и использование Percona XtraBackup

Установка и использование Percona Toolkit

Установка и настройка Percona XtraDB Cluster на Centos7/Ubuntu14

Установка и настройка Holland для бекапа MySQL-баз данных на Centos/Ubuntu

Установка и настройка mysql-mmm-кластера(MySQL Master-Master replication Manager) на Centos

Настройка MySQL-репликации master-master на Centos

Установка MariaDB вместо MySQL на Centos

Настройка MySQL-репликации master-slave на Centos

MySQL — полезные мелочи

Синхронизация MySQL slave-серверов с active master-сервером с помощью Percona-toolkit

Страницы

Свежие записи

Архивы

Рубрики

Админ-панель