|
Rozmiar: 3895
Komentarz: aktualizacja, dodanie stałych elementów, dodanie notatek odnośnie do backup/restore
|
Rozmiar: 7061
Komentarz: poprawki przy instalacji nowej bazy - skrypty startowe, katalogi, uprawnienia
|
| Usunięcia zostały oznaczone w ten sposób. | Dodatki zostały oznaczone w ten sposób. |
| Linia 24: | Linia 24: |
| Warto skorzystać z instrkcji opisanych przez [[http://www.unixmen.com/migrate-from-mysql-to-mariadb-in-freebsd/|unixmena|target="_blank"]] | Warto skorzystać z instrukcji opisanych przez [[http://www.unixmen.com/migrate-from-mysql-to-mariadb-in-freebsd/|unixmena|target="_blank"]] |
| Linia 52: | Linia 52: |
| zfs create sys/data/v/db/mysql/logs | zfs create -o compress=lzma -o recordsize=128k sys/data/v/db/mysql/logs zfs create sys/data/v/db/log/mysql |
| Linia 58: | Linia 60: |
| chown mysql:mysql /var/db/mysql su -m mysql -c /usr/local/bin/mysql_install_db }}} = Backup baz adanych = |
chown mysql:mysql /var/db/mysql /var/log/mysql /usr/local/bin/mysql_install_db --basedir=/usr/local/ --user=mysql --datadir=/var/db/mysql/ }}} = Backup baz danych = |
| Linia 84: | Linia 86: |
| = Konfiguracja mySQL - my.cnf = Plik jest wczytywany z katalogu `/var/db/mysql/` {{{ [client] port = 3306 socket = /tmp/mysql.sock [mysqld_safe] socket = /tmp/mysql.sock #nice = 5 # --- definicje dla mySQL daemon ----------------------------------- # [mysqld] user = mysql socket = /tmp/mysql.sock port = 3306 tmpdir = /var/tmp/mysql ###language = /usr/local/share/mysql/english lc-messages-dir = /usr/local/share/mysql back_log = 50 skip-external-locking skip-innodb_doublewrite ft_min_word_len = 3 character_set_filesystem = binary character_set_server = utf8 bind-address = 127.0.0.1 skip-name-resolve log-queries-not-using-indexes = 1 slow_query_log = 1 long_query_time = 3 slow_query_log_file = /var/log/mysql/slow-queries.log max_connections = 550 wait_timeout = 150 interactive_timeout = 300 innodb_file_per_table = 1 default-storage-engine = innodb innodb_data_file_path=ibdata1:512M;ibdata2:512M;ibdata3:256M:autoextend innodb_log_group_home_dir=logs/ innodb_buffer_pool_size = 512M innodb_autoextend_increment = 128 innodb_thread_concurrency=16 innodb_log_buffer_size=8M innodb_additional_mem_pool_size=128M innodb_flush_log_at_trx_commit=1 innodb_autoinc_lock_mode=0 innodb_write_io_threads = 8 innodb_read_io_threads = 8 innodb-log-file-size = 512M innodb-flush-method = O_DIRECT innodb-doublewrite = FALSE max_allowed_packet = 8M max_heap_table_size = 128M key_buffer_size = 4M read_buffer_size = 1M read_rnd_buffer_size = 1M sort_buffer_size = 8M join_buffer_size = 2M thread_stack = 512K thread_cache_size = 8 thread_concurrency = 16 query_cache_type = 1 query_cache_size = 30M query_cache_limit = 8M tmp_table_size = 128M table_cache = 32K table_definition_cache = 32K read_rnd_buffer_size = 1M query_cache_min_res_unit = 2K thread_concurrency=16 #read_buffer_size = 4M #innodb_log_file_size=1024M #key_buffer = 8M #key_buffer_size = 64M #sort_buffer_size = 128M #join_buffer_size = 128M #query_cache_wlock_invalidate = 1 #delay_key_write = ALL [mysqldump] quick quote-names max_allowed_packet = 64M [mysql] no-auto-rehash [isamchk] key_buffer = 32M [myisamchk] ft_min_word_len=3 }}} Więcej przykładów konfiguracji można znaleźć w katalogu `/usr/local/share/mysql/` - pliki `my-*.cnf`. |
|
| Linia 111: | Linia 214: |
| * [[http://www.justincarmony.com/blog/2011/04/06/restoring-large-mysql-dump-900-million-rows/||trget="_blank"]] * [[https://scriptingmysql.wordpress.com/2013/07/18/mysql-creating-and-restoring-database-backups-with-mysqldump-and-mysql-enterprise-backup-part-1-of-2/||trget="_blank"]] |
1. [[http://www.justincarmony.com/blog/2011/04/06/restoring-large-mysql-dump-900-million-rows/||target="_blank"]] 1. [[https://scriptingmysql.wordpress.com/2013/07/18/mysql-creating-and-restoring-database-backups-with-mysqldump-and-mysql-enterprise-backup-part-1-of-2/||target="_blank"]] 1. [[http://www.sysadmin-cookbook.net/mysql/||target="_blank"]] 1. [[http://vitobotta.com/painless-hot-backups-mysql-live-databases-percona-xtrabackup/||target="_blank"]] 1. [[http://en.latindevelopers.com/ivancp/|blog poświęcony mySQLowi|target="_blank"]] 1. [[http://haydenjames.io/mysql-query-cache-size-performance/|mySQL tuning: query cache|target="_blank"]] |
Spis Treści
Baza danych mySQL
Jeżeli to ma być mySQL (chociaż złośliwi mówią, że Oracle zabije mySQLa), to korzystamy z własnego repozytorium pakietów instalujemy serwer:
pkg install -y databases/mysql55-server
MariaDB
Jeżeli jednak chcemy się przesiąść na mariadb, to są istotne zmiany.
Modyfikacja /etc/make/make.local.conf
Komentujemy chęć skorzystania z mySQLa:
#WANT_MYSQL_VER= 55
#WITH_MYSQL_VER= 55
Trzeba też to zrobić w pliku /etc/make/make.ports-flags.conf.
Warto skorzystać z instrukcji opisanych przez unixmena
Jedna tylko modyfikacja dotycząca kodowania:
cd /usr/ports/databases/mariadb-client
make WITH_CHARSET=utf8 WITH_XCHARSET=all WITH_COLLATION=utf8_general_ci all install clean
cd /usr/ports/databases/mariadb-server
make WITH_CHARSET=utf8 WITH_XCHARSET=all WITH_COLLATION=utf8_general_ci all install clean
phpMyAdmin
Korzystając z własnego repozytorium pakietów instalujemy panel administracyjny:
pkg install -y databases/phpmyadmin
Konfiguracja PMA
W pliku konfiguracyjnym (domyślnie jest pusty) należy dopisać:
$cfg['blowfish_secret'] = 'losowy ciąg znakow wygenerowany z apg';
Ustawienie katalogu z bazami
Korzystając z podziału na partycje zfs trzeba utworzyć następujące partycje:
# jesli jest partycja zfs, to utworzenie oddzielnego dataset
zfs create -o compression=off -o primarycache=metadata -o recordsize=16K sys/data/v/db/mysql
zfs create -o compress=lzma -o recordsize=128k sys/data/v/db/mysql/logs
zfs create sys/data/v/db/log/mysql
# jesli na partycji zwyklej, to utworzenie katalogu
mkdir -p /var/db/mysql
# ustawienie uprawnien
chown mysql:mysql /var/db/mysql /var/log/mysql
/usr/local/bin/mysql_install_db --basedir=/usr/local/ --user=mysql --datadir=/var/db/mysql/
Backup baz danych
Kopie baz danych wykonuje skrypt periodic z repozytorium skryptów. Skrypt to 502.mysql.
Ustawienia periodic.conf
# --- backup MySQLa ---------------------------------------------- # daily_mysql_backup_enable="YES" daily_mysql_backupdir="/opt/backups/mysql" daily_mysql_savedays="21" daily_mysql_dump_subdirs="YES" daily_mysql_dump_dflt_charset="DATABASE" daily_mysql_dump_args_add="" daily_mysql_dump_exclude="performance_schema"
Dodatkowo ustawienie dot. użytkownika oraz hasła do backupu:
daily_mysql_dump_user="uzytkownik" daily_mysql_dump_pass="HasloDoBackupu"
Konfiguracja mySQL - my.cnf
Plik jest wczytywany z katalogu /var/db/mysql/
[client] port = 3306 socket = /tmp/mysql.sock [mysqld_safe] socket = /tmp/mysql.sock #nice = 5 # --- definicje dla mySQL daemon ----------------------------------- # [mysqld] user = mysql socket = /tmp/mysql.sock port = 3306 tmpdir = /var/tmp/mysql ###language = /usr/local/share/mysql/english lc-messages-dir = /usr/local/share/mysql back_log = 50 skip-external-locking skip-innodb_doublewrite ft_min_word_len = 3 character_set_filesystem = binary character_set_server = utf8 bind-address = 127.0.0.1 skip-name-resolve log-queries-not-using-indexes = 1 slow_query_log = 1 long_query_time = 3 slow_query_log_file = /var/log/mysql/slow-queries.log max_connections = 550 wait_timeout = 150 interactive_timeout = 300 innodb_file_per_table = 1 default-storage-engine = innodb innodb_data_file_path=ibdata1:512M;ibdata2:512M;ibdata3:256M:autoextend innodb_log_group_home_dir=logs/ innodb_buffer_pool_size = 512M innodb_autoextend_increment = 128 innodb_thread_concurrency=16 innodb_log_buffer_size=8M innodb_additional_mem_pool_size=128M innodb_flush_log_at_trx_commit=1 innodb_autoinc_lock_mode=0 innodb_write_io_threads = 8 innodb_read_io_threads = 8 innodb-log-file-size = 512M innodb-flush-method = O_DIRECT innodb-doublewrite = FALSE max_allowed_packet = 8M max_heap_table_size = 128M key_buffer_size = 4M read_buffer_size = 1M read_rnd_buffer_size = 1M sort_buffer_size = 8M join_buffer_size = 2M thread_stack = 512K thread_cache_size = 8 thread_concurrency = 16 query_cache_type = 1 query_cache_size = 30M query_cache_limit = 8M tmp_table_size = 128M table_cache = 32K table_definition_cache = 32K read_rnd_buffer_size = 1M query_cache_min_res_unit = 2K thread_concurrency=16 #read_buffer_size = 4M #innodb_log_file_size=1024M #key_buffer = 8M #key_buffer_size = 64M #sort_buffer_size = 128M #join_buffer_size = 128M #query_cache_wlock_invalidate = 1 #delay_key_write = ALL [mysqldump] quick quote-names max_allowed_packet = 64M [mysql] no-auto-rehash [isamchk] key_buffer = 32M [myisamchk] ft_min_word_len=3
Więcej przykładów konfiguracji można znaleźć w katalogu /usr/local/share/mysql/ - pliki my-*.cnf.
Odzyskiwanie backupów
Tutaj jest największy problem. Chodzi głównie o fakt budowania indeksów, sprawdzania odwołań ("foreign keys") itd. Można to nieco przyspieszyć.
Wyłączenie kontroli na czas odzyskiwania backupu
Należy podać takie polecenia:
SET AUTOCOMMIT=0; SET UNIQUE_CHECKS=0; SET FOREIGN_KEY_CHECKS=0;
Zaś na końcu wszystko przywrócić:
SET AUTOCOMMIT=1; SET UNIQUE_CHECKS=1; SET FOREIGN_KEY_CHECKS=1; COMMIT;
Podział backupów: struktura oraz dane
Podczas tworzenia backupów należy oddzielnie utworzyć backup ze strukturą danych, a oddzielnie z samymi danymi.
Pozostałe sposoby
Inne sposoby są podane w linkach poniżej.
Źródła w sieci internet
http://www.justincarmony.com/blog/2011/04/06/restoring-large-mysql-dump-900-million-rows/
http://vitobotta.com/painless-hot-backups-mysql-live-databases-percona-xtrabackup/
(c) 2004 - 2026 BSD Serwis Krzysztof Stryjek. W przypadku błędów, poprawek proszę kontaktować się z administratorem wiki.
