[MySQL - Temporary Tablespace]

메모리 부족 이슈 발생시 볼만하다는 소리를 듣고 찾아보게 되었습니다. temporary tablespace는 사용자가 임의적으로 create ~문 등을 사용해 임시 테이블을 생성할 때 undo 로그가 저장된다고 합니다. ■ Temp tablespace ibtmp1 : global temporary tablespace 공간은 사용자가 생성한 임시 테이블의 롤백 세그먼트를 저장합니다. innodb_temp_tablespace_dir : SESSION LEVEL로 ON-DISK 내부 임시테이블이 생성되는 공간 [사용자가 만든 임시 테이블 & 옵티마이저가 사용하는 임시 테이블 ] MariaDB [(none)]> show variables like '%temp%'; +-------------------------..

• format_list_bulleted DataBase Admin/DB Admin
• · 2022. 11. 5.
• textsms

[MySQL - Error 2013/Error 2006]

Error 2013 ■ 에러 발생 데이터 이관 중 export시 발생 [root@localhost data]# mysqldump -u kim-p --routines --triggers --single-transaction kim --events > /dump/dump.sql mysqldump: Error 2013: Lost connection to MySQL server during query when dumping table `***` at row: 167770 ■ 발생 이유 2013은 서버 연결이 끊어 졌음을 의미 1. 누군가 세션을 kill하여 발생할 수 있습니다. 2. 네트워크 문제로 인해 연결이 끊어져서 발생 할 수 있습니다. 3. 서버 내 충돌이 일어나 끊길 수 있습니다. 4. 연결이 유휴 상..

• format_list_bulleted DataBase Admin/Trouble shooting
• · 2022. 10. 18.
• textsms

[MySQL - QPS/TPS]

■ QPS ( Query Per Seconds ) 초당 Query량 즉, MySQL Server가 초당 실행하는 Query 총량을 말합니다. 조회량 /초 는 한서버가 1초에 해당하는 조회 횟수로 특정한 조회 서버가 규정된 시간 내에 처리하는 조회량이 얼마인지에 대한 평가 기준입니다. ※ 계산 방법 Questions = SHOW GLOBAL STATUS LIKE 'Questions'; Uptime = SHOW GLOBAL STATUS LIKE 'Uptime'; QPS=Questions/Uptime MariaDB [(none)]> SHOW GLOBAL STATUS LIKE 'Questions'; +---------------+------------+ | Variable_name | Value | +-----..

• format_list_bulleted DataBase Admin/DB Admin
• · 2022. 10. 18.
• textsms

[MySQL - Character set & Collation]

Character Set이란, 캐릭터 셋을 명시적으로 설정하지 않으면 MySQL 5.7 이하는 latin1, MySQL 8은 utf8mb4 가 된다. 현재 character set 확인은 다음과 같이 mysql 클라이언트로 연결한 후에 status 명령어로 알수 있다. 문자의 집합으로 즉, 텍스트 데이터에 대한 저장공간의 크기를 지정하기 위함이다. 대표적으로는 utf8, euckr 그리고 utf8mb4가 있다. Collation이란, 정렬방식으로 저장된 텍스트 데이터를 정렬할 경우 어떻게 비교하여 정렬할 것인가에 대해 지정하기 위함이다. "ORDER BY 'text' ASC"에 대해 데이터로 a, b, A, B가 있을 경우 어떤 방식으로 비교하여 정렬을 할 것인가를 지정하는 것이다. 주로 많이 사용되는 ..

• format_list_bulleted DataBase Admin/DB Admin
• · 2022. 10. 18.
• textsms

[MySQL - Parameter 정리]

파라미터 설명 Docs URL https://dev.mysql.com/doc/refman/8.0/en/server-option-variable-reference.html MySQL :: MySQL 8.0 Reference Manual :: 5.1.4 Server Option, System Variable, and Status Variable Reference MySQL 8.0 Reference Manual / ... / MySQL Server Administration / The MySQL Server / Server Option, System Variable, and Status Variable Reference 5.1.4 Server Option, System Variable, and Status V..

• format_list_bulleted DataBase Admin/DB Admin
• · 2022. 10. 18.
• textsms

[MySQL - 임시테이블(tmpdir) FULL 이슈]

■ 발생 이슈 ※ 최근 운영 중인 DB(Maria)서버에서 tmpdir 디스크가 100% 되어 DB가 내려갔습니다. [root@jhtest ~]# df -h Filesystem Size Used Avail Use% Mounted on devtmpfs 32G 0 32G 0% /dev 32G 4.0K 32G 1% /dev/shm tmpfs tmpfs 32G 3.1G 29G 10% /run tmpfs 32G 0 32G 0% /sys/ /dev/xvda 48G 0G 48G 100% / [root@jhtest tmpdir]# ll total 23461140 -rw-rw---- 1 mysql mysql 9322496 Oct 13 16:10 #sql_a4a_11.MAD -rw-rw---- 1 mysql mysql 2..

• format_list_bulleted DataBase Admin/Trouble shooting
• · 2022. 10. 18.
• textsms

[MySQL - mysql-proxy] part 2. Read/Write Split & 부하테스트

Master 서버로는 Read & Write 작업을하고 Slave 서버로는 Read 작업을하여 select 쿼리에 대한 부하분산 구성을 하고 sysbench를 이용해 부하테스트를 진행하여 ProxySQL 툴과의 성능 비교를 진행하였습니다. 읽기와 쓰기 분리 기술을 구현하는 방법에는 여러 가지가 있습니다. 읽기 및 쓰기가 분리된 lua 파일이 포함되어 있습니다. 이 파일은 mysql-proxy를 사용하여 읽기 및 쓰기 분리를 달성하는 데 사용해야 하는 파일이기도 합니다. 구문 분석을 위해 lua 파서가 필요합니다. 따라서 루아 파서를 설치해야 합니다. ■ config 파일 생성 [root@mysqlproxy mysql-proxy]# mkdir /usr/local/mysql-proxy/conf/ [root@..

• format_list_bulleted DataBase/MySQL & MariaDB
• · 2022. 9. 27.
• textsms

[MySQL - phpMyAdmin 설치]

phpMyAdmin 은 PHP로 개발 된 오픈소스이고, 웹 기반의 MySQL 관리 툴 입니다. 웹에서 편리하게 DB 관리를 해보기 위해 이번 테스트를 진행했습니다. ■ 사전 mysql db설치 & httpd설치 mysql> select @@version; +-----------+ | @@version | +-----------+ | 8.0.28 | +-----------+ 1 row in set (0.00 sec) [root@myadmin ~]# yum -y install epel-release [root@myadmin ~]# yum -y install httpd ■ php 설치 ※ php설치할 당시 phpMyAdmin을 구동하기 위한 관련 패키지를 진행하지 않은 접속이 불가합니다. 따라서 나머지 php..

• format_list_bulleted DataBase/MySQL & MariaDB
• · 2022. 9. 27.
• textsms

[MySQL - Online DDL] part 1. 알고리즘

Online DDL이란 테이블의 구조를 변경(스키마 변경)을 실행하는 도중에도, INSERT나 UPDATE와 같은 DML들을 실행할 수 있도록 해주는 기능입니다. MySQL 서버에서 Online DDL이 지원되지 않았던 시절에는 pt-online-schema-change와 같은 3-rd party 도구들을 이용해야 했지만, (이런 도구들은 불필요한 작업이 너무 많이 수반되어 서비스 영향도가 높은 편이어서) 이제는 대부분의 경우 MySQL 서버의 Online DDL을 이용합니다. InnoDB에서 지원하는 online ddl 알고리즘 - copy - inplace - instant (mysql 8.0) ■ Copy - 변경된 스키마가 적용된 임시 테이블을 생성하여 기존 테이블의 데이터를 복사한 후 테이블 이..

• format_list_bulleted DataBase/MySQL & MariaDB
• · 2022. 8. 25.
• textsms

[MySQL - 테이블 단편화 optimize/analyze table 정리]

※ analyze table 1. optimizer가 사용하는 통계정보의 갱신처리입니다. 2. InnoDB에서는 자발(자동)적으로 통계 정보를 갱신하기 때문에 크게 필요없다고 합니다. MyISAM의 경우는 카디날리티가 정확하게 갱신되어 있지만 InnoDB는 아주 부정확하고 analyze table을 실행하면 빈번이 값이 바뀐다. InnoDB의 경우 자동으로 갱신되는 조건은 아래와 같다. - 전에 인덱스 통계정보를 갱신한후 테이블의 전체행수의1/16이 갱신된경우 - 전에 인덱스 통계정보를 갱신한후 20억행이상이 갱신된경우 3. analyze table은 랜덤으로 페이지를 8회추출해서 그 페이지내에 포함된 행 데이타를 조사해서 인덱스의 통계정보를 근사치로 갱신한다. 근사치이지만 옵티마이저가 사용하기 위한 통..

• format_list_bulleted DataBase/MySQL & MariaDB
• · 2022. 7. 30.
• textsms