MySQL 이노디비 튜닝 포인트 관련된것 > 리눅스서버
리눅스서버

MySQL 이노디비 튜닝 포인트 관련된것

조회 2,390회 댓글 0건
  • 현재 페이지 주소 복사
  • 페이스북으로 공유
  • X 로  공유
  • 트위터로  공유
  • 네이버 블로그로 공유
  • 네이버 카페 공유하기
  • 네이버 라인 공유하기
  • 네이버 밴드 공유하기
  • 링크드인으로 공유하기

● innodb_buffer_pool_chunk_size

기본값은 128M 이며 버풀 사이즈를 결정하는데 역활을 한다.

코어수가 적다면 이 값을 늘려서 버퍼풀의 크기를 늘려 줘야 한다는 논리가 발생 한다.

예를 들면 4G 인경우 코어가 1개 이면 - 인스턴스는 2개로 설정이 된다.

이것을 512M로 잡으면 버퍼풀의 크기는 1G가 된다. - 1G로 잡으면 버퍼풀의 크기는 2G


● innodb_buffer_pool_size

- 디스크 액세스를 줄이기 위한 캐쉬 역활. 로그파일 기록 순서 조정 역활

- 비어 있는 메모리의 60% 정도를 할당 하는것을 권장 한다.

- 메모리가 크게 할당 되어 있다면 인메모리 처럼 이노디비가 작동 한다.

- 색인 처리가 잘 되었는데 슬로우 쿼리가 있다면 이 버퍼풀 크기를 확인해 보는게 좋다.

- 참고할것은

innodb_buffer_pool_size = innodb-buffer-pool-instances * innodb_buffer_pool_chunk_size 

이와 같지 않게 구성한다면 버퍼 풀 크기는 자동으로 innodb-buffer-pool-instances * innodb_buffer_pool_chunk_size와 

같거 조정이 되거나 시스템에 의해 자동 적용 된다.

즉, 코어수가 적다면 인스턴수 지정 수치가 작아지므로 청크사이즈 값을 늘려 한다는 것이 된다.


● innodb_log_file_size

- 버퍼풀의 25%가 적당 하다. 즉, 버퍼풀의 사이즈가 2G 이면 이건 512 정도가 적당 하다는 것이다. 

- 여기서 무조건 25% 설정이 아니라. 256M 이상 크게 되면 충돌 발생시 복구 하는데 오래걸린다고 최대값을 256M로 하는것을 권장 한다. 

- 최신의 것을 확인해볼 필요가 있음. 용량이 컷던것 같던데...

- mysqld를 완전히 종료 한 후에는 ib_logfile이 불필요합니다.


● innodb_flush_method

IO 성능 저하를 감안하면까지 O_DIRECT를 사용하는 가장 큰 이유는 더블버퍼링을 막아 메모리를 효율적으로 쓰기 위함이다. 쓰기 속도가 느려진다.


● innodb_io_capacity

기본값은 200인데 이것은 1.5K 디시크나 SSD를 말하는것이다. 7200rpm의 디스크는 100으로 맞추는게 맞다.


● innodb_online_alter_log_max_size

이 변수는 online ddl 작업중에 사용되는 임시 로그파일들의 최대 크기를 지정하는 것으로 이 로그파일에는 online ddl 중에 dml 조작의 데이터가 저장된다. 임시 로그파일은 필요에 따라 innodb_sort_buffer_size 값으로 필요에 따라 최대 innodb_online_alter_log_max_size 만큼 확장한다. 만약 임시 로그파일이 최대 크기를 초과한 경우 alter는 중단되고 커밋되지 않는 dml 작업은 모두 롤백된다. 최대 크기의 값을 늘리면 online ddl 동안에 더 많은 dml을 처리할 수 있지만 online ddl 은 그 만큼 늦어지게 될 것이다.


● innodb_buffer_pool_instances

- 권장설정은 코어수 * 2 설정 하지 않으면 기본값은 8 이다. 즉 적은 코어이면 반드시 설정 해야 한다.

- 수치가 클 수록 트랜젝션간의 락 경쟁을 줄일 수 있다.


● innodb_page_cleaners

기본값은 4이고 최대값은 64 이지만 innodb_buffer_pool_instances 값보다는 크게 지정하지 못하고 이 값과 같게 된다. 리얼타임으로 변경이 안되며 my.cnf 에 설정된 값에 따라 서버 시작 할때 적용이 된다.


● innodb_page_size=16k

이것은 성능에 영향을 미치지 않는다고 한다. 기본 16K 이면 충분


● 추가적인 튜닝 포인트

group_concat_max_len=1024000


● 소트 버퍼 (기본=256k)

sort_buffer_size=4024K


● innodb_log_files_in_group

트랜잭션 로그 파일 개수로  3개로 설정합니다.

    

● innodb_flush_log_at_trx_commit

서비스 정책에 따라 다르게 설정하겠지만, 저는 일반적으로 2값으로 세팅합니다.

- 0: 초당 1회씩 트랜잭션 로그 파일(innodb_log_file)에 기록

- 1: 트랜잭션 커밋 시 로그 파일과 데이터 파일에 기록

- 2: 트랜잭션 커밋 시 로그 파일에만 기록, 매초 데이터 파일에 기록

이중으로 쓰기 버퍼를 사용하는지 여부를 설정하는 변수로 활성화 시 innodb_doublewrite 공간에 기록 후 데이터 저장합니다. 저는 활성화합니다.


● sync_binlog

트랜잭션 커밋 시 바이너리 로그에 기록할 것인지에 관한 설정이며, 저는 비활성 처리합니다.


● innodb_doublewrite


■ 참고사이트

  - AWS 라이트세일 서버리스 DBMS - MySQL8 > AWS.클라우드 

  - http://cloudrain21.com/mysql-innodb-basic-performance-tunning

  - [MySQL] 이노디비(InnoDB) 메모리 사용 환경설정 > 리눅스서버  - 세션, 글로벌 메모리 사용량



  • 현재 페이지 주소 복사
  • 페이스북으로 공유
  • X 로  공유
  • 트위터로  공유
  • 네이버 블로그로 공유
  • 네이버 카페 공유하기
  • 네이버 라인 공유하기
  • 네이버 밴드 공유하기
  • 링크드인으로 공유하기
전체 185건 1 페이지
  • profile_image 설치된 확장 프로그램: SFTP Natizyskunk▷ sftp 서버 설정sftp가 ssh 서버에서 설정이 되어 있지 아니하면 아래와 같이 설정 후 재싲가 해야 한다.   vim /etc/ssh/ssh_config  Subsystem sftp /usr/lib/openssh/sftp-server  systemctl restart sshd▷ 잘 설정 했는데 안된다면 .bashrc 수정 (중요)vi ~/.bashrc# SFTP / non-interactive session 보호case $- in    *i*) ;;    *) return;;esac▷ 윈도…
  • profile_image swappiness는 커널이 RAM의 데이터를 스왑 공간으로 얼마나 공격적으로 옮길지 결정하는 값입니다. (0~100 사이)- 60 (기본값): 어느 정도 메모리가 차면 스왑을 사용하기 시작합니다.- 10 (권장): 물리 메모리가 거의 가득 찼을 때만 스왑을 사용합니다.- 0: 물리 메모리가 완전히 바닥나기 전까지 스왑을 절대 사용하지 않습니다. ▷ Swappiness 값 수정 (메모리 우선 사용)  /etc/sysctl.conf  파일 맨 아래에 vm.swappiness=10을 추가하고 저장  sudo sysctl -p를 입력해 즉시 반영▷ 스왑 메모리 완전히 끄기완전히 끄기만 하면…
  • profile_image 개발자라면 한 번쯤 이런 생각을 해봤을 것이다. "MySQL 잘 쓰고 있는데 굳이 바꿔야 하나?" 충분히 이해 하는데 익숙한 도구를 버리는 것은 언제나 두렵기 마련이죠. 경험이 많은 분들은 알겠지만 무슨일이 벌어질지 모르니까 하지만 데이터베이스 세계의 흐름은 이미 방향을 틀었고 그 중심에는 PostgreSQL이 있습니다. 숫자가 말해주는 현실PostgreSQL은 DB-Engines 선정 "올해의 DBMS" 상을 2017년부터 2024년까지 총 다섯 차례나 수상했고 지난 7년 중 5년을 PostgreSQL이 가져간 셈이다. 나머지 2년은 Snowflake가 받았을 뿐 MySQL은 단 한 번도 이름을 올리지 못했다…
  • profile_image 왜? 소스 설치를 하는가 하면 패키지 관리자 설치는 버전이 낮아서 그렇지요.tmux는 터미널 멀티플렉서(Terminal Multiplexer)로 하나의 터미널 창 안에서 여러 세션을 동시에 관리할 수 있게 해주는 도구를 말함. ▷ 주요 기능- 화면 분할(수평/수직)- 세션 유지(SSH 연결이 끊어져도 작업이 유지됨)- 여러 윈도우와 패널 간 전환- 세션 공유(다른 사용자와 같은 세션 접속) ▷ 필요한 경우 예전 전송방식 설치curl -sL https://github.com/trzsz/trzsz-go/releases/download/v1.2.0/trzsz_1.2.0_linux_x86_64.tar.gz -…
  • profile_image 인터넷에는 공인IP만 다닐 수 있는데 사설IP나 예약된 다른 IP 대역이 들어올 수는 없습니다.공인IP가 아니기 때문에 중간에 라우팅이 안되기 때문에 그렇지요. 하지만 문제는 정상적인 사용자도 있을 수 있기 때문 프록시 서버를 통해서 들어오는 경우인데 이런 경우는 프록시서버의 IP를 막을 수는 없습니다.막는 통로는 방화벽, 웹서버, 프로그램 등을 통해서 막는 방법이 있겠지만 여기서 배포방식이 아닌 오래전에 대형 업체에서 많이 사용하는 방법으로 갱신시키는 형태로 적용을 시킨다면 모니터링과 대응이 빠른 프로그램을 이용하는것도 괜찮습니다.    function blockBogonIp(): void&…
  • profile_image 이 uptime 수치가 시스템의 CPU 코어 수(또는 쓰레드 수)보다 낮으면 시스템이 여유롭다는 의미며 높으면 CPU 자원 부족 등으로 인해 작업들이 대기하고 있어 시스템에 과부하가 걸렸을 가능성이 높습니다.▷ Load AverageCPU가 처리해야 할 작업의 대기열 길이입니다. - 1.0 = CPU 1개가 100% 사용 중 - 4.0 = CPU 4개가 필요한 작업량 (또는 1개 CPU가 4배 과부하) - 일반적으로 CPU 코어 수 이하면 정상 자동처리 할때 대략 이렇게 프로그램 작성 해서 처리 하면 되며 요즘 LLM에 물어 보면 더 잘 알려 주기도 합니다.중요한것은 주기적으로 시스템 부하를 체크 해서 내가 생…
  • profile_image 검색엔진이 필요해서 제미니에게 아래와 같이 질문을 했다.> 리눅스에서 무료로 사용하면 좋은것 또는 AWS에서 쉽게 사용할만한 검색엔진을 추천 받고 싶어예상대로 엘라스틱 서치와 아파치 솔라 추천해 주는데 이걸 언제 메뉴얼 보고 테스트 하나 싶어 예전에 사용했던 스핑크스가 생각이 나서 이번에 설치하고 테스트 해봤습니다.---직접 설치해서 사용하는 검색엔진에서 사용할만한 프로그램중 하나인 러시아산 스핑크스 검색엔진 입니다.웬만한 중소 사이트에서 사용하는데 무리가 없을정도 이고 검색 결과는 본래 수동으로 손을 봐야 하는것도 많기 때문에 사용 검색엔진이라고 본인의 입맞에 딱 맞을 수도 있지만 아닌경우도 있습니다.상…

상업적 이용 금지. 컨텐츠는 개인 용도로만 사용이 가능 합니다.