MySQL, MariaDB 한글 깨짐 현상 해결(Hive Metastore)

---

Hive에서 desc로 테이블 조회 시 한글 comment가 깨지는 경우가 있는데, 

metastore DB 한글 설정이 안 돼서 그렇습니다.

아래 조치 방법입니다.

 

MySQL

1. my.cnf 수정

• my.cnf 파일 열어서 아래내용에서 없는것들을 추가해 주세요.

[root@localhost]$ vi /etc/my.cnf
----------------------------------------------------------
[client]
character-sets-dir = utf8

[mysqld]
init_connect=SET collation_connection = utf8_general_ci
init_connect=SET NAMES utf8
character-set-server = utf8
collation-server = utf8_general_ci

[mysqldump]
default-character-set = utf8

[mysql]
default-character-set = utf8
----------------------------------------------------------

2. mysql 서비스 재기동

[root@localhost]$ service mysqld restart   

 

 

MariaDB

1. server.cnf수정

[root@localhost]$ vi /etc/my.cnf.d/server.cnf
----------------------------------------------
[server]
character-set-server=utf8
----------------------------------------------

2. mariadb 서비스 재기동

[root@localhost]$ systemctl restart mariadb

 

 

🔎 참고

◾ 기존 metastore의 테이블들 Character-Set 변경

• 기존의 생성된 Database나 Table들의 Character-Set이 변경되는 것은 아니기 때문에,
  hive metastore db 한글 관련 테이블들을 직접 변경해줘야 합니다. 

##table coulmn character-set 변경
alter table COLUMNS_V2 modify COMMENT mediumtext character set utf8 collate utf8_general_ci;
alter table TABLE_PARAMS modify PARAM_VALUE mediumtext character set utf8 collate utf8_general_ci;
alter table SERDE_PARAMS modify PARAM_VALUE mediumtext character set utf8 collate utf8_general_ci;
alter table SD_PARAMS modify PARAM_VALUE mediumtext character set utf8 collate utf8_general_ci;
alter table PARTITION_PARAMS modify PARAM_VALUE varchar(4000) character set utf8 collate utf8_general_ci;
alter table PARTITION_KEYS modify PKEY_COMMENT varchar(4000) character set utf8 collate utf8_general_ci;
alter table INDEX_PARAMS modify PARAM_VALUE varchar(4000) character set utf8 collate utf8_general_ci;
alter table DATABASE_PARAMS modify PARAM_VALUE varchar(4000) character set utf8 collate utf8_general_ci;
alter table DBS modify `DESC` varchar(4000) character set utf8 collate utf8_general_ci;
alter table TBLS modify VIEW_EXPANDED_TEXT mediumtext character set utf8 collate utf8_general_ci;
alter table TBLS modify VIEW_ORIGINAL_TEXT mediumtext character set utf8 collate utf8_general_ci;

## table 확인
show full columns from COLUMNS_V2;
show full columns from TABLE_PARAMS;
show full columns from SERDE_PARAMS;
show full columns from SD_PARAMS;
show full columns from PARTITION_PARAMS;
show full columns from PARTITION_KEYS;
show full columns from INDEX_PARAMS;
show full columns from DATABASE_PARAMS;
show full columns from DBS;

 

◾ character 관련 명령어

##데이터베이스 character set 확인
show create database DB명; 

##데이터베이스의 character set 변경
alter database DB명 default character set = utf8;

##테이블 character set 확인
show create table 테이블명;

##테이블의 character set 변경
alter table 테이블명 default character set = utf8;