๐ปTech160 [๋ฆฌ๋ ์ค] ์ฌ๋ฌ jar ํ์ผ์์ class ๋ชฉ๋ก ํ๋ฒ์ ์ถ๋ ฅ ll | grep log4j | awk '{print $9}' | xargs -d '\n' -n 1 jar -tvf find . -name "*.jar" -exec echo ==\ {} \; -exec jar tf {} \;|grep -E "==|HiveMetaStore" 2022. 8. 4. [Microsoft] AZ-900 ํฉ๊ฒฉ ํ๊ธฐ (5์๊ฐ ๊ณต๋ถ) ์์ฆ ์ฌ๋ฌ ๊ธฐ์ ์์ Cloud ์๊ฑด๋ค์ด ๋ง์์ง๊ณ ์์ด ์ทจ์ ์ด๋ ์ด์ง์ Cloud ์๊ฒฉ์ฆ ํ ๊ฐ์ฏค ๊ฐ์ง๊ณ ์์ผ๋ฉด ๋์์ด ๋ง์ด ๋ ๊ฒ๋๋ค. ๊ทธ๋์ ์งง์ ์๊ฐ ํฌ์ํด์ ์ฝ๊ฒ ์ทจ๋ํ ์ ์๋ Microsoft AZ-900 ์๊ฒฉ์ ์ถ์ฒ๋๋ ค์. ์ํ๋ ๋ฌด๋ฃ๋ก ๋ณผ ์ ์์ด ์๊ฐ๋ง ํฌ์ํ๋ฉด ๋ฉ๋๋ค. ์ ๋ 2021/12์ ์ํ์ ๋ดค์์ต๋๋ค. ๊ฒฐ๋ก ๋ถํฐ ๋ง์๋๋ฆฌ๋ฉด ์๋ ๋งํฌ์ ๋คํ์์ 90ํ๋ก ์ด์ ๋ฌธ์ ๊ฐ ๋์ผํ๊ฒ ๋์ต๋๋ค. ๋ฌธ์ ๋ ๋ต ์์ฃผ๋ก ๊ณต๋ถํ์๋ฉด ์ถฉ๋ถํฉ๋๋ค. ์ ๊ฐ์ ๊ฒฝ์ฐ๋ ์ดํ ๋์ 5์๊ฐ ์ ๋ ํฌ์ํด์ ํฉ๊ฒฉํ์ต๋๋ค. ์๋ ์ฌ์ดํธ ์ ์ํ๋ฉด ๋ฌธ์ ๊ฐ 230๊ฐ ์ ๋ ๋๋๋ฐ 1๋ฒ๋ง ์ ๋ ํ๋๋ฐ๋ ์๊ฐ์ด ๊ฝค ๋ง์ด ์์๋ฉ๋๋ค. ๊ทธ๋์ ์ ๋ 100๋ฌธ์ ๊น์ง๋ง ๋ฐ๋ณตํ์ฌ ๋ณด๋ฉด์ ๋์ ์ตํ๋๋ก 3๋ฒ ํ๋ ํ์ต๋๋ค. (์ดํ ๋์ 2์๊ฐ, .. 2022. 5. 28. [๋ฆฌ๋ ์ค] ํ์ ๋๋ ํ ๋ฆฌ ๊ฐ ์ฌ์ด์ฆ ๋ด๋ฆผ์ฐจ์ ์ถ๋ ฅ $ du -h --max-depth=1 | sort -rh ----------------------------------------- 138G . 137G ./dfs 1.3G ./yarn 284M ./hadoop-ozone 193M ./kudu ----------------------------------------- 2022. 4. 25. [SOLVED] Command "python setup.py egg_info" failed with error code 1 in /tmp/pip-build-on0urr/pip/ ๐ซ ERROR pip ํจํค์ง ์ค์น ๊ณผ์ ์์ ์๋ ์๋ฌ๊ฐ ๊ณ์ ๋ฐ์ํ์ฌ ๊ฒ์ํด ๋ณด๋ pip, setuptools ์ ๊ทธ๋ ์ด๋ํ๋ผ๊ณ ๋์ต๋๋ค Command "python setup.py egg_info" failed with error code 1 in /tmp/pip-build-on0urr/pip/ ๊ทธ๋์ ์ ๊ทธ๋ ์ด๋๋ฅผ ์งํํ๋ ค๊ณ 'pip install --upgrade pip' ๋ช ๋ น์ด๋ฅผ ์คํํ๋๋ฐ ๋ค๋ฅธ ์๋ฌ๊ฐ ๋ฐ์ํ๋ค์ ๐ฅ [root@localhost ~] pip install --upgrade pip Collecting pip Using cached https://files.pythonhosted.org/packages/33/c9/e2164122d365d8f823213a53970fa3005eb16218ed.. 2022. 4. 12. [๋ฆฌ๋ ์ค] ๋ก๊ทธ ์ถ์ถ ๋ฐ ์ญ์ ์ฃผ๊ธฐ ์ค์ ๐ /var/log/message ์ ์์ด๋ docker log ๋ณ๋ ์ ์ฅ ๋ฐ ์ญ์ ์ฃผ๊ธฐ ์ค์ $ vi /etc/rsyslog.d/10-docker.conf # Docker logging *.* { /var/log/docker/docker.log stop } $ systemctl restart rsyslog $ vi /etc/logrotate.d/docker /var/log/docker/docker.log { size 100M rotate 10 missingok compress } 2022. 3. 4. impala-shell ํจ์ค์๋ ์ ๋ ฅ์์ด Ldap ๋ก๊ทธ์ธํ๋ ๋ฐฉ๋ฒ impala-shell์์ ์๋ 2๊ฐ์ง ๋ด์ฉ์ ๋ํด ํด๊ฒฐํ๋ ๋ฐฉ๋ฒ์ ๋๋ค impala-shell ๋ช ๋ น์ด ์คํ์ ํด๋น ๊ณ์ ์ผ๋ก ์ต์ ์ ๋ ฅ์์ด ๋ก๊ทธ์ธํ๋ ๋ฐฉ๋ฒ impala-shell ๋ช ๋ น์ด ์คํ์ Ldap ๋ก๊ทธ์ธ ํจ์ค์๋ ์ ๋ ฅ์์ด ์คํ์ํค๋ ๋ฐฉ๋ฒ 1. ํด๋น ๊ณ์ ์ .impalarc ํ์ผ ์์ฑ $ vi /home/user1/.impalarc 2. ์๋ ์ฌ์ดํธ์์ Command-Line Option๊ณผ Configuration File Setting ๋น๊ตํ์ฌ .impalarc ํ์ผ ์์ฑ ๐ ์ฐธ๊ณ ์ฌ์ดํธ: https://impala.apache.org/docs/build/html/topics/impala_shell_options.html 3. impalarc ํ์ผ ์์ฑ โพ ์คํํ๋ ค๋ impala-shell ๋ช ๋ น์ด i.. 2021. 11. 25. ์๋ฒ reboot ์ดํ MariaDB ์คํ ์๋๋ ๋ฌธ์ ๐ซ ๋ฌธ์ ์์ธ MariaDB ์๋ฒ๋ฅผ ์ฌ๊ธฐ๋ํ ๊ฒฝ์ฐ pid ๋๋ ํ ๋ฆฌ(/var/run/mariadb/)๋ฅผ ์์ฑํ์ง ๋ชปํด ๋ฌธ์ ๊ฐ ๋ฐ์ $ cat /etc/my.cnf.d/server.cnf -------------------------------------- [server] pid-file=/var/run/mariadb/mariadb.pid -------------------------------------- ๐ก ํด๊ฒฐ ๋ฐฉ๋ฒ (2๊ฐ์ง ๋ฐฉ๋ฒ) 1. pid-file ๊ฒฝ๋ก๋ฅผ ๋ณ๋์ ๊ฒฝ๋ก๋ก (์ญ์ ๋์ง ์๋) ์ง์ ํด ์ค $ vi /etc/my.cnf.d/server.cnf ---------------------------------- [server] pid-file=/var/lib/mysql/mariadb.pid ---.. 2021. 9. 3. impala ๋ช ๋ น์ด ์ ๋ฆฌ โพ Impala ์ต์ ๊ฐ ํ์ธSET ALL; โพ ํ์ผ์ ๋ถํ ํ์ง ์๊ณ 1๊ฐ ํ์ผ๋ก ์์ฑํ๊ณ ์ถ์ ๋ ์๋ ์ต์ ์ ์ฉ ํ insert ์ฟผ๋ฆฌ ์คํSET NUM_NODES=1;โพ impala shell ์ ์impala-shell -i impala.host.com:21000 -d default -l -u admin --auth_creds_ok_in_clear โพ ํ ์ด๋ธ ํต๊ณ ์ ๋ณด ์์ง (์ฟผ๋ฆฌ ์ฑ๋ฅ ํฅ์, memory ๋ถ์กฑ ์ค๋ฅ ๋ฐ์ ์๋ฐฉ)COMPUTE STATS {TABLE_NM} โพ ๊ฐ๋ตํ ํ ์ด๋ธ ์ ๋ณด ํ์ธ (Rows, ํ์ผ ์, ํ ์ด๋ธ size ๋ฑ ์ ๋ณด ํ์ธ) SHOW TABLE STATS {TABLE_NM} โพ ํ ์ด๋ธ ์์ธ ์ ๋ณด ํ์ธDESCRIBE FORMATTED {TABLE_NM} โพ SQL ์ํ ์ .. 2021. 8. 24. ์ด์ 1 2 3 4 5 6 7 8 ยทยทยท 20 ๋ค์