http://docs.grafana.org/alerting/rules/ ์ ๋ฐ๋ผ Grafana๋ ํฅํ ๋ฆด๋ฆฌ์ค์์ ์๋ฆฌ์ฆ๋ณ๋ก ์ํ๋ฅผ ์ถ์ ํ ๊ณํ์ ๋๋ค.
๊ทธ๋ฌ๋ ๋ค์ํ ๊ฒฝ๊ณ ์ธํธ๊ฐ ํ์ํ ๋ฉํธ๋ฆญ ์ธํธ๊ฐ ํฌํจ๋ ๊ทธ๋ํ๊ฐ ์๋ ์ฌ์ฉ ์ฌ๋ก๊ฐ ์์ ์ ์๋ ๊ฒ ๊ฐ์ต๋๋ค. ์ด๊ฒ์ "์๋ฆฌ์ฆ ์ํ ๋ณ๊ฒฝ๋ณ ์ง์"( https://github.com/grafana/grafana/issues/6041 )๊ณผ ์ฝ๊ฐ ๋ค๋ฆ ๋๋ค.
Grafana ๋ฒ์ = 4.x
๊ตฌ์ฒด์ ์ธ ์ฌ์ฉ ์ฌ๋ก: ๊ฐ ์ฃผ์ ๊ธฐ๋ฅ(์: ์ธ๋ถ HTTP ํธ์ถ ๋๋ ๋์คํฌ I/O๊ฐ ๋ฐ์ํ๋ ์์น)์ ๋ํด Prometheus์์ ํ์คํ ๊ทธ๋จ์ ๊ธฐ๋กํ๋๋ก ์ฑ์ ๊ณ์ธกํ์ผ๋ฉฐ ์ด๋ค ์ค ํ๋๊ฐ ๋๋ ค์ง๋ฉด ๊ฒฝ๊ณ ๋ฅผ ํ์ํ๊ณ ์ถ์ต๋๋ค.
ํ์ฌ ๊ทธ๋ํ์ ๊ฒฝ๊ณ ๊ฐ์ 1:1 ๊ด๊ณ ๋๋ฌธ์ ์ด์ ๋ํ ๋๋ฏธ ๊ทธ๋ํ๋ฅผ ์ ์ํด์ผ ํฉ๋๋ค. ๊ทธ๋ํ ์์ฒด์ ๊ฐ์ ์์น์ ์ ์๋ ๊ฒฝ๊ณ ๋ฅผ ์ ์งํ๋ ๊ฒ์ด ํจ์ฌ ๋ ๋ ผ๋ฆฌ์ ์ ๋๋ค.
๊ทธ๋ฆฌ๊ณ ๋น์ ์ ํ๋์ ์ฟผ๋ฆฌ์์ ๊ทธ๊ฒ์ ์ ์ํ ์ ์์ต๋๊น?
์๋; OR
์กฐ๊ฑด ์ฒด์ธ์ ์กฐ์กํ๊ณ ๊ฒฝ๊ณ ์ ๋จ์ผ ์ด๋ฆ์ ๊ฒฝ๊ณ ์ ์ ํํ ์์ธ์ ๋ช
ํํ๊ฒ ์๋ณํ ์ ์์ต๋๋ค. Some part of service X is failing
๋ผ์ธ์ ๋ฐ๋ผ ๊ฒฝ๊ณ ๋ฅผ ๋ณด๋ด๊ณ ์ถ์ง ์์ต๋๋ค. ๋๊ธฐ ์ค์ธ ์์ง๋์ด๋ ์ ์น๊ตฌ๊ฐ ์๋๋๋ค...
๋ณ๋์ ๊ฒฝ๊ณ ๊ท์น ์ด๋ฆ ๋ฐ ๋ฉ์์ง ๋ฑ์ ์ํ๋ ๊ฒฝ์ฐ ๊ฒฝ๊ณ ์ ๋ํด ๋ณ๋์ ํจ๋์ ๊ฐ๋ ๊ฒ์ด ๋ ํฉ๋ฆฌ์ ์ ๋๋ค.
๋ค, ๊ทธ๊ฒ ๋ฐ๋ก ์ ๊ฐ ์ง๊ธ ํ๊ณ ์๋ ์ผ์ ๋๋ค. ๊ฐ๊น์ด ์ฅ๋์ ๊ทธ๋ํ๋น ์ฌ๋ฌ ๊ฒฝ๊ณ ๋ฅผ ๊ตฌํํ์ฌ ์ด ํด๊ฒฐ ๋ฐฉ๋ฒ์์ ๋ฒ์ด๋ ๊ฐ๋ฅ์ฑ์ด ์์ต๋๊น?
๊ทธ๊ฒ์ ๋งค์ฐ ๊ฐ๋ฅ์ฑ์ด ์๋ค
์๋ง๋ ์์ฒญ๋ ์์๊ฐ ์๋ค๋ฉด :)
ํํ ์ข์ - ๋ด๊ฐ ํ๋ ๊ตฐ์ค์ ์๋์ค๋ฝ๊ฒ ํ ์ ์๋์ง ๋ณด๊ฒ ์ต๋๋ค ;) ์ง์ฌ์ผ๋ก ', ์ ์ง์ ๊ฐ์ฌ๋๋ฆฝ๋๋ค.
์ข์, ์ฐ๋ฆฌ๋ 2๋ช ์ ํญ๋๋ฅผ ๊ฐ์ง๊ณ ์๋ค :-) ๋๋ ์ฌ๋ฌ ํฑํฌ์ ์ฐ๋ฃ ์์ค์ ๊ทธ๋ํ๋ก ํ์ํ๊ณ ์์ผ๋ฉฐ ๊ฐ ํฑํฌ์ ๋ํด ์ฐ๋ฃ ๋ถ์กฑ ๊ฒฝ๊ณ ๋ฅผ ์ค์ ํ๊ณ ์ถ์์ต๋๋ค.
ํฑํฌ๋ง๋ค ์๊ณ๊ฐ์ด๋ ์๋ฆผ์ด ๋ค๋ฆ ๋๋ค.
์ ํํ. ํ๋๋ 285๊ฐค๋ฐ์ ๋๋ฐฉ์ ํฑํฌ์ ๋๋ค. ํฑํฌ๊ฐ 70๊ฐค๋ฐ ์๋๋ก ๋ด๋ ค๊ฐ๋ฉด "๋๋ฐฉ์ ๋ถ์กฑ" ๊ฒฝ๊ณ ๋ฅผ ์ค์ ํ๊ณ ์ถ์์ต๋๋ค. ๋ค๋ฅธ ํ๋๋ 500๊ฐค๋ฐ ํ๋กํ ํฑํฌ๋ก, 100๊ฐค๋ฐ ์๋๋ก ๋ด๋ ค๊ฐ๋ฉด "ํ๋กํ ๋ถ์กฑ" ๊ฒฝ๊ณ ๋ฅผ ์ํ์ต๋๋ค. ๊ฐ๊ฐ์ ๋ํด ๋จ์ผ ํต๊ณ๋ฅผ ์ค์ ํ์ง๋ง ๋จ์ผ ํต๊ณ์์ ๊ฒฝ๊ณ ๋ฅผ ์ฌ์ฉํ ์ ์์ต๋๋ค.
์ค์๊ฐ๊ณผ 90๋ฒ์งธ ๋ฐฑ๋ถ์์ ์ธก์ ํญ๋ชฉ์ด ์๋ ๊ทธ๋ํ๊ฐ ์์ต๋๋ค. ๊ฐ๊ฐ์ ๋ํ ์๋ฆผ์ ๋ฐ๊ณ ์ถ์ต๋๋ค. ์ด๋ ๊ฒ ํ๋ ค๋ฉด ๊ฐ๊ฐ์ ๋ํด ํ๋์ ๊ทธ๋ํ๋ฅผ ๋ง๋ค์ด์ผ ํฉ๋๋ค. ๊ทธ๋ฐ ๋ค์ ๊ฐ๊ฐ์ ๋ํ ๊ฒฝ๊ณ ๋ฐ ์ค์ํ ๊ฒฝ๊ณ ๋ฅผ ์ํ๋ฉด ๊ฐ๊ฐ์ ๋ํ ๋ ๋ฒ์งธ ๊ทธ๋ํ๋ฅผ ์์ฑํด์ผ ํฉ๋๋ค.
๋ชจ๋ํฐ๋งํ ์๋น์ค๊ฐ 30~40๊ฐ ์์ผ๋ฉฐ ๊ฐ ์๋น์ค์๋ 2~5๊ฐ์ ์ฃผ์ ๋ฉํธ๋ฆญ์ด ์์ต๋๋ค. ์ฌ๋ฌ ๊ณ ๊ฐ์ ๋ํด ๋์ผํ ๋ฉํธ๋ฆญ์ ๊ทธ๋ํ๋ก ํ์ํ๋ ๊ทธ๋ํ๊ฐ ์์ผ๋ฉฐ ๊ณ ๊ฐ๋น (์์ง) ์๋ฆผ์ ์ํํ ํ์๋ ์์ง๋ง ์๋ฆผ์ ๋ฐ๊ณ ์ ํ๋ ๋ฉํธ๋ฆญ ์์ ์ถ๊ฐ๋ฉ๋๋ค. ์์ญ ๊ฐ์ ๊ทธ๋ํ๋ฅผ ๋ง๋๋ ์์ ์ ์์ด ๋งค์ฐ ๋น ๋ฅด๊ฒ ๋์ด๋ฉ๋๋ค. ํ์ฌ ํ๋ก๋์ ํ๊ฒฝ(๋ฐ ์ด์ ํ๋ก๋์ ํ๊ฒฝ)์์ ๊ฒฝ๊ณ ๋ฐ ์ค์ํ ๊ฒฝ๊ณ ๋ฅผ ํ์ํ๊ณ ๋จ์ผ ๊ทธ๋ํ์ ์ฌ๋ฌ ๋ฉํธ๋ฆญ์ ํ์ํ๊ณ ์ด์ ๋ํด ๊ฒฝ๊ณ ํ๋ ๊ฒ์ด ๋งค์ฐ ์ ์ฉํ ๊ฒ์ ๋๋ค.
์ด ๊ธฐ๋ฅ๋ ๋ณด๊ณ ์ถ์ต๋๋ค. ์งํ๊ฐ ์๊ณ๊ฐ์ ๋ฒ์ด๋๋ ๊ฒฝ์ฐ์ ๊ฒฝ๊ณ ์ ๋ฐ์ดํฐ ์ ๋ฐ์ดํธ์ ์คํจํ ๊ฒฝ์ฐ์ ๋ ๋ค๋ฅธ ๊ฒฝ๊ณ ๊ฐ ์ข์ ์์ ๋๋ค. ์ฆ, ๊ฐ์ด ๋๋ฌด ๋์์ง๊ฑฐ๋ ๊ฐ์ด ๋ณด๊ณ ๋์ง ์๋ ๊ฒฝ์ฐ์ ๋๋ค. ์ด๋ ๋ฐ์ดํฐ๋ฅผ ๋ณด๊ณ ํ๋ ๋ชจ๋ ํญ๋ชฉ์์ grafana(๋๋ ๋ฐฑ์๋)์์ ํต์ ์ ๋ฐฉํดํ๋ ๋ฌธ์ ๊ฐ ๋ฐ์ํ์์ ํ์ํ๋ ๋ฐ ์ฌ์ฉํ ์ ์์ต๋๋ค.
์๋ ํ์ธ์ ํ ๋ฅด์ผ๋ก์ ๋๋ค!
๊ธฐ๋ฅ์ ๋ํด ์ฌ๋ฌ "์ข์์"๋ฅผ ๋ฐ์์ต๋๋ค! ๋ค์ realease =) ๋ฅผ ์ ๋ ฅํ ๊น์?
@rmsys ๋ ์๋ง๋ ์ด๋ ์์ ์์ UX ๊ด์ ๋ฐ ์ฝ๋ ๋ณต์ก์ฑ(๋ฐ UX ๋ณต์ก์ฑ) ๊ด์ ์์ ํด๊ฒฐํ๋ ๋ฐ ์๊ฐ์ด ๊ฑธ๋ฆด ๊ฒ์ ๋๋ค. ์์ง ๋ก๋๋งต์๋ ์์ง๋ง ๊ฒฝ๊ณ ์์ง์ด ๋ ์ฑ์ํด์ง๊ณ ์ด์ ๋ํ UX ๋์์ธ์ด ์๋ํ๋ ๋ด๋ ์ ๊ฐ๋ฅํ ๊ฒ์ ๋๋ค. ๋ฐ
์ฌ๋ฌ ๊ฒฝ๊ณ ์ ๋ํ ๋ ๋ค๋ฅธ ์ข์ ์ฌ์ฉ ์ฌ๋ก๋ ๋ค๋ฅธ ์์ ์ผ๋ก ๋ค๋ฅธ ์ฌ๊ฐ๋ ์๊ณ๊ฐ์ ๊ฐ๋ ๊ฒ์ ๋๋ค. ์๋ฒ์์ ์๋๊ฐ ๋๋ ค์ง๊ธฐ ์์ํ๋ฉด ์ด๋ฉ์ผ๋ก ์ถฉ๋ถํ ์ ์์ง๋ง ์๋๊ฐ ๋๋ฌด ๋๋ ค์ง๋ฉด ๊ด๋ฆฌ์์๊ฒ ํธ์ถํ ๊ฐ์น๊ฐ ์์ต๋๋ค.
valid
๋ฐ invalid
๊ฐ์ด ์๋ ๋ฉํธ๋ฆญ์ ๋ฐํํ๋ ๊ทธ๋ํ๊ฐ ์์ต๋๋ค. ์ด๊ฒ์ valid
๊ฐ ๋๋ฌด ๋ฎ๊ณ invalid
๊ฐ ๋๋ฌด ๋์ ๋ ๋ฐ์ํ๋ ๊ฒฝ๊ณ ๋ฅผ ์์ฑํ๊ธฐ ์ํด ๋ ๊ฐ์ ์ฟผ๋ฆฌ๊ฐ ํฌํจ๋ ๋จ์ผ ๊ทธ๋ํ๋ฅผ ์ฌ์ฉํ ์ ์๊ธฐ ๋๋ฌธ์ ์ ์ฉํ ๊ฒ์
๋๋ค.
๋ํ ๊ฒฝ๊ณ ์ ๊ฐ๋ณ ์ํ๋ฅผ ์ถ์ ํ๋ ๊ฒ์ด ํญ์ ์ ํธ๋๋ ๊ฒ์ ์๋๋๋ค(์ต์ข ์ฌ์ฉ์๋ ๊ฐ๋ณ ์ํ ๋ค์ ์๋ ์ธ๋ถ ์ ๋ณด๋ฅผ ์์์ผ ํ๊ธฐ ๋๋ฌธ์).
์ด๊ฒ ๋ฌด์จ ๋ง์ธ์ง ์ดํด๊ฐ ์ ์๊ฐ๋ค์. ์์ธํ ์๋ ค์ฃผ์ค ์ ์๋์?
๊ทธ๋ํ๋น ์ฌ๋ฌ ๊ฒฝ๊ณ ๊ฐ ์๋ํ๊ณ ํ์๋๋ ๋ฐฉ์์ ์ค๋ช ํ ์ ์์ต๋๊น? ์ฃผ์์ ๋ฌด์์ ๋งํ๊ณ ํจ๋ ์ ๋ชฉ ์์ ๋ น์/๋นจ๊ฐ์ ํํธ๊ฐ ํ์๋ฉ๋๊น(2/5 ๊ฒฝ๊ณ ๊ท์น์ด ์คํ๋๋ ๊ฒฝ์ฐ)?
๊ฒฝ๊ณ ๊ท์น ๊ฐ์ ๋ฌด์ธ๊ฐ๋ฅผ ๊ณต์ ํ๊ณ ์ถ์ต๋๊น, ์๋๋ฉด ์์ ํ ๊ฒฉ๋ฆฌ๋์ด ์์ต๋๊น(๊ฐ์ ๊ทธ๋ํ ํจ๋์ ์๊ณ ๋์ผํ ์ฟผ๋ฆฌ๋ฅผ ์ฐธ์กฐํ ์ ์๋ ๊ฒ ์ธ์).
์ฌ๋ฌ ๊ฒฝ๊ณ ๊ท์น์ด ์๋ ๊ฒฝ์ฐ ์๊ณ๊ฐ์ ์ด๋ป๊ฒ ์๊ฐํํ์๊ฒ ์ต๋๊น? ๊ฒฝ๊ณ ๊ท์น ํ์ด์ง ๋ฐ ๊ฒฝ๊ณ ๋ชฉ๋ก ํจ๋์ ๋ณ๋์ ๊ท์น์ผ๋ก ํ์๋ฉ๋๊น? ๊ทธ๋ฐ ๋ค์ ๊ฒฝ๊ณ ํญ๋ฟ๋ง ์๋๋ผ ๊ท์น์ ํน์ ์ธ์คํด์ค๋ก ์ด๋ํ๋ ๋ฐฉ๋ฒ์ด ํ์ํฉ๋๋ค.
Grafana๋ ์๊ฐ์ ๋๊ตฌ์ด๋ฉฐ ๊ฒฝ๊ณ ๊ท์น ์ํ๋ฅผ ์ฝ๊ฒ ์๊ฐํํ ์ ์๋๋ก ๊ฒฝ๊ณ ๊ท์น์ ๊ทธ๋ํ์ ์ฐ๊ฒฐํ๊ธฐ๋ก ๊ฒฐ์ ํ์ต๋๋ค(๋ฉํธ๋ฆญ, ์๊ณ๊ฐ ๋ฐ ๊ฒฝ๊ณ ์ํ ๊ธฐ๋ก์ ํตํด). ๊ฐ ๊ทธ๋ํ๊ฐ ์ฌ๋ฌ ๊ฒฝ๊ณ ๊ท์น์ ๋ํ๋ผ ์ ์๋๋ก ํ๋ฉด ์ด ์์ ์ด ๋งค์ฐ ๋ณต์กํด์ง ๊ฒ ๊ฐ์์ ์ด๊ฒ์ด ํ์ํ์ง ์ ๋ชจ๋ฅด๊ฒ ์ต๋๋ค.
singlestat ํจ๋์์ ๊ฒฝ๊ณ ๊ท์น์ ์ง์ํ๋ @rssalerno๋ ์ด ๋ฌธ์ ์ ๊ด๋ จ์ด ์๋ ๊ฒ ๊ฐ์ต๋๋ค.
@alex-phillips ์๋๋ฆฌ์ค๋ ๊ฐ๋ณ ๊ฒฝ๊ณ ๊ท์น์ ๋ณด๋ค ์ ์ฐํ๊ฒ ๋ง๋ค์ด ํด๊ฒฐํ ์ ์๋ ๊ฒ์ฒ๋ผ ๋ค๋ฆฝ๋๋ค.
๋๊ตฐ๊ฐ ์ด๊ฒ์ด ์ข์ ๊ตฌ์ฒด์ ์ธ ์๊ฐ ์์ต๋๊น? ์ด๋ค ๋ฉํธ๋ฆญ ๋ฐ ๊ฒฝ๊ณ ๊ธฐ๋ก ์ฃผ์๊ณผ ๊ด๋ จ์ด ์๋์ง ๋ชจ๋ฅด๋ 2-5๊ฐ์ ์๊ณ๊ฐ์ด ์๋ ํผ๋์ค๋ฌ์ด ๊ทธ๋ํ๋ก ๋๋๋ ์๋๋ฆฌ์ค๊ฐ ํ์๋์ง ์๊ณ ์ด๋ค ๊ฒฝ๊ณ ๊ท์น์์ ์ ๋ํ๋์ง๋ ๋ชจ๋ฆ ๋๋ค(๋ง์ฐ์ค ์ค๋ฒํ์ง ์์).
๊ทธ๋ํ๋น ์ฌ๋ฌ ๊ฒฝ๊ณ ๊ฐ ์๋ํ๊ณ ํ์๋๋ ๋ฐฉ์์ ์ค๋ช ํ ์ ์์ต๋๊น? ์ฃผ์์ ๋ฌด์์ ๋งํ๊ณ ํจ๋ ์ ๋ชฉ ์์ ๋ น์/๋นจ๊ฐ์ ํํธ๊ฐ ํ์๋ฉ๋๊น(2/5 ๊ฒฝ๊ณ ๊ท์น์ด ์คํ๋๋ ๊ฒฝ์ฐ)?
์ฌ๋ฌ ๊ฒฝ๊ณ ๊ท์น์ด ๊ฐ๋ณ์ ์ผ๋ก ์ฃผ์์ด ๋ฌ๋ฆด ๊ฒ์ด๋ผ๊ณ ์๊ฐํฉ๋๋ค. ํํธ๋ ์์์ผ๋ก ๊ตฌ๋ถ๋ ์ ์์ต๋๋ค. ๊ฒฝ๊ณ /ํจ๋์ ๊ตฌ๋ถํ๊ธฐ ์ํด ๊ท์น์ ์ด๋ฆ์ ์ง์ ํด์ผ ํฉ๋๋ค.
๊ฒฝ๊ณ ๊ท์น ๊ฐ์ ๋ฌด์ธ๊ฐ๋ฅผ ๊ณต์ ํ๊ณ ์ถ์ต๋๊น, ์๋๋ฉด ์์ ํ ๊ฒฉ๋ฆฌ๋์ด ์์ต๋๊น(๊ฐ์ ๊ทธ๋ํ ํจ๋์ ์๊ณ ๋์ผํ ์ฟผ๋ฆฌ๋ฅผ ์ฐธ์กฐํ ์ ์๋ ๊ฒ ์ธ์).
์ผ๋ฐ์ ์ผ๋ก ๊ทธ๋ฃน์๋ ๊ณต์ ์๊ณ๊ฐ์ด ์์ด์ผ ํ๊ณ ๊ทธ๋ฃน์ด ๊ตฌํ๋ ๊ฒฝ์ฐ ์ด๋ฆ์ด ์์ด์ผ ํ๋ค๊ณ ์๊ฐํ์ง๋ง(https://github.com/grafana/grafana/issues/6557#issuecomment-324363795 ์ฐธ์กฐ)
์ฌ๋ฌ ๊ฒฝ๊ณ ๊ท์น์ด ์๋ ๊ฒฝ์ฐ ์๊ณ๊ฐ์ ์ด๋ป๊ฒ ์๊ฐํํ์๊ฒ ์ต๋๊น? ๊ฒฝ๊ณ ๊ท์น ํ์ด์ง ๋ฐ ๊ฒฝ๊ณ ๋ชฉ๋ก ํจ๋์ ๋ณ๋์ ๊ท์น์ผ๋ก ํ์๋ฉ๋๊น? ๊ทธ๋ฐ ๋ค์ ๊ฒฝ๊ณ ํญ๋ฟ๋ง ์๋๋ผ ๊ท์น์ ํน์ ์ธ์คํด์ค๋ก ์ด๋ํ๋ ๋ฐฉ๋ฒ์ด ํ์ํฉ๋๋ค.
๊ท์น์ด ์ถ๊ฐ ์์ ๋งค๊ฐ๋ณ์๋ฅผ ์ฌ์ฉํ๋ ๊ฒฝ์ฐ ์ด๋ฅผ ์ฌ์ฉํ์ฌ ์๊ณ๊ฐ์ ๋ ๋๋งํ ์ ์์ผ๋ฉฐ ์ด์ ๊ฐ์ด ์ฐจ๋ณํํ ์ ์์ผ๋ฉฐ ์๋ง๋ ๋๊ตฌ ์ค๋ช ๋ ํ์ํ ๊ฒ์ ๋๋ค. ๊ท์น์ ํ ๊ธํ ์ ์๋ ๊ฒ์ด ์ ์ฉํ ๊ฒ์ด๋ฉฐ ํน์ ๊ท์น์ ๋ ๋๋งํ๋ ๋งค๊ฐ๋ณ์๊ฐ ํ์๋ฅผ ์ฒ๋ฆฌํ๋ค๊ณ ์๊ฐํฉ๋๊น?
singlestat ํจ๋์์ ๊ฒฝ๊ณ ๊ท์น์ ์ง์ํ๋ @rssalerno๋ ์ด ๋ฌธ์ ์ ๊ด๋ จ์ด ์๋ ๊ฒ ๊ฐ์ต๋๋ค.
๊ทธ๊ฐ ๊ฐ ํฑํฌ์ ๋ํด ๋ณ๋์ ํจ๋์ ๊ฐ์ง๊ณ ์๊ธฐ ๋๋ฌธ์ ๋จ์ผ ํต๊ณ ๊ฒฝ๊ณ ๊ฐ ํด๋น ํน์ ๋์๋ณด๋์ ๋ํ ๊ทธ์ ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ ์ ์์ง๋ง ์๋ ๊ทธ๋ํ๋ฅผ ์ฐธ์กฐํ๊ณ ์์์ ์ ์ ์์ ๊ฒ์ ๋๋ค.
๋๊ตฐ๊ฐ ์ด๊ฒ์ด ์ข์ ๊ตฌ์ฒด์ ์ธ ์๊ฐ ์์ต๋๊น? ์ด๋ค ๋ฉํธ๋ฆญ ๋ฐ ๊ฒฝ๊ณ ๊ธฐ๋ก ์ฃผ์๊ณผ ๊ด๋ จ์ด ์๋์ง ๋ชจ๋ฅด๋ 2-5๊ฐ์ ์๊ณ๊ฐ์ด ์๋ ํผ๋์ค๋ฌ์ด ๊ทธ๋ํ๋ก ๋๋๋ ์๋๋ฆฌ์ค๊ฐ ํ์๋์ง ์๊ณ ์ด๋ค ๊ฒฝ๊ณ ๊ท์น์์ ์ ๋ํ๋์ง๋ ๋ชจ๋ฆ ๋๋ค(๋ง์ฐ์ค ์ค๋ฒํ์ง ์์).
์ฃผ๋ก #6557 ๋ฐ #6553์ ์ง์ํ๊ณ @alex-phillips์ ์ ์ฌํ ๋ค์ค ์๊ณ๊ฐ์ ์ง์ํ๊ณ ์ถ์ต๋๋ค. ์๋ฅผ ๋ค์ด #6557์ ๋ํ ํ ๊ฐ์ง ์ฌ์ฉ ์ฌ๋ก๋ ์ฌ๋ฌ ์๊ณ๊ฐ๊ณผ ๊ฒฐํฉํ์ฌ ๋ค์ํ ํ๊ฒฝ( production
, beta
, dev
๋ฑ)์ ๋ํด ๋ค๋ฅด๊ฒ ๊ฒฝ๊ณ ํ๋ ๊ฒ์
๋๋ค. ๋๋ถ๋ถ์ ๋ฌธ์ ๋ฅผ ํด๊ฒฐํฉ๋๋ค. ์ฌ๋ฌ ๊ท์น ์์ด ์ด๋ฅผ ์ํํ๋ ๋ ์ข์ ๋ฐฉ๋ฒ์ด ์๋ค๋ฉด ๊ทธ๊ฒ์ ๋์๊ฒ ๋ถ๋ช
ํ์ง ์์ต๋๋ค.
@torkelo
๊ทธ๋ํ๋น ์ฌ๋ฌ ๊ฒฝ๊ณ ๊ฐ ์๋ํ๊ณ ํ์๋๋ ๋ฐฉ์์ ์ค๋ช ํ ์ ์์ต๋๊น? ์ฃผ์์ ๋ฌด์์ ๋งํ๊ณ ํจ๋ ์ ๋ชฉ ์์ ๋ น์/๋นจ๊ฐ์ ํํธ๊ฐ ํ์๋ฉ๋๊น(2/5 ๊ฒฝ๊ณ ๊ท์น์ด ์คํ๋๋ ๊ฒฝ์ฐ)?
@pdf ์์ ์ ์ํ ์ ๊ทผ ๋ฐฉ์์ด ๋ง์์ ๋ญ๋๋ค.
๋ํ ์ฃผ์์ ํ์ํ๋ ์ ๊ทผ ๋ฐฉ์์ 1๊ฐ ์ด์์ ์กฐ๊ฑด(๊ฐ๊ฐ ๋ค๋ฅธ ์๊ณ๊ฐ์ ๊ฐ์ง)์ด ์๋ ๊ฒฝ๊ณ ๊ท์น์ด ์๋ ํ์ฌ์ ๊ฒฝ์ฐ์ ๋์ผํฉ๋๋ค. ๊ทธ๋ฆฌ๊ณ ํจ๋ ์ ๋ชฉ ์์ ๋ น์/๋นจ๊ฐ์ ํํธ๋ ๋นจ๊ฐ์์ผ๋ก ํ์๋ฉ๋๋ค(์ต์ํ ํ๋์ ๊ฒฝ๊ณ ๊ฐ ์คํ ์ค์ธ ๊ฒฝ์ฐ). ์ด๋ ๊ฒฝ๊ณ ๊ท์น์ ํ๋ ์ด์์ ์กฐ๊ฑด์ด true๋ก ํ๊ฐ๋๋ ํ์ฌ ์๋๋ฆฌ์ค์ ์ ์ฌํฉ๋๋ค. ๊ทธ๋ฆฌ๊ณ ์๋ง๋ ์ ๋ชฉ์ ๋นจ๊ฐ ํํธ์ ํจ๊ป ์ซ์(2/5)๋ ํ์๋ ๊ฒ์ ๋๋ค.
๊ฒฝ๊ณ ๊ท์น ๊ฐ์ ๋ฌด์ธ๊ฐ๋ฅผ ๊ณต์ ํ๊ณ ์ถ์ต๋๊น, ์๋๋ฉด ์์ ํ ๊ฒฉ๋ฆฌ๋์ด ์์ต๋๊น(๊ฐ์ ๊ทธ๋ํ ํจ๋์ ์๊ณ ๋์ผํ ์ฟผ๋ฆฌ๋ฅผ ์ฐธ์กฐํ ์ ์๋ ๊ฒ ์ธ์).
๋๋ถ๋ถ์ ์ฌ์ฉ ์ฌ๋ก์์ ์ด๋ฌํ ๊ท์น์ ๊ท์น ๊ฐ์ ์๋ฌด ๊ฒ๋ ๊ณต์ ํ์ง ์์ผ๋ฉฐ ์ฟผ๋ฆฌ๋ ๋ค๋ฆ ๋๋ค.
์ฌ๋ฌ ๊ฒฝ๊ณ ๊ท์น์ด ์๋ ๊ฒฝ์ฐ ์๊ณ๊ฐ์ ์ด๋ป๊ฒ ์๊ฐํํ์๊ฒ ์ต๋๊น? ๊ฒฝ๊ณ ๊ท์น ํ์ด์ง ๋ฐ ๊ฒฝ๊ณ ๋ชฉ๋ก ํจ๋์ ๋ณ๋์ ๊ท์น์ผ๋ก ํ์๋ฉ๋๊น? ๊ทธ๋ฐ ๋ค์ ๊ฒฝ๊ณ ํญ๋ฟ๋ง ์๋๋ผ ๊ท์น์ ํน์ ์ธ์คํด์ค๋ก ์ด๋ํ๋ ๋ฐฉ๋ฒ์ด ํ์ํฉ๋๋ค.
๊ฒฝ๊ณ ํ์ด์ง์ ๋ณ๋์ ๊ท์น์ผ๋ก ํ์๋ฉ๋๋ค. ๊ฒฝ๊ณ ํญ์๋ ๊ฒฝ๊ณ ๋ชฉ๋ก์ด ์ ์๋์ด ์์ ์ ์์ต๋๋ค. ์๊ฒ ์ต๋๋ค. ์๋ฆผ์์ ์๋ฆผ ๊ท์น URL(์๋ฆผ ID ๋๋ ์ธ๋ฑ์ค๋ฅผ ์บก์ฒํด์ผ ํจ)์ ์ก์ธ์คํ ๋ ์ด ํญ์์ ํน์ ์๋ฆผ ๊ท์น์ ๊ฐ์กฐ ํ์/ํ์ฅํด์ผ ํฉ๋๋ค. ์ฝ๊ฒ ํด๊ฒฐํ ์ ์์ ๊ฒ ๊ฐ์ต๋๋ค.
๊ฒฝ๊ณ ๋ชฉ๋ก ํจ๋์๋ ๋ณ๊ฒฝ ์ฌํญ์ด ์์ต๋๋ค. ๋ชจ๋ ๋ฐ๋ก๋ฐ๋ก ๋ณด์ฌ์ค๋๋ค. ์๋ฏธ์ ๊ฐ ๊ฒฝ๊ณ ๋ ๋ณ๊ฐ์ ๋๋ค. ๊ทธ๋ฅ ๊ฐ์ ํจ๋์ ๋ฐฐ์น๋์์ต๋๋ค.
๋๊ตฐ๊ฐ ์ด๊ฒ์ด ์ข์ ๊ตฌ์ฒด์ ์ธ ์๊ฐ ์์ต๋๊น? ์ด๋ค ๋ฉํธ๋ฆญ ๋ฐ ๊ฒฝ๊ณ ๊ธฐ๋ก ์ฃผ์๊ณผ ๊ด๋ จ์ด ์๋์ง ๋ชจ๋ฅด๋ 2-5๊ฐ์ ์๊ณ๊ฐ์ด ์๋ ํผ๋์ค๋ฌ์ด ๊ทธ๋ํ๋ก ๋๋๋ ์๋๋ฆฌ์ค๊ฐ ํ์๋์ง ์๊ณ ์ด๋ค ๊ฒฝ๊ณ ๊ท์น์์ ์ ๋ํ๋์ง๋ ๋ชจ๋ฆ ๋๋ค(๋ง์ฐ์ค ์ค๋ฒํ์ง ์์).
๋ง์ ์ฌ๋๋ค์ด ์ด ๊ธฐ๋ฅ์ ์ฐฌ์ฑํ๋ฅผ ๋์ก๋ค๋ ์ ์ ์๊ฐํ๋ฉด ๋ถ๋ช ์ ์ฉํ ๊ธฐ๋ฅ์ผ ๊ฒ์ ๋๋ค. ์ฌ๋ฌ ๊ฒฝ๊ณ ์ ๋ํ ์ง์์ด ์๋ค๋ฉด ํผ๋์ค๋ฌ์ด์ง ์๋์ง๋ ๊ฐ ์ฌ์ฉ์์ ์ธ์์ ๋ฌ๋ ค ์๋ค๊ณ ์๊ฐํฉ๋๋ค. IMHO, ํผ๋์ค๋ฝ๋ค๊ณ ์๊ฐํ๋ ์ฌ๋๋ค์ ๊ฐ ๊ทธ๋ํ์ ๋ํด ๋ณ๋์ ํจ๋์ ์ฌ์ฉํ๋ ํ์ฌ ์ ๊ทผ ๋ฐฉ์์ ์ฌ์ฉํ ๊ฒ์ด๊ณ , ์๊ฐํ ๋ฐ ๊ฒฝ๊ณ ์ ๋์ผํ ํจ๋์ ์ฌ์ฉํ๋ ๊ฒ์ ์ ์ฉ์ฑ/ํธ์์ฑ์ด ์ธ์ง๋ ํผ๋๋ณด๋ค ์ค์ํ๋ค๊ณ ์๊ฐํ๋ ์ฌ๋๋ค์ ๋ค์ค ๊ฒฝ๊ณ ๋ฐฉ์์ผ๋ก ๊ฐ ๊ฒ์ ๋๋ค. . ๋ฌผ๋ก UX๋ ๋ค์ ๋ณ๊ฒฝ๋ ๊ฒ์ ๋๋ค.
splunk์๋ ๋์/๋ฎ์ ๊ฒฝ๊ณ ๊ฐ ์์ต๋๋ค. grafana์์ ์ฌ๋ฌ ๊ฒฝ๊ณ ๋ฅผ ์ฌ์ฉํ ์ ์๋ ๊ฒฝ์ฐ ๋์ผํ ๊ฒ์์ ์ฌ์ฉํ๊ณ ๋์ผํ ๊ฒ์์ ๋ํด ๋ค๋ฅธ ์๊ณ๊ฐ์ผ ๋ฟ์ ๋๋ค.
์ด ๊ธฐ๋ฅ์ ๋ํด +1์ ๋๋ค.
์ด๊ฒ์ ๋ํด +1. ์ฌ์ฉ ์ฌ๋ก๋ ๋ค์๊ณผ ๊ฐ์ต๋๋ค. ์๋ฅผ ๋ค์ด ๋ชจ๋ ์๋ฒ์ ๋ํ CPU ์ฌ์ฉ๋์ด ํฌํจ๋ ํ๋์ ์ฐจํธ๋ฅผ ์ ์ํ๋ ค๊ณ ํฉ๋๋ค. ๊ทธ๋ฐ ๋ค์ ๋์ผํ ์ฐจํธ์์ ๋ ๊ฐ์ ์จ๊ฒจ์ง ๋ฉํธ๋ฆญ์ ๋ง๋ค ๊ฒ์ ๋๋ค. ํ๋๋ ํ๋ก๋์ ์๋ฒ์ CPU ์ฌ์ฉ๋์ด๊ณ ๋ค๋ฅธ ํ๋๋ ๋นํ๋ก๋์ ์๋ฒ์ CPU ์ฌ์ฉ๋์ ๋๋ค. ์ด๋ฌํ ๊ฐ ๋ฉํธ๋ฆญ์๋ ์๋ก ๋ค๋ฅธ ์๋ฆผ ์ฑ๋๊ณผ ํจ๊ป ์์ฒด ๊ฒฝ๊ณ ๊ฐ ์์ต๋๋ค. ์ด๋ฅผ ์ํํ๊ธฐ ์ํด ์ฌ๋ฌ ์ฐจํธ, ํจ๋ ๋๋ ๋์๋ณด๋๋ฅผ ๋ง๋ค ํ์๊ฐ ์์ต๋๋ค.
์ด ๊ธฐ๋ฅ์ ๋ํด +1์ ๋๋ค.
๋ฒ์ฃผ ๋ฐ ์ฌ๊ฐ๋์ ๊ดํ ๋ค๋ฅธ ๋ฌธ์ ๋ฅผ ์ฝ๊ณ ์ฌ๊ธฐ์ ์์ต๋๋ค. ๋ชจ๋ ๊ฒฝ๊ณ ๊ฐ ์คํ ๊ฐ๋ฅํด์ผ ํ๋ค๋ ๋ฐ ๋์ํฉ๋๋ค. ๊ทธ๋ฌ๋ "์์นจ์ ์ด ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ์ญ์์ค" ๊ฒฝ๊ณ ์ "์๊ฐ๋น $400 ์ปจ์คํดํธ๋ฅผ ์ต๋ํ ๋นจ๋ฆฌ ๋ถ๋ฌ๋ด์ญ์์ค" ๊ฒฝ๊ณ ์ฌ์ด์๋ ์ฐจ์ด๊ฐ ์์ต๋๋ค.
๋ง์ ์ฌ๋๋ค์ด ์ธ๊ธํ๋ฏ์ด ์ด๊ฒ์ ๊ฒฝ๊ณ ๋ฐ ์ํ ์๊ณ๊ฐ์ผ๋ก ๊ฐ์ฅ ์ผ๋ฐ์ ์ผ๋ก ํด๊ฒฐ๋ฉ๋๋ค.
๊ธฐ์ ์ ์ผ๋ก ์ด๊ฒ์ ๋ ์ด๋ธ, ํจ๋๋น ์ฌ๋ฌ ๊ฒฝ๊ณ , ๊ฒฝ๊ณ ๋น ์ฌ๋ฌ ์๊ณ๊ฐ ๋ฑ ๋ค์ํ ๋ฐฉ์์ผ๋ก ๊ตฌํ๋ ์ ์์ต๋๋ค.
๋ถ๋ฅ๊ฐ ๋ณต์กํ ๊ฒฝ์ฐ ํผ๋๊ณผ ๊ด๋ จํ์ฌ Warning/Critical ์ค์ ์ ๊ฐ๋จํ Red/Yellow๋ฅผ ์ฌ์ฉํ ์ ์์ต๋๋ค. ๋นจ๊ฐ์์ด ๋ ธ๋์๋ณด๋ค ์ฐ์ ํฉ๋๋ค.
๋ ๋ณต์กํ ์ค์ ์ ๊ฒฝ์ฐ ๋ฌธ์ ๊ฐ ๋๋ ์๊ณ์ด์ ์ฐพ๊ธฐ ์ํด ๋ง์ฐ์ค๋ฅผ ๊ฐ์ ธ๊ฐ๋ ๊ฒ ์ธ์ ๋ค๋ฅธ ์ต์ ์ ๊น๋ฐ์ด๋ ์ /์์ญ/๋ฌด์์ด๋ ๋ ์ ์์ต๋๋ค. ๊ทธ๋ฌ๋ฉด ์ฌ๋ฐ๋ฅธ ์๊ณ์ด์ ์ฝ๊ฒ ์ฃผ์๋ฅผ ๋ ์ ์์ต๋๋ค.
ํ์ง๋ง ๋๋ถ๋ถ์ ์ฌ์ฉ์๋ ์๋นํ ๊ฐ๋จํ ๊ฒฝ๊ณ /์น๋ช ํ ๋ถ๋ฆฌ์ ๋ง์กฑํ ๊ฒ์ด๋ผ๊ณ ์๊ฐํฉ๋๋ค.
์ด๊ฒ์ ๊ฒฝ๊ณ ์ํํธ์จ์ด, ํนํ ์๋ฒ ๋ชจ๋ํฐ๋ง์ ๊ฒฝ์ฐ ์ ๋์ ์ผ๋ก ํ์ํฉ๋๋ค. ๋์คํฌ ๊ณต๊ฐ, ๋ฉ๋ชจ๋ฆฌ, CPU ์ฌ์ฉ๋, ์จ๋, ํ๊ท ๋ก๋... ๋ชจ๋ ์๊ณ๊ฐ์ด ๋ค๋ฅธ ์ฌ๋ฌ ๋ฉ์์ง๋ก ๊ตฌ์ฑ๋ ์ฌ๋ฌ ๊ฒฝ๊ณ ๊ฐ ํ์ํ ์ฃผ์ ์์ ๋๋ค. ์๋ฅผ ๋ค์ด ๋์คํฌ ๊ณต๊ฐ์ ์ฌ์ฉํ์ญ์์ค. ๋์คํฌ ์ฌ์ฉ๋์ด 70%๋ฅผ ์ด๊ณผํ๋ ๊ฒฝ์ฐ ํ๋์ ๊ฒฝ๊ณ ๊ฐ ํ์ํ๊ณ ๋์คํฌ ์ฌ์ฉ๋์ด 90%๋ฅผ ์ด๊ณผํ๋ ๊ฒฝ์ฐ ๋ค๋ฅธ ๊ฒฝ๊ณ ๊ฐ ํ์ํฉ๋๋ค.
์ฝ๊ฐ์ ์์ธ์ ์ธ ๊ฒฝ์ฐ์ง๋ง ์ ํ์ด ๋ฉฐ์น ๋์ ํ๋งค๋์ง ์์ผ๋ฉด ๊ฒฝ๊ณ ๋ฅผ ์ฌ์ฉํ์ฌ ์๋ ค์ค๋๋ค. ๊ฐ ์ ํ์ ๋ฉํธ๋ฆญ์ผ๋ก ์ฌ์ฉํ๋ฏ๋ก ๋ฉํธ๋ฆญ ์ค ํ๋๊ฐ ๊ฒฝ๊ณ ์๊ณ๊ฐ์ ๋ค์ด๊ฐ ๋ ํ๋์ ๊ฒฝ๊ณ ๋ง ๋ฐ์ต๋๋ค. ์ด์์ ์ผ๋ก๋ ๊ฒฝ๊ณ ์ ๊ฒฝ๊ณ ์๊ณ๊ฐ์ ์ง์ ํ ์ถ๊ฐ ๋ฉํธ๋ฆญ์ด ํ์๋๋ ๊ฒฝ์ฐ ๊ฒฝ๊ณ ๋ฅผ ์์ ํ๋ ๊ฒ์ด ์ข์ต๋๋ค.
๋ํ ํ
ํ๋ฆฟ ๋ณ์๋ฅผ ์ฌ์ฉํ์ฌ ์ผ์ชฝ ๋ฐ ์ค๋ฅธ์ชฝ y์ถ์ ๋ ๊ฐ์ ๋ฉํธ๋ฆญ(๋ณผ๋ฅจ ๋ฐ ์ด ๋ง์ง)์ ์ค๋ฒ๋ ์ดํ์ฌ ์ ํํ ๊ฐ ์ ํ์ ๋ํ ๊ทธ๋ํ๋ฅผ ๋ฐ๋ณตํ๊ณ ์์ต๋๋ค. ๊ฒฝ๊ณ ์ฟผ๋ฆฌ๊ฐ IN ($sku)
์ ๋ํ $sku
๋ชฉ๋ก ๋ณ์๋ฅผ ์ ํํ์ง ์๊ธฐ ๋๋ฌธ์ ๊ฒฝ๊ณ ๋ฅผ ์ฌ์ฉํ ๊ฐ๋ฅ์ฑ์ด ์์ต๋๋ค.
์ด ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๊ธฐ ์ํด ํ
ํ๋ฆฟ ์ฟผ๋ฆฌ๋ฅผ ์คํํ์ฌ ๊ด์ฌ ์๋ ๋ชจ๋ sku๋ฅผ ์กฐํํ๊ณ ๊ฒฝ๊ณ ์ฟผ๋ฆฌ IN (SELECT skus from interested_product_table)
์ ๋ฐ๋ก ๋ฃ๋ ๋ค๋ฅธ ์ฟผ๋ฆฌ B
๋ฅผ ์๋ํ์ต๋๋ค. ๊ทธ๋ฌ๋ ์ด๋ ๊ฒ ํ๋ฉด ๊ฐ ๊ทธ๋ํ์ ๋ชจ๋ ๋ฉํธ๋ฆญ์ ๋ํด ๊ฐ ๊ทธ๋ํ์ ๋ํ ๊ฒฝ๊ณ ๊ฐ ์ ์ก๋๊ธฐ ์์ํฉ๋๋ค. ์ด๋ ๋ค์์ ์๋ฏธํฉ๋๋ค.
Email Alert 1 - metric1,metric2,metric3
Email Alert 2 - metric1,metric2,metric3
Email Alert 3 - metric1,metric2,metric3
Email Alert 4 - metric1,metric2,metric3
Email Alert 5 - metric4
Email Alert 6 - metric4
Email Alert 7 - metric4
Email Alert 8 - metric4
์๋ฅผ ๋ค์ด ์๋นํ ์คํธ์ ๋๋ค.
๊ธฐ๋ฅ์ด ํ์๋ผ๋ ๋ฐ ์ ์ ์ผ๋ก ๋์ํ๊ณ ๋ชจ๋ ์๋ฆผ์ด ์คํ ๊ฐ๋ฅํด์ผ ํ๋ค๋ ๋ฐ ์ ์ ์ผ๋ก ๋์ํ์ง ์์ต๋๋ค.
๊ฐ์ฅ ๊ฐ๋จํ ์๋ ๊ฒฝ๊ณ ๋ฅผ ๋ฐ์์ ์ ์์ผ๋ฉฐ ๋ค์ ๋ ์์นจ๊ณผ ๊ฐ์ด ๊ฐ๋ฅํ ํ ๋นจ๋ฆฌ ์กฐ์น๋ฅผ ์ทจํด์ผ ํ๋ ๋ฐ๋ฉด ํ๋ก๋์ ์๋ฒ๋ฅผ ์์ ํ๊ธฐ ์ํด ํ๋ฐค์ค์๋ ์ผ์ด๋์ผ ํ๋ ๋ค๋ฅธ ์ ํ์ ๊ฒฝ๊ณ ๊ฐ ์๋ค๋ ๊ฒ์ ๋๋ค.
๋ด ๋ ์ผํธ๋ฅผ ๋์ง๊ณ - ๋๋ ์ด ๊ธฐ๋ฅ์ ๊ฐ๊ณ ์ถ์ต๋๋ค.
๋ค๋ฅธ ํํธ๋ ๋ค๋ฅธ ์์์ ํํธ๋ ํ์ํ์ง ์์ต๋๋ค(๊ทธ๋ํ์ ๋ชจ๋ ๊ฒฝ๊ณ ๋ ๋นจ๊ฐ์์ด๋ฉด ๊ด์ฐฎ์). ๋ค๋ฅธ ์ด๋ฆ์ ์ํ๋ ์ด๋ฉ์ผ ์๋ฆผ์ ๋๋ค.
์ด ๊ธฐ๋ฅ์ ์ถ๊ฐํด ์ฃผ์ธ์. ์ด์ ๊ฐ์ ์ฌ์ฉ ์ฌ๋ก์ ๊ฒฝ์ฐ
ํ๋์ ๊ทธ๋ํ์์
๊ฐ > X --> ์ฌ์ ๊ฐ ์๋ ๊ฒฝ์ฐ
๊ฐ > X+Y --> PD์ธ ๊ฒฝ์ฐ
์ฌ๊ธฐ์๋ ๊ฐ๋ฅํ ๊ฒฝ์ฐ ์ํํ ์์ ์ ์ง์ ํด์ผ ํ๋ ์คํ ๊ฐ๋ฅํ ๊ฒฝ๊ณ ์ ๋ํ ์ ์ฑ ์ด ์์ต๋๋ค. ์ธก์ ํญ๋ชฉ์ด ๋๋ฌด ๋ฎ๊ฑฐ๋ ๋๋ฌด ๋์ผ๋ฉด ์ทจํด์ผ ํ ์กฐ์น๊ฐ ๋ค๋ฆ ๋๋ค.
์: RDS CPU๊ฐ ๋๋ฌด ๋ฎ์ต๋๊น? ๋์์ ๋ํด ์ฌ๊ธฐ์์ ๋ค๋ฅธ ์คํ์ ํ์ธํ์ญ์์ค. ๋๋ฌด ๋์? ์ธ์คํด์ค๋ฅผ ํ์ฅํฉ๋๋ค.
๋ค๋ฅธ ์ฌ๋๋ค๊ณผ ๋ง์ฐฌ๊ฐ์ง๋ก ์ฐ๋ฆฌ๋ ๋ํ ์๋ก ๋ค๋ฅธ ์๊ณ๊ฐ์์ ์๋ก ๋ค๋ฅธ ์ ํ์ ๊ฒฝ๊ณ ๋ฅผ ๊ฐ๊ณ ์ถ์ดํฉ๋๋ค.
@jdblack๊ณผ ์ ์ฌํ๊ฒ ๋์ ๋ฌผ ๊ฒฝ๊ณ ์์ค๊ณผ ๋์ ๋ฌผ ๋น์ ์์ค์ ์ํฉ๋๋ค. ๋ ๊ฐ์ ์ฟผ๋ฆฌ๋ก ์ํํ ์ ์๋ค๋ ๊ฒ์ ์๊ณ ์์ง๋ง ์ง๊ด์ ์ด๊ฑฐ๋ ๋งค๋๋ฝ์ง ์์ต๋๋ค.
Autoscaling ์์คํ ์ ์ ํธ๋ฅผ ๋ณด๋ด๋ ๋ฐฉ๋ฒ์ผ๋ก Grafana๋ฅผ ์ฌ์ฉํ ์๊ฐ์ด์์ต๋๋ค. ๋ฉํธ๋ฆญ์ด ๋๋ฌด ๋ฎ์ผ๋ฉด ์ถ์ํ๋ผ๋ ๋ฉ์์ง๊ฐ ํฌํจ๋ ์นํ ์ ๋ณด๋ด๊ณ , ๋๋ฌด ๋์ผ๋ฉด ํ์ฅํ๋ผ๋ ๋ฉ์์ง์ ํจ๊ป ์นํ ์ ๋ณด๋ ๋๋ค. ์ฌ๋ฌ ๊ฒฝ๊ณ ๊ฐ ์์ผ๋ฉด ์ด๊ฒ์ด ๊ฐ๋ฅํ์ง ์๋ค๊ณ ์๊ฐํฉ๋๋ค. ๋๋ ๋ํ "๊ฒฝ๊ณ "์ "์ค์" ์๊ณ๊ฐ์ ๋ํ ์ฌ์ฉ ์ฌ๋ก๊ฐ ์ผ๋ฐ์ ์ด๋ผ๋ ์ค๋ ๋์ ๋ค๋ฅธ ์ฌ๋๋ค๊ณผ ๋์ํฉ๋๋ค.
๊ฒฝ๊ณ ๋ฅผ ๊ทธ๋ํ์ ์ฐ๊ฒฐํ๋ ์์ด๋์ด๋ฅผ ๋ค์ ๊ฒํ ํด์ผ ํฉ๋๊น? ๊ฒฝ๊ณ ๋ฅผ ์์ฑํ ๋ ๋ฉ์ง ๋ฏธ๋ฆฌ๋ณด๊ธฐ ๊ทธ๋ํ์ ํจ๊ป ๊ฒฝ๊ณ ๋ฅผ ๋ณ๋๋ก ์์ฑํด์ผ ํ ์๋ ์์ต๋๋ค. ์ด ๋ถ๋ฆฌ๋ ๊ทธ๋ํ ๋ฉํธ๋ฆญ์ ๋ณ๊ฒฝํ ๋ ๋ ๋ง์ ์์ ์ ์ํํ๋๋ก ๋ง๋ค ์ ์์ง๋ง ์ ์ด๋ ์ฌ๋ฌ ๊ฒฝ๊ณ ๋ฅผ ๋ง๋๋ ๋ฐ ๋ ๋ง์ ์ ์ฐ์ฑ์ ๊ฐ๊ฒ ๋ฉ๋๋ค.
์ผ์ ๋คํธ์ํฌ์ Grafana + Influx๋ฅผ ์ฌ์ฉํ๋ ค๊ณ ํ์ต๋๋ค. ๋์๋ณด๋๋ ๊ฒฝ๊ณ ๋ฅผ ์ ์ธํ๊ณ ๋ ๊ฝค ์ ์๋ํฉ๋๋ค. Sensor123์ด ํน์ ์๊ณ๊ฐ์ ์ด๊ณผํ๋ฉด ๊ฒฝ๊ณ ๋ฅผ ๋ฐ์์ผ ํฉ๋๋ค. ์ฐจํธ๋ ํ์ ์๊ณ ๊ฒฝ๊ณ ๋ง ์์ผ๋ฉด ๋ฉ๋๋ค. ๋ํ ์ ์ฌ์ ์ผ๋ก 1000๊ฐ์ ์ผ์๊ฐ ์์ด์ผ ํฉ๋๋ค. "๋ชจ๋ " ์ผ์๊ฐ ์๊ณ๊ฐ์ ์ด๊ณผํ๋ ๊ฒฝ์ฐ ๊ฒฝ๊ณ ๋ฅผ ์ค์ ํ ์ ์์ง๋ง ์ด๋ค ์ผ์๊ฐ ๊ฒฝ๊ณ ํ๋์ง ์์์ผ ํฉ๋๋ค. ํน์ ์ผ์๋ฅผ ๋ณด๊ธฐ ์ํด ํ ํ๋ฆฟ ๋ณ์๋ก ๋์๋ณด๋๋ฅผ ์ค์ ํ์ง๋ง ํ ํ๋ฆฟ ๋ณ์์ ๋ํ ๊ฒฝ๊ณ ๋ฅผ ์ถ๊ฐํ ์ ์์ต๋๋ค. ํ ์คํธ๋ฅผ ์ํด ๋๋ ์๋ฌด๋ ๋ณด์ง ์๋ ์ถ๊ฐ ๋์๋ณด๋์์ ์์์ ์ผ์์ ๋ํ ์์์ ๊ฒฝ๋ณด๋ฅผ ์ค์ ํ์ง๋ง ์์ผ๋ก๋ ๊ฒฝ๋ณด์ ๋ํด ๋ค๋ฅธ ์๋ฃจ์ ์ด ํ์ํฉ๋๋ค.
@torkelo , ์ด์ ๋ํ ๊ณต์ ๋ ผํ ์ดํ 1๋ ์ด ๊ฐ๊น์์ง๊ณ ์์ต๋๋ค. ๊ฒฝ๊ณ ์์คํ ์ด ํ๋์ ์ฌ์ฉ๋์ง ์์๊ธฐ ๋๋ฌธ์ ๊ณต์ ํ ์ ์๋ ์ ๋ฐ์ดํธ๊ฐ ์๋์ง ๊ถ๊ธํ์ญ๋๊น?
@MakoSDV ํด๋น ์ฌ์ฉ ์ฌ๋ก์ kapacitor ์ฌ์ฉ์ ๊ณ ๋ คํด์ผ ํฉ๋๋ค.
์ด ๊ธฐ๋ฅ์ ๋ํด +1; 2๋จ๊ณ ๊ฒฝ๊ณ ์๋ ์ ๋ง ์ ์ฉํ ๊ฒ์ ๋๋ค(์: ๋ฌด์ธ๊ฐ > X = ๋ ธ๋์ ๊ฒฝ๊ณ , ๋ฌด์ธ๊ฐ > Y = ๋นจ๊ฐ์ ๊ฒฝ๊ณ )
์๋ฆผ์ ๋ณด๋ค ์ ์ฐํ๊ฒ ๋ง๋ค๊ธฐ ์ํด +1
๋๋ฐฉ ๋ณด์ผ๋ฌ์ ์จ๋ ๊ทธ๋ํ๋ฅผ ๋ชจ๋ํฐ๋งํฉ๋๋ค. ๋ฎ์ ์จ๋ ์๊ณ๊ฐ์ ์ฌ์ํ ๊ฒ์ด๋ฉฐ ์ค์ํ์ง ์์ ์๋ฆผ ์ฑ๋๋ก ์ด๋ํด์ผ ํ์ง๋ง ๋์ ์จ๋๋ ๊ธด๊ธํ๊ณ ๊ธด๊ธ ์ฑ๋์ ํตํด ์์๊ฑฐ๋ ค์ผ ํฉ๋๋ค. ์ฌ๋ฌ ๊ฒฝ๊ณ ๊ท์น์ ์ฌ๊ธฐ์์ ๋ง์ ์๋ฏธ๊ฐ ์์ต๋๋ค.
์ด ๋ฌธ์ ๊ฐ ๋ฒ๋ ค์ง ๊ฒ์ฒ๋ผ ๋ณด์ด๋ ๊ฒ์ ์ ๊ฐ์ ๋๋ค. ์ฐ๋ฆฌ๊ฐ ์ด๋ป๊ฒ ๊ฐ๋ฐ์์ ๊ด์ฌ์ ๋ ์ ์๋์ง ์๋ ์ฌ๋์ด ์์ต๋๊น?
UI ์ธก๋ฉด์์ ๋ณด๋ฉด ์ฌ์ ์๊ฐ ๊ตฌํ๋๋ ๋ฐฉ์์ผ๋ก ๊ฒฝ๊ณ ๋ฅผ ๊ตฌํํ์ฌ UI๋ฅผ ๋ง์ด ๋ณ๊ฒฝํ์ง ์๊ณ ๋ ํ๋ ์ด์์ ๊ฒฝ๊ณ ๋ฅผ ํ์ฉํ๋ ๊ฒ์ด ๋น๊ต์ ์ฌ์ธ ๊ฒ์ ๋๋ค.
@Gaibhne ์ ๋ค์๊ณผ ๊ฐ์ด ์ผ์ต๋๋ค.
์ฐ๋ฆฌ๊ฐ ์ด๋ป๊ฒ ๊ฐ๋ฐ์์ ๊ด์ฌ์ ๋ ์ ์๋์ง ์๋ ์ฌ๋์ด ์์ต๋๊น?
์ง์ ๋น์ฉ์ ์ง๋ถํ์๊ฒ ์ต๋๊น? ์ฌ๊ฐํ ๊ฒฝ๊ณ ๊ด๋ จ ๊ฒฐํจ์ ๋ํด ์ฌ์ฉํ ์ ์๋ ๋ฆฌ์์ค๊ฐ ์๋ ๊ฒ์ฒ๋ผ ๋ณด์ด์ง๋ง ์๋ ๋์ Github ์ฌ์ฉ์๊ฐ ํ๊ฐํ ๊ฐ์ฅ ๋์ ๋ฌธ์ ๋ก ๋จ์ ์์ต๋๋ค.
์ด ์์ฒญ์ ๋ํด +1์ ๋๋ค.
ํตํฉ ์ธ๋ถ ์๋น์ค์ ๋ํ ์์ฒญ์ด Grafana์์ ์์ฑํ ๊ทธ๋ํ์ ์๊ฐ ์ด๊ณผ์ ๋ํด ์ฑ์ ์นด์ดํฐ๊ฐ ์ค์ ๋์ด ์์ต๋๋ค.
์๊ฐ ์ด๊ณผ๊ฐ ๋ช ๋ฒ ๋ฐ์ํ์ฌ ๋์ค์ ์ด์ ๋ํด ์ธ๋ถ ์๋น์ค๋ฅผ ์ถ์ ํ ์ ์๋๋ก ์๊ณ ์ถ์ ๊ฒฝ์ฐ, ์๊ฐ ์ด๊ณผ๊ฐ ๋ง์ ๊ฒฝ์ฐ ์ฑ์ด ๋๋ถ๋ถ์ ๊ณ ๊ฐ์๊ฒ ์ํฅ์ ๋ฏธ์ณค์ ๊ฐ๋ฅ์ฑ์ด ์์ผ๋ฏ๋ก ์๋ตํด์ผ ํฉ๋๋ค. ๊ทธ๋ฆฌ๊ณ ์ฆ์ ์ฒ๋ฆฌํฉ๋๋ค.
์ด๊ฒ๋ +1.
ํ์ฌ ๊ทธ๋ํ์ ๋ํด ๋ ๊ฐ์ ๊ฐ๋ณ ๊ฒฝ๊ณ ๋ฅผ ์ค์ ํ๋ ค๊ณ ํฉ๋๋ค.
ํ์ฌ ๋ด๊ฐ ์ดํดํ๊ธฐ๋ก๋ ์ด๋ฅผ ์ํํ๋ ค๋ฉด ๋์ผํ ๋ฐ์ดํฐ์ ๋ํด ๋ ๊ฐ์ ๊ฐ๋ณ ๊ทธ๋ํ๋ฅผ ๋ง๋ค์ด์ผ ํฉ๋๋ค. ๋์ผํ ๊ทธ๋ํ์์ ์ฌ๋ฌ ๊ฐ์ ์๋ก ๋ค๋ฅธ ๊ฒฝ๊ณ ๊ฐ ์๋ํ๋ ๊ฒ์ด ๋ ํฉ๋ฆฌ์ ์ ๋๋ค.
@torkelo 2019๋ ๊ณํ์ ๋ํ ์ ๋ฐ์ดํธ๊ฐ ์์ต๋๊น?
+1
ํ์๋ ํ๊ฒฝ ๊ฐ์ ์ ํํ๋ ๋ณ์๋ฅผ ์ฌ์ฉํ์ฌ ์ฌ๋ฌ ํด๋ผ์ด์ธํธ/ํ๊ฒฝ์ ๋ํด ๋์ผํ ๋ง์ดํฌ๋ก์๋น์ค๋ฅผ ๋ชจ๋ํฐ๋งํ๋ ๋์๋ณด๋๊ฐ โโ์์ต๋๋ค.
ํด๋ผ์ด์ธํธ/ํ๊ฒฝ์ ์๋ณํ ์ ์๋๋ก ๊ฒฝ๊ณ ์ ๋ชฉ/ํ ์คํธ์ ๋ณ์๋ฅผ ์ฌ์ฉํ ์ ์๋ค๋ฉด ํ์ฌ์ ๊ณ ํต์ ์ค์ผ ์ ์์ง๋ง ์ฅ๊ธฐ์ ์ผ๋ก๋ ๋์ผํ ๊ทธ๋ํ๋ฅผ ์ฌ์ฉํ์ฌ ์๊ณ๊ฐ์ด ๋ค๋ฅธ ๋ณ๋์ ๊ฒฝ๊ณ ๋ฅผ ์์ฑํ๋ ๊ธฐ๋ฅ์ ์ ๋ง ์ํฉ๋๋ค.
๊ฐ ๊ฒฝ๊ณ ์ ๋ํด ๋ค๋ฅธ ์ฟผ๋ฆฌ๋ฅผ ์ฌ์ฉํด์ผ ํ๊ณ ์ฟผ๋ฆฌ๋ฅผ ๊ทธ๋ํ์ ํ์๋์ง ์๋๋ก ์ค์ ํ๋ ๊ฒฝ์ฐ์๋ ์ข์ ๊ฒ์ ๋๋ค.
@itonlytakeswon ์ ๋ํด ์ค๋ช ํ๋ ๋ด์ฉ๋ https://github.com/grafana/grafana/issues/6557 ๊ณผ ๊ด๋ จ์ด ์๋ ๊ฒ ๊ฐ์ผ๋ฏ๋ก ํด๋น ํญ๋ชฉ๋ ์ถ์ ํ๊ณ ์ถ์ ์ ์์ต๋๋ค. :)
์ด๋ป๊ฒ ์ด๊ฒ์ด ์ด๋ฏธ ๊ธฐ๋ฅ์ด ์๋๊ฐ?
@jsterling7 ์ ์ฐ๋ฆฌ๊ฐ ์ํ๋ ์ฌ์ฉ ์ฌ๋ก๋ฅผ ์๋ฒฝํ๊ฒ ์ค๋ช ํฉ๋๋ค.
@torkelo ๋ชจ๋ ๊ธฐ๋ฅ ๋ฆด๋ฆฌ์ค
์ฌ๋ฌ ๊ฒฝ๊ณ ๋๋ ๊ฒฝ๊ณ ์ ๋ชฉ/๋ณธ๋ฌธ ์ด๋๊ฐ์ ํ๊ทธ ๊ฐ์ ํ์ฉํ๋ฉด ์ด ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ ์ ์์ต๋๋ค. ์ฌ๋ฌ ๋ ๋ฆฝ ์์ค๊ฐ ์๋ ํ๊ทธ๊ฐ ์ง์ ๋ ๋ฉํธ๋ฆญ์ ๋ณด์ฌ์ฃผ๋ ๋จ์ผ ๊ทธ๋ํ๊ฐ ์๊ณ ์ด๋ ๊ฒ์ด ์๊ณ๊ฐ ์๋๋ก ๋จ์ด์ง๋์ง ์๊ณ ์ถ์ต๋๋ค. ๋๋ ์ง๊ธ ์ด๊ฒ์ ๋ฌ์ฑํ๊ธฐ ์ํด ํ์ํ 10๊ฐ์ ๊ฐ๋ณ ๊ทธ๋ํ๋ฅผ ๋ง๋ค๊ณ ์๋๋ฐ, ์ด๊ฒ์ ๊ธฐ๋ฅ์ด ๋๋ฝ๋ ๊ฒ์ฒ๋ผ ๋๊ปด์ง๊ณ ์ฅ๊ธฐ์ ์ผ๋ก ์ ์ง ๊ด๋ฆฌํ๊ธฐ์๋ ์ด์ ํฉ๋๋ค.
์์๊ฐ ๋ง์ ๊ฒ ๊ฐ์๋ฐ ์ด๋ฐ ๊ธฐ๋ฅ์ด ํ์ํ ์ฌ๋ ์ค ํ ๋ช ์ ๋๋ค. ๋๋ ๊ฑฐ์ grafana๋ฅผ ์ฌ๋ํ์ง๋ง ๊ฐ์๊ธฐ์ด ์ ํ์ด ๋๋ฅผ ๋๋๋ค.
๋ด ์ฌ์ฉ ์ฌ๋ก๋ ์ฌ๊ธฐ์์ ์ฐธ์กฐ๋ ๋ค๋ฅธ ์ฌ๋ก ๋ฐ #6557 ๋ฌธ์ ์ ์ ์ฌํฉ๋๋ค. ๋จ์ผ ํ ํ๋ฆฟ ๋์๋ณด๋์์ ๋ชจ๋ํฐ๋ง๋๋ ์ฌ๋ฌ Elasticsearch ํด๋ฌ์คํฐ๊ฐ ์์ต๋๋ค. ๊ฐ๋ณ์ ์ผ๋ก ๊ฒฝ๊ณ ๋ฅผ ํธ๋ฆฌ๊ฑฐํ๊ณ ์ถ์ต๋๋ค. ์ง๊ธ์ ํ๋์ฝ๋ฉ๋ ์ฟผ๋ฆฌ๋ก ๊ทธ๋ํ๋ฅผ ์์ฑํ ์ ์์ง๋ง ์ด ๊ฒฝ๊ณ ๊ฐ ์๋ํ๋๋ก ํ๋ ค๋ฉด ๊ฐ ํด๋ฌ์คํฐ์ ๋ํ ๊ทธ๋ํ๋ฅผ ์์ฑํด์ผ ํฉ๋๋ค...
+1, ์ด๊ฒ์ ์ฐ๋ฆฌ ํ๊ฒฝ์ ํฐ ๋์์ด ๋ ๊ฒ์ ๋๋ค! ๊ทธ๋ํ ์ค์ ๋น ๋ ธ๋์/๋นจ๊ฐ์ 'ํํธ' ๋ ๊ฐ์ง ๊ฒฝ๊ณ ๋ง ์์ด๋ ๋นจ๊ฐ์์ด ํธ๋ฆฌ๊ฑฐ๋๋ฉด ๋ ธ๋์์ด ๋ฌด์๋ฉ๋๋ค.
+1 ๊ฐ ์กฐ๊ฑด์ ์ ํ์ ๊ตฌ์ฑ ๊ฐ๋ฅํ ๊ฒฝ๊ณ ์๋ฆผ์ ํ์ฉํ๊ณ ํน์ ์กฐ๊ฑด์ด ์๋ ๊ฒฝ์ฐ ๊ธฐ๋ณธ ์๋ฆผ ๋ฉ์์ง๋ก ๋์ฒดํ ์ ์๋๋ก ํ์ฉํ๋ ๊ฒ์ด ์ผ๋ง๋ ์ฌ์ํ์ง ๊ถ๊ธํฉ๋๋ค. ๊ฐ์ฅ ๋น ๋ฅธ ๋ฐฉ๋ฒ์ ๋๋ค. ์ ์๊ฐ์๋ ?
+1 ์ฐ๋ฆฌ์๊ฒ๋ ์ ๋ง ์ ์ฉํ ๊ฒ์ ๋๋ค. ์ฌ๋ฌ ๋ณ์์ ๋ํ ํ ํ๋ฆฟ์ด ์๋ ๋์๋ณด๋๊ฐ โโ๋ง์ด ์์ผ๋ฏ๋ก ๊ฒฝ๊ณ ์ด๋ฆ๊ณผ ๊ฒฝ๊ณ ์๋ฆผ ๋ชจ๋์ ๋ํด ํ ํ๋ฆฟ ๋์ฒด๋ฅผ ์ํํ๋ ๊ฒ์ด ์ข์ต๋๋ค.
+1, IMO ์ด๊ฒ์ ๋ชจ๋ ๋ชจ๋ํฐ๋ง ์์คํ ์ ์์ด์ผ ํฉ๋๋ค...๊ฒฝ๊ณ ์ ์ฌ๊ฐ๋๋ฅผ ์๋ณํ๊ณ ๊ทธ์ ๋ฐ๋ผ ๋์ํด์ผ ํ๋ ์ํฉ์ด ๋ง์ด ์์ต๋๋ค. ์ฆ, ๋์ผํ ๋์๋ณด๋์์ ์๊ณ๊ฐ์ด ๋ค๋ฅธ ์ฌ๋ฌ ๊ฒฝ๋ณด๋ฅผ ์๋ฏธํฉ๋๋ค.
๋๋ +1 - ์ด๊ฒ์ด ์ด๋ฏธ ์กด์ฌํ์ง ์๋๋ค๋ ์ฌ์ค์ ๋๋์ต๋๋ค!
+1
์ด ๊ธฐ๋ฅ์ ํ ํ๋ฆฟ ์ฟผ๋ฆฌ ์ง์์ ํ๊ณ์ ๊ด๋ จ์ด ์๋ค๊ณ ์๊ฐํฉ๋๋ค.
์ธ์คํด์ค์ ํ ํ๋ฆฟ์ด ์๋ ์ฟผ๋ฆฌ์ ์ ํ ๋ ์ด๋ธ์ด ์๋ ๋ช ๊ฐ์ง prometheus ๊ณต๊ธ ๊ทธ๋ํ๋ฅผ ์ค์ ํ์ต๋๋ค. ํ ํ๋ฆฟ ๊ฐ์ ๋ํ ๋ณด์ด์ง ์๋ ์ฟผ๋ฆฌ๋ฅผ ๋ง๋ค์ด ํ ํ๋ฆฟ ๋ฌธ์ ๋ฅผ ํด๊ฒฐํฉ๋๋ค.
๊ฐ ํ ํ๋ฆฟ ๊ฐ์ ๋ํด ๋ณ๋์ ์๋ฆผ์ ๋ฐ๊ณ ์ถ์ง๋ง ์ผ๋ฐ์ ์ธ ์ผ๋ฅ ์ ์ธ ์์ +๋ฉ์์ง๊ฐ ํฌํจ๋ ๋จ์ผ ์๋ฆผ์ผ๋ก ์ ํ๋ฉ๋๋ค. ๊ธด OR ๋ชฉ๋ก์ ์ฌ์ฉํ์ฌ ๋ชจ๋ ์ฟผ๋ฆฌ์ ๋ํด ๊ฒฝ๊ณ ํ ์ ์์ง๋ง ์ด๊ฒ์ ์กฐ์กํ ๋๋์ ๋๋ค.
๋์์ ๊ฒฝ๊ณ ์์ค ์ญํ ์ ํ๊ธฐ ์ํด ์๋ฌด๋ ๋ณด์ง ์๋ ์๋ง์ ํจ๋๋ก ๋ณ๋์ ๋์๋ณด๋๋ฅผ ๋ง๋๋ ๊ฒ์ ๋๋ค.
์ฌ๋ฌ ๊ฒฝ๊ณ ์ ๋ํ ์ง์์ ์ถ๊ฐํ๋ ๊ฒ์ ์ ์ฌ์ ์ผ๋ก ํ ํ๋ฆฟ ์ฟผ๋ฆฌ ๊ฒฝ๊ณ ๋ฅผ ์ง์ํ๋ ์ฒซ ๋ฒ์งธ ๋จ๊ณ๊ฐ ๋ ์ ์์ ๊ฒ ๊ฐ์ต๋๋ค.
+1. ์ด๊ฒ์ ํ์ํ์ ๋๋ค!
+1 ์ด๊ฒ์ ๋งค์ฐ ์ ์ฉํฉ๋๋ค
@torkelo "๋ณ๋์ ๊ฒฝ๊ณ ๊ท์น ์ด๋ฆ ๋ฐ ๋ฉ์์ง ๋ฑ์ ์ํ ๊ฒฝ์ฐ ๊ฒฝ๊ณ ์ ๋ํด ๋ณ๋์ ํจ๋์ ๊ฐ๋ ๊ฒ์ด ๋ ํฉ๋ฆฌ์ ์ ๋๋ค."
์ด๊ฒ์ ์๋ฏธ๊ฐ ์์ต๋๋ค. ์ฌ์ฉ์์๊ฒ ์ ์ฉํ ์ผ๋ฐ ๊ฒฝ๊ณ ๋ฉ์์ง๋ฅผ ๋ณด๋ผ ์ ์๋๋ก ๋์ผํ ํจ๋์ ์ฌ๋ฌ ๋ฒ ์๊ฐํํ๋๋ก ์๊ตฌํ๋ ๊ฒ์ ์๋ฃจ์ ์ด ์๋๋๋ค. ๊ธฐ๋ฅ์ด์ด์ผ ํ๋ ๊ฒ์ ๋ํ ํดํน์ด๋ฉฐ, ์ ํ์ ์ ์ฉ์ฑ์ ์ ํ์ํค๋ ๋ ธ์ด์ฆ๋ฅผ ์ถ๊ฐํฉ๋๋ค.
@torkelo "๋ณ๋์ ๊ฒฝ๊ณ ๊ท์น ์ด๋ฆ ๋ฐ ๋ฉ์์ง ๋ฑ์ ์ํ ๊ฒฝ์ฐ ๊ฒฝ๊ณ ์ ๋ํด ๋ณ๋์ ํจ๋์ ๊ฐ๋ ๊ฒ์ด ๋ ํฉ๋ฆฌ์ ์ ๋๋ค."
์ด๊ฒ์ ์๋ฏธ๊ฐ ์์ต๋๋ค. ์ฌ์ฉ์์๊ฒ ์ ์ฉํ ์ผ๋ฐ ๊ฒฝ๊ณ ๋ฉ์์ง๋ฅผ ๋ณด๋ผ ์ ์๋๋ก ๋์ผํ ํจ๋์ ์ฌ๋ฌ ๋ฒ ์๊ฐํํ๋๋ก ์๊ตฌํ๋ ๊ฒ์ ์๋ฃจ์ ์ด ์๋๋๋ค. ๊ธฐ๋ฅ์ด์ด์ผ ํ๋ ๊ฒ์ ๋ํ ํดํน์ด๋ฉฐ, ์ ํ์ ์ ์ฉ์ฑ์ ์ ํ์ํค๋ ๋ ธ์ด์ฆ๋ฅผ ์ถ๊ฐํฉ๋๋ค.
์ ํํ. ํจ๋๋น ์ฌ๋ฌ ๊ฒฝ๊ณ ์ ๋ํด +1
์ฐ๋ฆฌ ์ํฉ์์๋ ๋ฐฐํฐ๋ฆฌ์ ์ ์ ์์ ์ธก์ ํ๊ณ ์์ต๋๋ค(๋ฐฐํฐ๋ฆฌ๋น 16์ ). ๋น๊ต๋ฅผ ์ํด ๋จ์ผ ํจ๋์ 16 ์๋ฆฌ์ฆ๋ฅผ ๊ทธ๋ํ๋ก ํ์ํ๊ณ ๊ฐ ๋ฐฐํฐ๋ฆฌ์ ๋ํด ๋ค๋ฅธ ํจ๋์ ์ฌ์ฉํฉ๋๋ค.
ํจ๋(๊ทธ๋ํ)์ ๋ํ ๋จ์ผ ๊ฒฝ๊ณ ๋ ๊ทธ๋ค์ง ๋์์ด ๋์ง ์์ต๋๋ค. ๊ฒฝ๊ณ ์ ์ ๋ฉ์ผ์ด ์ ์ ์ธก๋ฉด์์ ๋ฒ์๋ฅผ ๋ฒ์ด๋ ์ ์ ๋ํ๋ด๋๋ก ์ ๋น ์ต์ํ ํ๋์ ๊ฒฝ๊ณ ๋ฅผ ์ค์ ํ๋ ๊ธฐ๋ฅ์ด ์ ๋ง๋ก ํ์ํฉ๋๋ค.
์ฐ๋ฆฌ์ ๊ฒฝ์ฐ ํ์ฉ ๊ฐ๋ฅํ ์ ์ ๋ฒ์๊ฐ ๊ฐ ์ ์ ๋ํด ๋์ผํ๊ธฐ ๋๋ฌธ์ ์ํ ๋ฐ ํํ์ ์ ์ํ๊ณ ๊ฐ๋ณ ์ ๋ฒ์๋ฅผ ์ ์๋ ํ๊ณ์ ์ฐ๊ด์ํฌ ์ ์์ผ๋ฉด ์ข์ ๊ฒ์ ๋๋ค.
ํ์ฌ ์ฐ๋ฆฌ๋ ์ ์๋ฆฌ์ฆ์ ๋ํด 16 x OR ๋ฌธ์ ํ๋ก๊ทธ๋๋ฐํด์ผ ํ๊ณ ํ๋ก์ธ์ค์ ๊ฐ ์ ์ ๋ํ ํ๊ณ๋ฅผ (์ฌ)์ ์ํด์ผ ํฉ๋๋ค.
์ด์์ ์ผ๋ก๋ ๊ทธ๋ํ ํจ๋์ ๊ฐ ์ ์ ๋ํ ๊ฒฝ๊ณ ๋ฐ ์ค์ํ ์ด๋ฒคํธ๋ ํ๋ก๊ทธ๋๋ฐํด์ผ ํฉ๋๋ค.
์ฌ์ฉ์๊ฐ ์๋ณํ ์๊ตฌ ์ฌํญ์ ํฌํจํ๋๋ก ๊ฒฝ๊ณ ๊ตฌ์กฐ๋ฅผ ์์ ํด์ผ ํ ๋๋ผ๊ณ ์๊ฐํฉ๋๋ค. ์ด๋ฌํ ์๊ตฌ ์ฌํญ์ ์ผ๋ฐ์ ์ผ๋ก ๊ฒฝ๋ณด๋ฅผ ์์ฑํ๋ SCADA ์์คํ ์์ ๊ตฌํ๋ฉ๋๋ค. ์ ๋ง ๊ทธ๋ฅ ๋ ผ๋ฆฌ ์์ง์ด๊ฒ ์ฃ ?
์ด์ ๋ํ ์ ๋ฐ์ดํธ๊ฐ ์์ต๋๊น? ์ด ๊ธฐ๋ฅ์ ๋๊ท๋ชจ ๋ฐฐํฌ์ ๊ผญ ํ์ํ ๊ธฐ๋ฅ์ด๋ผ๊ณ ์๊ฐํฉ๋๋ค. ํนํ ์๋ฅผ ๋ค์ด ์คํ ๋ฆฌ์ง ์ฌ์ฉ๋์ ๋ณด์ฌ์ฃผ๋ ๋จ์ผ ๊ทธ๋ํ๋ฅผ ์ํ๊ธฐ ๋๋ฌธ์ ์์ฒญ๋ ์์ ๊ทธ๋ํ๊ฐ ์๋ 70%, 80% ๋ฑ์ ๋ํ ๊ฒฝ๊ณ ๋ฅผ ์ํฉ๋๋ค.
๋๋ ์ง๊ธ ์ด๊ฒ์ ์ฐ์ฐํ ๋ฐ๊ฒฌํ๊ณ ์์ง ์ด๊ฒ์ ํ ๋ฐฉ๋ฒ์ด ์๋ค๋ ๊ฒ์ ๋งค์ฐ ๋๋์ต๋๋ค D:
https://github.com/grafana/grafana/pull/20822#issuecomment -561047900์์ ์ด๊ฒ์ด ๋ฏธ๋์ ๊ตฌํ๋์ง ์์ ๊ฒ์ด๋ฉฐ ๊ฒฝ๊ณ ๊ฐ ๋์๋ณด๋์์ ์์ ํ ์ ๊ฑฐ๋๋ ๊ฒ์ฒ๋ผ ๋ค๋ฆฝ๋๋ค.
์ด๊ฒ์ด ๋์๋ณด๋ json ๋ชจ๋ธ์ ์ด๋ค ์ํฅ์ ์ค๋๊น? ์ด ๋ฌธ์ ์ ๋ํด ๋ ๋ง์ ์์์ด ์์ ๋ ์ด์ผ๊ธฐํ ์ ์๋ ์ฌ๋์ด ์์ต๋๊น?
์ ๋ง ํ์ํ ๊ธฐ๋ฅ์ด์์ต๋๋ค. ๋ค๊ฐ์ค๋ ์ํฉ์ ๋ํ ์ ๋ฐ์ดํธ๊ฐ ์์ง ์์ต๋๊น?
ํจ๋๋น ์ฌ๋ฌ ๊ฒฝ๊ณ ์ ๋ํด +1
์ด ๊ธฐ๋ฅ์ ๋ํด +1์ ๋๋ค.
์ ๋ง ํ์ํ ๊ธฐ๋ฅ์ด์์ต๋๋ค. ๋ค๊ฐ์ค๋ ์ํฉ์ ๋ํ ์ ๋ฐ์ดํธ๊ฐ ์์ง ์์ต๋๊น?
์ด ๊ธฐ๋ฅ์ด ํ์ํฉ๋๋ค.
3๋
ํ. (์์ฒญ ๊ฑด์์๋ ๋ถ๊ตฌํ๊ณ ) ์ด๊ฒ์ด ๊ตฌํ๋์ง ์์ ์ด์ ๋ฅผ ์๋ ค์ค ์ ์๋ ์ฌ๋์ด ์์ต๋๊น?
๊ทธ๊ฒ์ ๊ตฌํํ๋ ๊ธฐ์ ์ ์ธ ์ ์ฝ ๋๋ฌธ์
๋๊น? ๊ฑฐ์ ๋นํ์ด? ํ ์ผ์ด์ผ?
์์ ๋งํ๋ฏ์ด '๊ธฐ๋ณธ ๊ธฐ๋ฅ'์ธ ๊ฒ ๊ฐ์ต๋๋ค.
์: ๊ฒฝ๊ณ ๋ฅผ ์ถ๊ฐํ๋ ๊ฒฝ์ฐ 200๊ฐ์ ์๋ฒ๊ฐ ์๋ ๋์๋ณด๋์ ์๋ฆฌ์ฆ๊ฐ ์์ต๋๋ค.
200๊ฐ์ ์๋ฒ ์ค ํ๋๊ฐ ์๋ํ์ง ์์: ๋ฉ์ง๋ค ์ด๋ฆ์ด ํฌํจ๋ ๊ฒฝ๊ณ ๋ฅผ ์์ ํฉ๋๋ค.
์ฃ์กํฉ๋๋ค. ์ ์๋ฒ๊ฐ ์๋ํ์ง ์์ต๋๋ค. ์๋ฆผ ์์(๋๋ ๋์๋ณด๋๋ฅผ ์๋ก ๊ณ ์ณ์ผ ํ๊ฑฐ๋ 24์๊ฐ ํ ์๋ฆผ์ ๊ธฐ๋ค๋ ค์ผ ํฉ๋๋ค.)
์ด๊ฒ์ ์ฐ๋ฆฌ๊ฐ ์๋ฆฌ์ฆ์ ํ๋ณ๋ก('์ ์ฒด' ์๋ฆฌ์ฆ ๋์ ์) ๊ฒฝ๊ณ ๋ฅผ ๋ฐ์ ์ ์๋๋ก ํ์ธํ๋ ์ฒดํฌ๋ฐ์ค์ฒ๋ผ ์ถ๊ฐํ ์ ์์ต๋๊น?
dev, grafana ํ์ ๋๊ตฐ๊ฐ๊ฐ ํผ๋๋ฐฑ์ ๋ํด ๋ต๋ณํ ์ ์๋ค๋ฉด...
์๋ฆผ์ ์ํด prometheus๋ฅผ ์๋ํ๊ณ ๋์๋ณด๋๋ฅผ ์ํํ๊ธฐ ์ํด grafana๋ฅผ ๋จ๊ฒจ๋์๊ฒ ์ต๋๊น?
@beastea Grafana๋ฅผ ์๋์ํค๊ธฐ ์ํด ๋ค๋ฅธ ๋๊ตฌ๋ฅผ ์ค์ ํด์ผ ํ๋ค๋ฉด Grafana๋ฅผ ์ฌ์ฉํ ์๋ฏธ๊ฐ ์์ต๋๋ค. ์ด ๊ธฐ๋ฅ์ด ๊ฑฐ๊ธฐ์ ์กด์ฌํ๊ณ ํ๋์ ๋๊ตฌ์ผ ๋ฟ์ด๊ธฐ ๋๋ฌธ์ ์ฐ๋ฆฌ๋ Datadog์ผ๋ก ์ด๋ํ๊ณ ์์ต๋๋ค.
@anne-nelson ๋ฉํธ๋ฆญ ์์ง๊ธฐ, ๋ฉํธ๋ฆญ ์ ์ฅ์๋ฅผ ์ค์ ํด์ผ ํ๋ฉฐ ์ ์ ํ ์ค์ ์ ์ํด Grafana๊ฐ ์๋ํ๋๋ก HA์ ํจ๊ป ๋์์ผ ํฉ๋๋ค. ๋ง์ฃ ?
Datadog์ ํ๋์ ๋๊ตฌ์ผ ๋ฟ๋ง ์๋๋ผ ์ด๋ฅผ ์จ๊ธฐ๊ณ ์ข์ ์์
์ ์ํํฉ๋๋ค. ๋ํ ์ฌ์ ํ datadog๊ณผ ํจ๊ป grafana๋ฅผ ์ฌ์ฉํ ์ ์์ต๋๋ค. https://grafana.com/grafana/plugins/grafana-datadog-datasource
@beastea ๊ทธ ๋๊ตฌ๊ฐ ๋ฌด์์ธ์ง ์ ๋ชจ๋ฅด๊ฒ ์ด์ ์ฐ๋ฆฌ๊ฐ ์ฌ์ฉํ์ง ์๋ ๊ฒ ๊ฐ์ต๋๋ค. ์ฐ๋ฆฌ์ ๋ฉํธ๋ฆญ์ Influx๋ก ์ ์ก๋๋ฉฐ, Grafana ๋์ Datadog์ผ๋ก ์ ์กํ ๊ฒ์ ๋๋ค. ์ง์ ๋ณด๋ผ ์ ์๋๋ฐ ์ Grafana๋ฅผ ํตํด Datadog์ ๋ณด๋ด๋์? ๊ฐ๋ฅํ ์ต์ํ์ ๋๊ตฌ๋ฅผ ์ฌ์ฉํ๊ณ ์ถ์ต๋๋ค.
@anne-nelson ์ฑ์์ ๋ฉํธ๋ฆญ ํธ์๋ฅผ ๊ตฌํํ ์ ์์ง๋ง ๋๋ก๋ ์ผ๋ถ ์์คํ
๋ฉํธ๋ฆญ๋ ํธ์ํ์ฌ ๋์คํฌ ๋ฐ ๊ธฐํ ํญ๋ชฉ์ ๋ฌด์จ ์ผ์ด ์ผ์ด๋๊ณ ์๋์ง ์ ์ ์๋๋ก ํ๋ ๊ฒ์ด ๋งค์ฐ ์ ์ฉํฉ๋๋ค. ์ด๊ฒ์ telegraf, collectd ๋๋ fluentd์ ๊ฐ์ ์์
์ ์ํํ๋ ์ผ๋ถ ๋ก์ปฌ ๋ฐ๋ชฌ์ธ ๋ฉํธ๋ฆญ ์์ง๊ธฐ๊ฐ ์๋ฏธํ๋ ๊ฒ์
๋๋ค.
์ค์ ์ ์ ์
- ๋ฐ์ดํฐ๋ฅผ ์กฐ์ํ๊ธฐ ์ํด ์ผ๋ถ ๋ด๋ถ ์ ์
์ฟผ๋ฆฌ ์ธ์ด๋ฅผ ์ฌ์ฉํ์ฌ ๊ธฐํ๋ฅผ ์ ๊ณตํ๋ ์์ ๋ฐ์ดํฐ์ ๋ํ ์น UI ํ๋ก ํธ์๋๋ก grafana๋ฅผ ํตํด ๋ฉํธ๋ฆญ์ ์ ์ฅํ๊ณ ๊ฒ์์ ์ํํ ์ ์๋ ํ๋ถํ ๊ธฐ๋ฅ์ ์ ๊ณตํ๋ ๊ฒ์
๋๋ค.
Influx ๋์ Datadog์ ์ฌ์ฉํ๋ ๊ฒฝ์ฐ ์ ํํ ๋์ผํ ๋ฐฉ์์ผ๋ก ์๋ํฉ๋๋ค. ์ฌ๊ธฐ์ Grafana๋ ๋ฐ์ดํฐ ์ก์ธ์ค๋ฅผ ์ํ UI์
๋๋ค. ์ผ๋ฐ ์ค์ ์์. ๋ฐ๋ผ์ ๋ฐ์ดํฐ์ ๋ํด ์๋ฌด ์์
๋ ์ํํ์ง ์๊ณ ๊ทธ๋ํ๋ก ํ์ํ ๋ฟ์
๋๋ค. ๊ทธ๋์ ์ด์จ๋ ์ง์ ๋ณด๋
๋๋ค.
์ค๋ช
ํ๋ฏ์ด inlux๋ก ์์
ํ๋ ๊ฒฝ์ฐ ๋ง์ ๋๋ฌ ๊ธฐ๋ฅ์ ์ ๊ณตํ๊ธฐ ๋๋ฌธ์ ์ค๋ช
ํ ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๊ธฐ ์ํด kapacitor ๋๋ Flux๋ฅผ ์ฌ์ฉํ๋ ๊ฒ์ ๊ณ ๋ คํ์ง ์๋ ๊ฒฝ์ฐ grafana๋ ๊ทํ์๊ฒ ์ ๊ณตํ ์ ์์ผ๋ฉฐ ์ฌ์ ํ ๋์ผํ ๊ณต๊ธ์
์ฒด์์ ์ ๊ณต๋ฉ๋๋ค. ๊ฐ์ ํ๊ฒฝ. Flux๋ ์ ์
๋ฐฐ์ก ํจํค์ง์ ์ผ๋ถ์ด๊ธฐ๋ ํฉ๋๋ค.
์ ๋ง ๋์์ด ๋ ๊ฒ์ ๋๋ค.
@beastea ๋ ์๋ง๋ grafana์์ '๊ฒฝ๊ณ ' ๊ธฐ๋ฅ์ ์ ๊ฑฐํ๊ณ ์ฌ๋๋ค์ ๋ค๋ฅธ ๋๊ตฌ๋ก ๋ง์ด๊ทธ๋ ์ด์
ํ๋ ๊ฒ์ด ๋ ๋์ ๊ฒ์
๋๋ค(์ฌ๋ฌ ๋๊ตฌ์ gaz ๊ณต์ฅ์ ํผํ๊ธฐ ์ํด)?
์ ๋ง์, OK, ์ฐ๋ฆฌ๋ kapacitor, prometheus ๋ฑ์ ์ฌ์ฉํ ์ ์์ต๋๋ค. ๊ทธ๋ฌ๋ ๊ฒฝ๊ณ ๊ธฐ๋ฅ์ ์ด๋ฏธ Grafana์ ์กด์ฌํ๋ฏ๋ก ์ ๊ฒฝ์ฐ์๋ ์๋ฏธ๊ฐ ์์ต๋๋ค.
Btw, ํ๋ณ๋ก ๊ฒฝ๊ณ ํ๋๋ก ์ด ํ์ธ๋์ ์ถ๊ฐํ๋ ๊ฒ์ ๋ฐฉ์งํ๋ ๊ฒ์ ๋ฌด์์ ๋๊น? ์๋ง๋ ์ค๋ช ์ด ์ดํด์ ๋์์ด ๋ ๊ฒ์ ๋๋ค.
@beastea ๋๊ตฐ๊ฐ์๊ฒ Grafana๋ฅผ ์ฌ์ฉํ์ง ๋ง๋ผ๊ณ ์ค๋ํ๋ ๊ฒ์ด ์ ๋ง ์ด์ํ ๊ฒ ๊ฐ์ต๋๋ค.
๊ฒฝ๊ณ ๊ฐ Grafana์ ๊ธฐ๋ฅ์ธ ํ anthosz๊ฐ ์ง์ ํ๋ฏ์ด ๊ทธ๋ํ์ ์ฌ๋ฌ ๊ฒฝ๊ณ ๋ฅผ ์ถ๊ฐํ๋ ๊ธฐ๋ฅ์ ๊ธฐ๋ํ๋ ๊ฒ์ด ํฉ๋ฆฌ์ ์ ๋๋ค. ๊ฒฝ๊ณ ์ Grafana๋ฅผ ์ฌ์ฉํด์๋ ์ ๋๋ค๊ณ ์๊ฐํ๋ค๋ฉด Grafana์ ๊ฒฝ๊ณ ๊ธฐ๋ฅ์ด ์์ด์ผ ํฉ๋๋ค. ๋ง์ ์ฌ๋๋ค์ด ์ด ๊ธฐ๋ฅ์ ์ํ๊ณ ๋ง์ ๊ฒฝ์ ์ ํ์ด ์ด๋ฏธ ์ ๊ณตํ๊ณ ์์์ด ๋ถ๋ช ํฉ๋๋ค. ์์งํ ์ ์ด๋ ๊ฒ ๋ฐ๋๊ฐ ๋ง์์ง ์ดํด๊ฐ ์๋ฉ๋๋ค.
@anne-nelson ์ ๋ ๋๊ตฐ๊ฐ๊ฐ ํ๊ณ ์ถ์ ๋๋ก ํ์ง ๋ง๋ผ๊ณ ์ค๋ํ๋ ค๋ ๊ฒ์ด ์๋๋๋ค. ๋๋ ์ค๋ ์ด๋ฏธ ๋น์ ์๊ฒ ํด๊ฒฐ์ฑ
์ ์ ์ํ ์ ์๋ ๋ค๋ฅธ ๋ฐฉํฅ์ ์ดํด๋ณด๊ธฐ ์ํด ์กฐ์ธ์ ํ๋ ค๊ณ ํฉ๋๋ค.
๋ฌด์์ ์ํด ๋ฌด์์ ์ฌ์ฉํด์ผ ํ๋์ง ์ง์ํ๋ ๊ฒ์ด ์๋๋ผ ์ค๋ ๋ฐ๋ก ์๋ฃจ์
์ ์ ๊ณตํ ์ ์๋ ๋์์ ์ ์ํ๋ ๊ฒ์
๋๋ค. ๋๋ ๋ค๋ก ๋ฏธ๋ฃจ๋ ๊ฒ์ด ์๋๋ผ ์กฐ์ธ์ ํ๋ ๊ฒ์
๋๋ค. ์ ์กฐ์ธ์ด ๋์์ด ๋์ง ์๋๋ค๊ณ ์๊ฐํ์ ๋ค๋ฉด ์ํ๊น์ง๋ง ์ด๊ฒ ๋ฟ์
๋๋ค. ๋ด๊ฐ ๋น์ ์ ์ฑ๊ฐ์๊ฒ ํ๊ณ ๋ด ์ถฉ๊ณ ์ ๋๋ฌด ์ฑ๊ธํ ๊ฒ ๊ฐ์ ๋ฏธ์ํฉ๋๋ค.
์ข์ ์๊ฐ ๋ณด๋ด์ธ์.
@beastea Grafana ์์ ์ผํ ์๋น์ ์ธ ํ๋ ๋๋ฌธ์ ์ถ์ธกํ์ต๋๋ค. ์ด ๊ธฐ๋ฅ์ ๋ง์ ์ฌ๋๋ค๊ณผ ๊ด๋ จ์ด ์์ผ๋ฉฐ ๊ธฐ๋ฅ ์์ฒญ ์ ๋์ฒด ์ ํ์ ์ ์ํ๋ ๊ฒ์ ๋์์ด ๋์ง ์์ผ๋ฉฐ ์ด ํ ๋ก ์ ๋ฐฉํดํฉ๋๋ค. ์ด๊ฒ์ ์คํ ์ค๋ฒํ๋ก๊ฐ ์๋๋๋ค.
๋ชจ๋๊ฐ ๊ทธ๋ฅ ๋๋ค๊ฒจ ๋ฒ๋ฆด ์ ์์ต๋๊น? ๋น์ ์ ์ ์ฌ์ ์ผ๋ก ์๋ฐฑ ๋ช ์๊ฒ ์คํธ์ ๋ณด๋ด๊ณ ์์ต๋๋ค. ์ด๊ฒ์ ์์ฐ์ ์ด์ง ์์ต๋๋ค.
์ถ๊ฐ ์์์ ๋ํด ๋ชจ๋ ์ฃ์กํฉ๋๋ค.
@torkelo ์ด ๊ธฐ๋ฅ ์์ฒญ์ ๋ํ ์ ๋ฐ์ดํธ๋ฅผ ์ ๊ณตํด ์ฃผ์๊ฒ ์ต๋๊น? ์ด ์ฃผ์ ๋ _๋ _ ๋์ ์ด๋ ค ์์๊ณ ๋ณด์๋ค์ํผ ์ฌ์ ํ ๊ด์ฌ์ด ์์ต๋๋ค. ์ต์ํ ํ์ฌ ๋ก๋๋งต์ ์ด๊ฒ์ด ํฌํจ๋์ด ์๋์ง ์ฌ๋ถ์ ๋ํ ์ผ์ข ์ "๊ณต์์ ์ธ" ๋ต๋ณ์ ์ป๊ธฐ ์ํด ์ด ์ฃผ์ ์ ๋ํ ๋ง๋คํผ๊ณผ ๋ถํ์ํ ์ก๋ด์ ์ค์ด๋ ๋ฐ ๋์์ด ๋ ์ ์์ต๋๋ค. ๊ฑด๋ฐฐ.
์ด๊ฒ๊ณผ ์ ์ฌํ #6041์ ์์ ํ ๋ฌด์๋ฉ๋๋ค. ์ด์ ๊ฐ ๊ถ๊ธํฉ๋๋ค.
์ด์ ํ์ด ํ๋ซํผ์ ์๋ก์ด ํตํฉ์ ๋ฑ๋กํ๊ธฐ ๋๋ฌธ์ ์ฐ๋ฆฌ์๊ฒ๋ ์๋ฏธ๊ฐ ์์ต๋๋ค. ์๋์ผ๋ก ๊ทธ๋ํ์ดํธ์ ๋ฉํธ๋ฆญ์ ๋ณด๋ด๊ธฐ ์์ํฉ๋๋ค. ๊ทธ๋ฆฌ๊ณ grafana์์ ๋จ ํ๋์ ํจ๋๋ง์ด ์ด ๋ชจ๋ ๊ฒ์ ๊ฐ์ํฉ๋๋ค.
์ฌ๋ฌ ์์คํ ์ด ๋ค์ด๋๋ฉด ์ฒซ ๋ฒ์งธ ์์คํ ์ ๋ํ ์๋ฆผ๋ง ๋ฐ์ต๋๋ค. ๊ทธ๋ฆฌ๊ณ ๊ทธ๋ค์ง ์ค๋ช ์ ์ด์ง๋ ์์ต๋๋ค.
ํ๋๊ฐ ๋ค์ด๋๊ณ ๋ ๋ฒ์งธ ๊ฒ๋ ๊บผ์ง๋ฉด ๊ฒฝ๊ณ ๊ฐ ๋ค์ ๋ฐ์ํ์ง ์์ต๋๋ค.
์ด์ ๋ํ ์ฌ์ฉ ์ฌ๋ก๋ prometheus ๋ฐ grafana๋ฅผ ํตํด ๋ค์ค ์ฐฝ ๋ค์ค ์ฐ์์จ ๊ฒฝ๊ณ ๋ฅผ ์ ์ํ๋ ๊ฒ์ ๋๋ค. ์ด๋ Google SRE ํธ๋๋ถ( https://landing.google.com/sre/workbook/chapters/alerting-on-slos/ )์ ์ ์๋ ๋๋ก SLO ๋ชจ๋ํฐ๋ง์ ์ํด ์ด๋ฌํ ์ ํ์ ๊ฒฝ๊ณ ๋ฅผ ํ์ํ๋ ํ์ค ๊ดํ์ ๋๋ค.
์ด๊ฑฐ ๋ฌด์กฐ๊ฑด ๋ฐ๋ผํ์ธ์..
๋๋ ๋ํ Prometheus ๊ฒฝ๊ณ ์์ Grafana ๊ฒฝ๊ณ ๋ก ์ฎ๊ฒผ๊ณ ๋๋ ์ด๊ฒ์ ์ ๋์ ์ผ๋ก ๊ณ ๋ํ๊ณ ์์ต๋๋ค!
์ด์ ์ Grafana์์ ์์ ํ ์ ์ด ์๋ ์ฌ๋์ด ์ด ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๋ ๋ฐ ์์ด ์๋ ค์ง ๋ฌธ์ ๋ฅผ ๋์ดํ ์ ์์ต๋๊น?
@torkelo๋ , ์ด ๋ฌธ์ ์ ๋ํด ์๋ ค์ฃผ์ค ์ ์์ต๋๋ค!
7.x๊ฐ ๊ฒฝ๊ณ ์ ๋ํ ๊ฐ์ ์ฌํญ์ด ์๋ ๊ฒ์ ๋ณด๊ณ ์ค๋งํ์ต๋๋ค. ๊ฒฝ๊ณ ๊ฐ ์์ ํ ์ ๊ฑฐ๋์ด์ผ ํ๋ค๋ ์ด์ ์ ์์ ํฌ๋ง์ผ๋ก ์ ๋ฅผ ์ฑ์์ฃผ์ง ์์ง๋ง, ๋ง์ฝ ๊ทธ๋ ๋ค๋ฉด 7.x์์ ๊ฒฝ๊ณ ๋ฅผ ์ ๊ฑฐํ๋ ๊ฒ์ ํ์คํ ๋์์ ๊ฒ์ ๋๋ค. ๊ฐํธ์ ๊ท๋ชจ๋ฅผ ๊ฐ์ํ ๋ ๋ ผ๋ฆฌ์ ์ ๋๊น?
์ด๊ฒ์ด ๊ตฌํํ๊ธฐ ์ด๋ ค์ด ์ด์ ์ ๋ํ ์ ๋ฐ์ดํธ๋ฅผ ๋ฐ๋ ๊ฒ์ด ์ข์ต๋๋ค. ์ด ๋ฌธ์ ๊ฐ ์ค๋ซ๋์ ๊ณต๊ฐ๋ _์ด์ _๋ฅผ ์ดํดํ ์ ์๋๋ก ํ๊ธฐ ์ํด์์ ๋๋ค.
@torkelo ์๋
ํ์ธ์.
๋์ผํ ์๊ตฌ ์ฌํญ์ด ์์ต๋๋ค. ๋จ์ผ ๊ทธ๋ํ์ ๋จ์ผ ๋ฉํธ๋ฆญ์ ๋ํ ์ฌ๋ฌ ๊ฒฝ๊ณ ์ด์ง๋ง ์ฌ๋ฌ ์๋ฒ๊ฐ ๋ชจ๋ํฐ๋ง๋ฉ๋๋ค.
'/' ํํฐ์
์ ์ ์๋ ์ฌ์ ๊ณต๊ฐ ๋ฉํธ๋ฆญ์ด ์๋ ~100๊ฐ์ ์๋ฒ๊ฐ ์์ต๋๋ค(์: ๊ทธ๋ฐ ๋ฉํธ๋ฆญ์ด ์์ญ ๊ฐ ์๊ธฐ ๋๋ฌธ์). ๊ทธ๋ฆฌ๊ณ '/'์ ์ฌ์ ๊ณต๊ฐ์ด 20% ๋ฏธ๋ง์ด ๋๋ฉด ๊ฐ ์๋ฒ์์ ํ๋์ ๊ณ ์ ํ ๊ฒฝ๊ณ ์๋ฆผ์ ๋ฐ์์ผ ํฉ๋๋ค.
์๋ฅผ ๋ค์ด server2๊ฐ ๊ฒฝ๊ณ ๋ฅผ ๋ฐ์์ํค๊ณ ์ฌ๋๋ค์ด ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๋ ๋์ server4๋ ๋์ผํ ๊ฒฝ๊ณ ๋ฅผ ๋ฐ์์ํต๋๋ค. ์ฐ๋ฆฌ๋ ์๋ฆผ์ ๋ฐ์ง ์์ต๋๋ค. ์๋๋ฉด ์ผ๋ถ ๊ธฐ๋ฅ์ด ๋๋ฝ๋์์ต๋๊น?
๋ฉํธ๋ฆญ๋น ์๋ฒ๋น ํจ๋์ ๊ณฑํ๋ ๋ฐฉ์์ ๊ทธ๋ ์ง ์์ต๋๋ค.
๋๊ตฐ๊ฐ ๋์๊ฒ ์กฐ์ธ์ ํด ์ค ์ ์์ต๋๊น? ์ด๊ฒ์ ๊ฐ๋ฅํ๊ฒ ํ๋ ๋ฐฉ๋ฒ์ ๋ฌด์์
๋๊น?
Grafana(ํ์ฌ ๋ฒ์ ์ 6.3.5)๋ฅผ ์
๊ทธ๋ ์ด๋ํด์ผ ํฉ๋๊น? ํ์ฅ ํ๋ก๊ทธ๋จ์ ์ถ๊ฐํ์๊ฒ ์ต๋๊น? ํ๋ฌ๊ทธ์ธ? ๋ค๋ฅธ ๊ฑด ์๋์?
์กฐ์ธํ๊ฑฐ๋ ๋์์ ์ค ์ ์๋ ๋ชจ๋ ์ฌ๋์๊ฒ ๊ฐ์ฌํ๊ณ ๊ฐ์ฌํฉ๋๋ค.
@torkelo ์๋ ํ์ธ์.
๋์ผํ ์๊ตฌ ์ฌํญ์ด ์์ต๋๋ค. ๋จ์ผ ๊ทธ๋ํ์ ๋จ์ผ ๋ฉํธ๋ฆญ์ ๋ํ ์ฌ๋ฌ ๊ฒฝ๊ณ ์ด์ง๋ง ์ฌ๋ฌ ์๋ฒ๊ฐ ๋ชจ๋ํฐ๋ง๋ฉ๋๋ค.
'/' ํํฐ์ ์ ์ ์๋ ์ฌ์ ๊ณต๊ฐ ๋ฉํธ๋ฆญ์ด ์๋ ~100๊ฐ์ ์๋ฒ๊ฐ ์์ต๋๋ค(์: ๊ทธ๋ฐ ๋ฉํธ๋ฆญ์ด ์์ญ ๊ฐ ์๊ธฐ ๋๋ฌธ์). ๊ทธ๋ฆฌ๊ณ '/'์ ์ฌ์ ๊ณต๊ฐ์ด 20% ๋ฏธ๋ง์ด ๋๋ฉด ๊ฐ ์๋ฒ์์ ํ๋์ ๊ณ ์ ํ ๊ฒฝ๊ณ ์๋ฆผ์ ๋ฐ์์ผ ํฉ๋๋ค.
์๋ฅผ ๋ค์ด server2๊ฐ ๊ฒฝ๊ณ ๋ฅผ ๋ฐ์์ํค๊ณ ์ฌ๋๋ค์ด ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๋ ๋์ server4๋ ๋์ผํ ๊ฒฝ๊ณ ๋ฅผ ๋ฐ์์ํต๋๋ค. ์ฐ๋ฆฌ๋ ์๋ฆผ์ ๋ฐ์ง ์์ต๋๋ค. ์๋๋ฉด ์ผ๋ถ ๊ธฐ๋ฅ์ด ๋๋ฝ๋์์ต๋๊น?๋ฉํธ๋ฆญ๋น ์๋ฒ๋น ํจ๋์ ๊ณฑํ๋ ๋ฐฉ์์ ๊ทธ๋ ์ง ์์ต๋๋ค.
๋๊ตฐ๊ฐ ๋์๊ฒ ์กฐ์ธ์ ํด ์ค ์ ์์ต๋๊น? ์ด๊ฒ์ ๊ฐ๋ฅํ๊ฒ ํ๋ ๋ฐฉ๋ฒ์ ๋ฌด์์ ๋๊น?
Grafana(ํ์ฌ ๋ฒ์ ์ 6.3.5)๋ฅผ ์ ๊ทธ๋ ์ด๋ํด์ผ ํฉ๋๊น? ํ์ฅ ํ๋ก๊ทธ๋จ์ ์ถ๊ฐํ์๊ฒ ์ต๋๊น? ํ๋ฌ๊ทธ์ธ? ๋ค๋ฅธ ๊ฑด ์๋์?์กฐ์ธํ๊ฑฐ๋ ๋์์ ์ค ์ ์๋ ๋ชจ๋ ์ฌ๋์๊ฒ ๊ฐ์ฌํ๊ณ ๊ฐ์ฌํฉ๋๋ค.
์ด ๋ฌธ์ ๋ 2017๋ ๋ถํฐ ์์๋์์ต๋๋ค(@torkelo์ ๋ต๋ณ์ ๐คก "๊ฒฝ๋ณด์ ๋ํด ๋ณ๋์ ํจ๋์ ๊ฐ๋ ๊ฒ์ด ๋ ํฉ๋ฆฌ์ ์ ๋๋ค." ๐คก(600๊ฐ์ ์๋ฒ๊ฐ ์์ ๋ ์๋ฒ/๊ฒฝ๊ณ ๋ณ๋ก ํจ๋์ ๋ง๋๋ ๊ฒ์ด ๋งค์ฐ ์ข์ต๋๋ค) ๐คก)์ ๋๋ค.
์ ์ผํ ๋ฐฉ๋ฒ์ Grafana์์ ๋ค๋ฅธ ์๋ฃจ์ ์ผ๋ก ๋ง์ด๊ทธ๋ ์ด์ ํ๊ฑฐ๋ ์ ์ง ๊ด๋ฆฌํ ์ฌ๋ฌ ๋๊ตฌ๋ก gaz ๊ณต์ฅ์ ๋ง๋๋ ๊ฒ์ ๋๋ค.
@anthosz - ์ ๋ง ๊ฐ์ฌํฉ๋๋ค. ๋ฌธ์ ๋ ํ๊ฒฝ์ ์ฐ๋ฆฌ์ ๊ฒ์ด ์๋๋ผ ๊ณ ๊ฐ์ ๊ฒ์ด๊ธฐ ๋๋ฌธ์ ๋ด๊ฐ ์ฃผ๋์ ์ผ๋ก ์ด๊ฒ์ ์ฃผ์ฅํ๊ณ ์์ผ๋ก ๊ณ ๊ฐ์ด "์ด๋ฐ ๋๊ฐ๋ฅผ ์ง๋ถํ์ง ์์ ๊ฒ"์ ๊ทน๋ณตํ๊ธฐ ์ํด ๋ด๊ฐ ์์ฅ์์ ์ฃผ์ฅํ๋ ๊ฒ์ ์ผ์ข
์ ๋งค์ฐ ์ด๋ ค์ด ์์
์ด ๋ ๊ฒ์
๋๋ค. .
๊ทธ๋ฌ๋ ์ ์ด๋ '์ด๋ฐ ๋ฐฉ์์ /๊ฒฝ๋ณด๋ฅผ ๊ตฌ์ฑํ ๊ฐ๋ฅ์ฑ์ด ์์ต๋๋ค.
๋ค์ ํ๋ฒ ๊ฐ์ฌํฉ๋๋ค.
_join(๋ชฉ์๋ฆฌ, ํฉ์ฐฝ๋จ)_
๊ณต๊ธฐ ํํ, ๊ณต์นญ 1.5A ๋ฐ ์ ์ถ ํํ 10Amps๋ฅผ ๋ชจ๋ํฐ๋งํ๋ ํ๋ก์ ์ ๋ฅ ์ผ์๊ฐ ์์ต๋๋ค. ๊ณต๊ธฐ ํํ๋ ์ฐ์ค๋ฌดํด๋ก ์๋ํ๋ฉฐ ์ ์ถ ํํ๋ ํฑํฌ ์์๋ฅผ ๊ธฐ์ค์ผ๋ก ์์ฒญ ์ ์๋ํฉ๋๋ค. ๋ชจ๋ ๊ฒ์ด ์ ์์ผ ๋ ์ ๋ฅ(I)๋ ํ์ ํํ๊ฐ ๊บผ์ ธ ์์ ๋ 1.5A์ด๊ฑฐ๋ ํ์ ํํ๊ฐ ์ผ์ ธ ์์ ๋ 11.5A์
๋๋ค.
์ฒซ ๋ฒ์งธ ์ผ๋ฐ์ ์ธ ๊ณ ์ฅ์ ๊ณต๊ธฐ ํํ๊ฐ ๊ณ ์ฅ๋ฌ์ ๋ ์ ๋ฅ๊ฐ ์๊ฑฐ๋ ๋ฐฐ์ถ ํํ๊ฐ ์๋ ์ค์์ ๊ฐ์งํ๋ (Imax < 0.5A ๋๋ Iavg 9A ~ 11A)์ ์ํด ๊ฒฝ๊ณ ๋๋ ๊ณต๊ธฐ ํํ ์์ง์ ๋๋ค. ์์คํ ์ค๋ฅ๋ฅผ ๋ฐฉ์งํ๋ ค๋ฉด 48์๊ฐ ์ด๋ด์ ํด๊ฒฐํด์ผ ํฉ๋๋ค. ๋ฐ์ดํฐ๋ ๋ถ๋น 1ํฌ์ธํธ์ด๋ฉฐ 90๋ถ ํ์ ๊ฒฝ๊ณ ํฉ๋๋ค.
๋์ผํ ๊ทธ๋ํ์์ ๋ ๋ฒ์งธ๋ก ์ํ๋ ๊ฒฝ๋ณด๋ (Imax > 14A ๋๋ Iavg 2A์์ 9A ์ฌ์ด) ํํํด์ผ ํ ๋ ํ์ ํํ๊ฐ ๋งํ๊ฑฐ๋ ๊ณต๊ธฐ๊ฐ ์ ์ ๋์์์ ๋ํ๋ ๋๋ค. ์ด๊ฒ์ 3์๊ฐ ์ด๋ด์ ํด๊ฒฐํด์ผ ํ ์ ์๋ ํจ์ฌ ๋ ๊ธด๊ธํ ๊ฒฝ๊ณ ์ด๋ฏ๋ก 5๋ถ ํ์ ๊ฒฝ๊ณ ํ๋ ๊ฒ์ด ์ด์์ ์ ๋๋ค.
๋ ๊ฒฝ๊ณ ๋ชจ๋ LoRa๋ฅผ ํตํด ๋ฐ์ดํฐ๋ฅผ ๋ณด๋ด๋ ๋์ผํ ์๊ฒฉ ์ ๋ฅ ์ผ์์์ ๋ฐ์ํฉ๋๋ค. ์ฌ๋ฌ ๊ฒฝ๊ณ ๋ฅผ ์ฌ์ฉํ๋ฉด ๋์ผํ ์ผ์์ ๋ํด ๋์๋ณด๋ ์ฟผ๋ฆฌ๋ฅผ ๋ณต์ ํ์ง ์์๋ ๋ฉ๋๋ค.
@torkelo ๋ค์ค ๊ทธ๋ํ๋ ๋ง์ ์ฌ์ฉ์๊ฐ ํ์ฅํ ์ ์์ต๋๋ค. ์ด๋ ๊ฒ ์ถ๊ฐํ๋ฉด ๋ ๊ฒ ๊ฐ์๋ฐ ์ ์ ๊ณ ๋ คํ์๋์ง ๊ถ๊ธํฉ๋๋ค.
์๋ง๋ ์์ฒญ๋ ์์๊ฐ ์๋ค๋ฉด :)
@torkelo๋ , ์์๊ฐ ๋ง๋ค๊ณ ์๊ฐํ๋ ๊ฒ์ ๋ฌด์์ ๋๊น? 96๊ฐ์ ๋๊ธ๊ณผ 250๊ฐ์ "์ข์์"๊ฐ ์ด๋ง์ด๋งํ๋ฐ์? ์ด๊ฒ์ 8๋ฒ์งธ๋ก ๋ง์ ๋๊ธ์ด ๋ฌ๋ฆฐ ๊ณต๊ฐ ๊ธฐ๋ฅ ์์ฒญ์ด๋ฉฐ ํ๋์ ๋น๊ณต๊ฐ ๊ธฐ๋ฅ ์์ฒญ์๋ง ๊ทธ๋ณด๋ค ๋ ๋ง์ ๋๊ธ์ด ์์ต๋๋ค. ๋ ๋ง์ :+1: ๋ฐ์์ด ์๋ 3๋ฒ์งธ ๊ณต๊ฐ ๊ธฐ๋ฅ ์์ฒญ์ด๊ธฐ๋ ํฉ๋๋ค. ๋ก๋๋งต์ ์ ๋ ฅํ๋ ค๋ฉด ๋ฌด์์ด ํ์ํฉ๋๊น?
@torkelo ์์ฃผ ๊ฐ๋จํ ์ผ์ด์ค ์๋๋ฆฌ์ค๊ฐ ์์ต๋๋ค.
๊ฐ์ด ์๊ณ๊ฐ ์๋๋ก ๋ด๋ ค๊ฐ๋ฉด ๊ฐ์ด (๋ค๋ฅธ) ์๊ณ๊ฐ์ ์ด๊ณผํ ๋์ ๊ฒฝ๊ณ ์ ๋ค๋ฅธ ๊ฒฝ๊ณ ๊ฐ ํ์ํฉ๋๋ค.
๋ค์์ ๋ค๋ฅธ ์๋๋ฆฌ์ค์ ๋๋ค. ์ ์์ ์ธ ์๋ฒ ์๋ฅผ ๋ชจ๋ํฐ๋งํ ๋ 1๊ฐ์ ์๋ฒ๋ฅผ ์์ ๋(10๋ถ ์ด์ ๊ฑธ๋ฆฌ์ง ์๋ ํ ๋ฌธ์ ๊ฐ ๋์ง ์๋ ํฉ๋ฒ์ ์ธ ์ฌ์์)๊ณผ 5๊ฐ์ ์๋ฒ๋ฅผ ์์ ๋ ๋ค๋ฅธ ๊ฒฝ๊ณ ๊ฐ ํ์ํฉ๋๋ค.
์ฌ๊ธฐ์ ๋ ๋ค๋ฅธ ์๋๋ฆฌ์ค๊ฐ ์์ต๋๋ค. ๋๊ธฐ์ด ์ฆ๊ฐ์จ์ด ์๊ณ๊ฐ์ ์ด๊ณผํ๋ฉด ๋ค๋ฅธ ๊ฒฝ๊ณ ๋ฅผ ์ค์ ํ๊ณ ๋๊ธฐ์ด ํฌ๊ธฐ ์์ฒด๊ฐ ์๊ณ๊ฐ์ ์ด๊ณผํ๋ฉด ๋ค๋ฅธ ๊ฒฝ๊ณ ๋ฅผ ์ค์ ํ๊ณ ์ถ์ต๋๋ค.
์๊ฐํ ์ธก๋ฉด์์ ์ปค๋ฎค๋ํฐ๋ ์ฒ์๋ถํฐ ์ด๋ค ์๋ฃจ์ ์ด๋ ๋ง์กฑํ ๊ฒ์ด๋ผ๊ณ ๋ฏฟ์ต๋๋ค. ์๋ฅผ ๋ค์ด ์ฒซ ๋ฒ์งธ ๊ฒฝ๊ณ ๋ง ์๊ฐํํฉ๋๋ค(๋ฐ๋ผ์ UI ๋ณ๊ฒฝ์ด ํ์ํ์ง ์์). ์ด๋ค ๊ฒฝ๊ณ ๊ฐ ํธ๋ฆฌ๊ฑฐ๋์๋์ง ์๋ ค์ฃผ๋ ์์ง์ ์ผ๋ก ๋ชจ๋ ๊ฒฝ๊ณ ๋ฅผ ์๊ฐํํฉ๋๋ค. ํน์ ์๋ฆฌ์ฆ ๋ฑ ์๋ก ๋ง์ฐ์ค๋ฅผ ๊ฐ์ ธ๊ฐ๋ฉด ์๊ณ๊ฐ/๊ฒฝ๊ณ ๋ง ํ์ํฉ๋๋ค.
๊ทธ๋ฅ ๋ด 2 ์ผํธ.
์ฌ๋ณด์ธ์!
์ฌ๊ธฐ์์ ์ฐจ์๋ฒจ์ ์ธ๋ฆฌ๊ณ ์ถ์์ต๋๋ค. ์ฐ๋ฆฌ(Spotify)๋ ์ด๊ฒ์ ํ์๋ก ํฉ๋๋ค.
์ฐ๋ฆฌ๋ ํ์ฌ Grafana์์ ๊ฒฝ๊ณ ๋ฅผ ์์ฑํ๋ ์์ฒด ๊ฒฝ๊ณ ์์ง๊ณผ ์๊ณ์ด๋ณ๋ก ๊ฒฝ๊ณ ๋ฅผ ์คํํ๊ณ ์์ต๋๋ค. ํ์ฌ ์๊ณ์ด๋ณ ๊ฒฝ๊ณ ์ฃผ์์ ๋ค์ grafana๋ก ํธ์ํฉ๋๋ค.
๋ฐ๋ผ์ UI ์ธก๋ฉด์์ ๊ฒฝ๊ณ ํ๋ ์ฒซ ๋ฒ์งธ ์๊ณ์ด์ ํจ๋/๊ฒฝ๊ณ ๊ฐ "๊ฒฝ๊ณ " ์ํ๋ก ์ ํ๋๊ณ ๊ฐ ํ์ ๊ฒฝ๊ณ ๊ฐ ์์ด๊ฒ ๋ฉ๋๋ค(์ํ ๊ธฐ๋ก์๋ ๊ฒฝ๊ณ ์ ๋ํ ์ฌ๋ฌ ์ ๋ฐ์ดํธ๊ฐ ํ์๋๊ณ ๋ง์ฐฌ๊ฐ์ง๋ก ์ฌ๋ฌ ๋ณ๊ฒฝ ์ฌํญ์ด ํ์๋ฉ๋๋ค. "ํ์ธ"์ผ๋ก ๋์๊ฐ๊ธฐ)
์ด๊ฒ์ด ์ฐ๋ฆฌ๊ฐ ํญ์ ๊ฒฝ๊ณ ๋ฅผ ์ํํ๋ ๋ฐฉ์์ด๋ฏ๋ก "ํ์"ํ๋ฏ๋ก ์๊ณ์ด๋ณ ๊ฒฝ๊ณ ์์ ๋ฉ์ด์ง๋ ๊ฒ์ ~10,000๊ฐ์ ๊ฒฝ๊ณ ์ ๋ํด ์์ฒญ๋ ์ฌํ์ ๋ณํ๊ฐ ๋ ๊ฒ์ ๋๋ค. ์ฐ๋ฆฌ๋ Grafana ๊ธฐ๋ณธ ์๋ฆผ์ ์ฌ์ฉ ๋ฐ ์ฑํํ๊ณ ์ด๋ฅผ ์ง์ํ๊ธฐ ์ํด ๋ฐ์ดํฐ ์์ค๋ฅผ ์ ๋ฐ์ดํธํ๊ณ ์ถ์ต๋๋ค.
์ฌ๊ธฐ์์ ์ฐจ์๋ฒจ์ ์ธ๋ฆฌ๊ณ ์ถ์์ต๋๋ค. ์ฐ๋ฆฌ(Spotify)๋ ์ด๊ฒ์ ํ์๋ก ํฉ๋๋ค.
๊ทธ๋ผํ๋ ์ํฐํ๋ผ์ด์ฆ๋ ์ฌ์ฉํ์ จ๋์? ๊ฐ๋ฐ์๋ฅผ ๋๊ณ ๋๊ธฐ๋ฅผ ๋ถ์ฌํ ์ ์์ต๋๋ค =)
์ฐ๋ฆฌ๋ ๋ํ ๊ฐ์ ๊ทธ๋ํ์์ ์ฌ๋ฌ ๊ฒฝ๊ณ ๋ฅผ ํธ๋ฆฌ๊ฑฐํ๋ ๊ธฐ๋ฅ์ธ ์ด ๊ธฐ๋ฅ์ ๋ณด๊ณ ์ถ์ต๋๋ค. "์๋" ๋ฐ "์" ์ํ์์ ํธ๋ฆฌ๊ฑฐํ ์ ์๋ ๊ธฐ๋ฅ์ ์ ๊ณตํ๊ณ ๋ณด๋ค ์ค์ํ ์๊ณ๊ฐ ์๋ฐ์ ์์ ์ค์ ๋ก ํฉ์ ๊ฒฝ๊ณ ๊ฐ ๋ ๊ฐ๋ฅ์ฑ์ด ์์ต๋๋ค.
์ฐ๋ฆฌ๋ ํ์ฌ Grafana์์ ๊ฒฝ๊ณ ๋ฅผ ์์ฑํ๋ ์์ฒด ๊ฒฝ๊ณ ์์ง๊ณผ ์๊ณ์ด๋ณ๋ก ๊ฒฝ๊ณ ๋ฅผ ์คํํ๊ณ ์์ต๋๋ค. ํ์ฌ ์๊ณ์ด๋ณ ๊ฒฝ๊ณ ์ฃผ์์ ๋ค์ grafana๋ก ํธ์ํฉ๋๋ค.
@sjoeboo ์ฌ๊ธฐ์ ์ฃผ์ ์์ ์กฐ๊ธ ๋ฒ์ด๋์ง๋ง ๊ณต๊ฐ์ ์ผ๋ก ์ฌ์ฉํ ์ ์๋ ๊ฒ์ด ์์ต๋๊น?
@vbichov ์์ง , ์ฐ๋ฆฌ๋ ์๋ฆผ ์์ง์ ์คํ์์คํํ๊ณ ์ถ์ง๋ง, ์๊ฐ์ ์ ๋์ ์ ๋๋ค. ์ฃผ์์ ํตํด ๊ฒฝ๋ณด์ ์๊ณ์ด๋ณ ์ถ์ ์ ๊ฐ๋ฅํ๊ฒ ํ๋ (๊ฑฐ์ ์ด์์ ์ด์ง ์์) ๋ด๋ถ ํฌํฌ์ ์๋ ํจ์น๋ฅผ ๊ณต์ ํ ์ ์๋ค๊ณ ํ์ ํฉ๋๋ค.
์ฐธ๊ณ ๋ก ๊ฒฝ๊ณ ์์ง์ ํ์ฌ TSDB์๋ง ์ ์ฉ๋ฉ๋๋ค(https://github.com/spotify/heroic).
์ด ๊ธฐ๋ฅ์ ๋ํด +1์ ๋๋ค. ์ด๊ฒ์ ๊ฒฝ๊ณ /์ค์์ ๊ฐ์ ๊ฒ์ ๋๋ค. ์ฐ๋ฆฌ๋ ์ถ์ด ๋ ๋๋น ์ง๊ธฐ ์ ์ ๊ฒฝ๊ณ ๋ฅผ ๋ฐ๊ณ ์ถ์ต๋๋ค. ๊ทธ๋ฐ ๋ค์ ์ฆ๊ฐ์ ์ธ ์กฐ์น๋ฅผ ์ทจํ๊ธฐ ์ํด ์ค์ํ ๊ฒฝ๊ณ ๋ฅผ ๋ฐ์์ผ ํฉ๋๋ค.
์ฌ์ฉ์์ ์์ฒญ์ด 3๋ ์ด ์ง๋ ํ์๋ ์ด๊ฒ์ด ๊ตฌํ๋์ง ์์๋ค๋ ์ฌ์ค์ ๋๋์ต๋๋ค.
์ฌ๋ฌ ํจ๋(๊ฐ ๊ฒฝ๊ณ ์ ๋ํด ํ๋์ฉ)์ ๋ง๋ค์ด์ผ ํ๋ ๊ฒ์ ๋์๋ณด๋๋ฅผ ๋งํ๊ฒ ํ๊ณ ์ ๊ฒฝ๊ณ ๋ฅผ ์ถ๊ฐํด์ผ ํ๋ ๊ฒ๋ณด๋ค ํจ์ฌ ๋ ๋ณต์กํ๊ฒ ๋ง๋ญ๋๋ค.
ํจ๋๋น ํ๋ ์ด์์ ๊ฒฝ๊ณ ๋ฅผ ์ ์ํ ์ ์๋ ๊ฒฝ์ฐ ๊ฒฝ๊ณ ํญ์ 1์ด ํ์๋๋ ์ด์ ๊ฐ ํญ์ ๊ถ๊ธํฉ๋๋ค. ์ฟผ๋ฆฌ ํญ์์ ์ด ์ซ์๋ ์ ์๋ ์ฟผ๋ฆฌ ์๋ ํ์ํฉ๋๋ค. ๊ทธ๋์ ๋๋ ํญ์ ์ด๊ฒ์ด ๊ฐ๋ฅํ๋ค๊ณ ์๊ฐํ๊ณ ์ด๊ฒ์ด ์์ง ๊ฐ๋ฅํ์ง ์๋ค๋ ๊ฒ์ ๋งค์ฐ ๋๋์ต๋๋ค.
์ด๊ฒ์ด ์์ง ๊ตฌํ๋์ง ์์ ๊ฒ์ด ํฅ๋ฏธ๋กญ์ต๋๋ค. ๊ฒฝ๊ณ ํญ์ "์นด์ดํธ"๊ฐ ์ฌ๋ฌ ๊ฐ์ผ ์ ์๋ค๊ณ ๋ฏฟ๊ฒ ํ๊ธฐ ๋๋ฌธ์ ์คํด์ ์์ง๊ฐ ์๋ค๋ ์ ์ ๋์ํฉ๋๋ค. ๋ํ ๊ฒฝ๊ณ ๊ท์น์ ๋ฐ๋ผ ํจ๋์ ๊ฐ๋ ๊ฒ์ ์ฝ๊ฐ ์ฐ์ค๊ฝ์ค๋ฝ์ต๋๋ค. ์ฆ, ๊ฒฝ๊ณ ์ฉ ํจ๋์ ๋ถ๊ณผํ "์ธ๋ชจ ์๋" ๋์๋ณด๋๊ฐ โโ์๋ค๋ ์๋ฏธ์ ๋๋ค. ๊ทธ๊ฒ์ ํ์คํ ์ง์ ๋ถํ ๋์๋ณด๋์ด์ง๋ง ์ด๊ฒ์ ๊ตฌํํ๋ ์ ์ผํ ๋ฐฉ๋ฒ์ ๋๋ค. ์ฃผ๋ก ์ด๋ฆ ๋ฐ/๋๋ ์๋ฆผ ๋์ ์กฐํฉ์ ๋ํด ๋ค๋ฅธ ๊ท์น์ ๊ฐ์ง ์ ์๋๋ก ํ๊ธฐ ์ํ ๊ฒ์ ๋๋ค. ํ๋ง๋๋ก ๋ณต์กํฉ๋๋ค.
์๋ฃ ๋์์ต๋๊น?
Grafana ๋ฒ์ = 4.x
์ด์ Grafana ๋ฒ์ ์ด 7.x๋ก ์ด๋ํ๊ณ ์ด ๊ธฐ๋ฅ์ ๋ณด์ง ๋ชปํ์ต๋๋ค.
์๋ฃ ๋์์ต๋๊น?
Grafana ๋ฒ์ = 4.x์ด์ Grafana ๋ฒ์ ์ด 7.x๋ก ์ด๋ํ๊ณ ์ด ๊ธฐ๋ฅ์ ๋ณด์ง ๋ชปํ์ต๋๋ค.
๋๋ฌด ์์งํด์๐
์ด ๊ธฐ๋ฅ์ ๋ํด +1์
๋๋ค.
๋จ์ผ ์ธก์ ํญ๋ชฉ์ ๋ํด
๋ง์ ๊ฐ๋จํ ๊ธฐ๋ฅ์ด ์ด ๊ทธ๋ฃน์ ์ํด ์ง์์ ์ผ๋ก ๊ฑฐ๋ถ๋์์ต๋๋ค. ๋ค๋ฅธ ๋ง์ ๊ธฐ๋ฅ ์์ฒญ์ ํ์ธํ์ญ์์ค. ์ด๊ฒ์ ๊ธฐ๋ณธ์ ์ธ ๊ฒ ๊ฐ์ต๋๋ค.
๋ค๋ฅธ ์๋ฅผ ๋ค๊ฒ ์ต๋๋ค.
์ ๋ ์๋๋ก์ง๋ฅผ ์คํํ๊ณ ์์ผ๋ฉฐ ์ด์ ๋ํด ๊ฒฝ๊ณ ํ๊ณ ์ถ์ต๋๋ค. Raid Status์ ์ ์ ๊ฐ์ 1์ ๋๋ค. ๊ทธ๋ฌ๋ Degraded ๊ฐ์ 11์ด๊ณ Crashed ๊ฐ์ 12์ ๋๋ค. Degraded๋ ๋ฐ์ดํฐ์ ๊ณ์ ์ก์ธ์คํ ์ ์์์ ์๋ฏธํฉ๋๋ค. ์ถฉ๋์ ๋ฐ์ดํฐ ์์ค ๊ฐ๋ฅ์ฑ์ด ๋์์ ์๋ฏธํฉ๋๋ค.
Raid๊ฐ ์ฑ๋ฅ ์ ํ๋ ๊ฒฝ์ฐ ๊ฒฝ๊ณ ๋ฅผ ๋ณด๋ด๊ณ Raid๊ฐ ์ถฉ๋ํ ๊ฒฝ์ฐ ์ฌ๊ฐํ ๊ฒฝ๋ณด๋ฅผ ๋ณด๋ด๊ณ ์ถ์ต๋๋ค.
์ฌ๋ฌ ๋ณผ๋ฅจ๊ณผ ์คํ ๋ฆฌ์ง ํ์ด ์๊ณ ๊ฐ๊ฐ์ ๋ํด ์ฌ๋ฌ ๊ทธ๋ํ๋ฅผ ์๊ตฌํ๋ ๊ฒ์ ํ์ฅํ ์ ์์ต๋๋ค.
์ด๊ฒ์ ๋์คํฌ ๊ณต๊ฐ ์ฌ์ฉ๊ณผ ๊ฐ์ ๊ฐ๋จํ ์์
์๋ ์ ์ฉํ ์ ์์ต๋๋ค.
๋์คํฌ ์ฌ์ฉ๋์ด 80%์ ๋๋ฌํ๋ฉด ๊ฒฝ๊ณ ๋ฅผ ๋ณด๋ด๊ณ ๋์คํฌ ์ฌ์ฉ๋์ด 90%์ ๋๋ฌํ๋ฉด ์ํ ๊ฒฝ๋ณด๋ฅผ ๋ณด๋ด๊ณ ์ถ์ต๋๋ค. ๊ฐ ๋์คํฌ์ ๋ํด ์ฌ๋ฌ ๊ทธ๋ํ๋ฅผ ์ํํ๋ ๊ฒ์ ํฉ๋ฆฌ์ ์ธ ์๊ตฌ๊ฐ ์๋๋๋ค.
๊ทธ๋ฆฌ๊ณ UI์์ ์ด๊ฒ ์ด๋ ต๋ค๋ ๋๊ธ์ด ์ดํด๊ฐ ์๊ฐ๋ค์. ๋์๋ณด๋ ๋ชฉ๋ก๊ณผ ์ ์ฌํ ๊ฒ์ด ์ด๋ฏธ ์์ต๋๋ค. ๊ฒฝ๊ณ ํญ์ ํด๋ฆญํ๋ฉด ํ๋จ์ "์ ๊ฒฝ๊ณ ์์ฑ" ๋ฒํผ๊ณผ ํจ๊ป ๊ฒฝ๊ณ ๊ท์น ๋ชฉ๋ก์ด ์ด๋ฆ๋ณ๋ก ํ์๋์ด์ผ ํฉ๋๋ค. ๊ฐ ๊ฒฝ๊ณ ๊ท์น์ ์ค๋ฅธ์ชฝ์๋ "ํธ์ง", "๋นํ์ฑํ" ๋๋ "์ญ์ " ์ต์ ์ด ์์ด์ผ ํฉ๋๋ค. ๊ฒฝ๊ณ ๋ฅผ ํด๋ฆญํ๊ฑฐ๋ ํธ์ง ๋ฒํผ์ ํด๋ฆญํ๋ฉด ํ์๋์ง๋ง ํด๋น ํน์ ๊ฒฝ๊ณ ๊ท์น์ ๋ํ ๊ธฐ์กด ํธ์ง ํ์ด์ง๋ก ์ด๋ํด์ผ ํฉ๋๋ค.
๊ฐ ๋์คํฌ์ ๋ํด ์ฌ๋ฌ ๊ทธ๋ํ๋ฅผ ์ํํ๋ ๊ฒ์ ํฉ๋ฆฌ์ ์ธ ์๊ตฌ๊ฐ ์๋๋๋ค.
API๋ฅผ ์ฌ์ฉํ์ฌ ๋์๋ณด๋ ๋ฐ ์๋ฆผ ์์ฑ/์ ๋ฐ์ดํธ๋ฅผ ์๋ํํ ์ ์์ต๋๋ค. ์ํ๋ ๊ฒฝ์ฐ ์ฃผ๊ธฐ์ ์ผ๋ก ์ฟผ๋ฆฌ๋ฅผ ์คํํ์ฌ prometheus(๋๋ ๊ฐ์ง๊ณ ์๋ ์์ค)๋ฅผ ์ฟผ๋ฆฌํ๋ ํ๋ก๊ทธ๋จ์ ์์ฑํ์ฌ ์๋น์ค๊ฐ ๋์์ ๊ฒ์ํ๊ณ ์๋์ผ๋ก ๊ฒฝ๊ณ ๋ฅผ ์์ฑํ ์ ์์ต๋๋ค.
์ด ๋ฌธ์ ์ ๋ํ ์์ฒญ๋ ํผ๋๋ฐฑ๊ณผ ํจ๊ป ์ด ๊ธฐ๋ฅ์ด ์์ง ๊ตฌํ๋์ง ์์๋ค๋ ์ฌ์ค์ด ๋๋์ต๋๋ค.
์ ๋ Magellan Telescopes์์ ์๊ฐํ ๋ฐ ๊ฒฝ๊ณ ์์ง์ผ๋ก Grafana๋ฅผ ์ฌ์ฉํฉ๋๋ค. ํ๋์ ํ๋กฏ์ ๋ชจ๋ ํฌํจํ ์ ์๋ ํน์ฑ์ ๊ณต์ ํ๋ ์ฌ๋ฌ ํ์ ์์คํ ์ด ์๋ ๊ฒฝ์ฐ ๋ฌธ์ ๊ฐ ๋ฐ์ํ๊ณ ํ๋๊ฐ ์๋ชป ๋์ํ๊ธฐ ์์ํ๋ฉด ๋ด ์ฌ์ฉ์๋ ์คํจํ ๊ฒฝ๊ณ ์ ๋ฐ๊ตด์ ๋ฐ์์ผ ํฉ๋๋ค.
๋๋ฏธ ํ๋กฏ์ ๋ง๋๋ ๊ฒ์ ํด๊ฒฐ์ฑ ์ด ์๋๋ผ ํด๊ฒฐ ๋ฐฉ๋ฒ์ ๋๋ค. ์ด๊ฑด ๊ธฐ๋ณธ์ธ๋ฏ!
+1 ํ์ํ ๊ธฐ๋ฅ
+1
OP์ ๋๊ฐ์ ์ํฉ์ ๋๋ค. ์ด๋ฏธ ๊ตฌํํ์ด์ผ ํ๋ ๊ธฐ๋ณธ ๊ธฐ๋ฅ์ ๋๋ค.
์ฌ๋๋ค์ด ๊ฐ์น ์๋ ๊ฒ์ ์ถ๊ฐํ์ง ์๊ณ ์ด ์ค๋ ๋ ๋ฌธ์ ์ ์คํธ์ ์ค์งํ ์ ์์ต๋๊น?
๋ฌธ์ ์๋จ์ ๋ฐ์์ ์ฌ์ฉํ์ฌ ๊ด์ฌ์ ํ์ํ์ญ์์ค.
https://github.com/grafana/grafana/issues?q=is%3Aissue+is%3Aopen+sort%3Areactions-%2B1-desc ๋ ์ ์ง ๊ด๋ฆฌ์๊ฐ ์คํธ์ ๋ณด๋ด๋ ์ฌ๋๋ค๋ณด๋ค "์ธ๊ธฐ ์๋" ๋ฌธ์ ๋ฅผ ์ฃผ์ฅํ๋ ๋ฐ ํจ์ฌ ๋ ์ ์ฉํฉ๋๋ค. ๋ฌธ์ ์ค๋ช ๋ง ๋ด๋ ์ด๋ฏธ ๋ช ํํ ์ ๋ณด๊ฐ ํฌํจ๋ ๋ชจ๋ ์ฌ๋์ด ๋ฐ์ ํธ์งํจ๊ณผ github ์๋ฆผ์ ์ด๋ฉ์ผ๋ก ๋ณด๋ ๋๋ค.
๊ทธ๊ฒ์ด ๋๋ฌด ๊ธฐ๋ณธ์ ์ธ ๊ฒ์ด๋ผ๋ฉด ์๋ง๋ ๋ค๋ฅธ ์ฌ๋๋ค์ด ๋ฌด๋ฃ๋ก ์ผํ๊ธฐ๋ฅผ ๊ธฐ๋ํ๋ ๋ชจ๋ ๋ถ๋ง ์ ๊ธฐ์ ์ค ๋๊ตฐ๊ฐ๊ฐ ์ด๊ฒ์ ์ค์ค๋ก ๊ตฌํํ๊ณ ํ ๋ฆฌํ์คํธ๋ฅผ ํ๊ฑฐ๋ ๋ฉ์ธํ ์ด๋๊ฐ ์ ์คํธ๋ฆผ์์ ์ํ์ง ์๋ ๊ฒฝ์ฐ ์์ฒด ํฌํฌ๋ฅผ ์ ์งํด์ผ ํ ๊ฒ์ ๋๋ค.
@thomasf "๊ฐ์น ์๋ ๊ฒ์ ์ถ๊ฐํ์ง ์๊ณ ์ด ์ค๋ ๋ ๋ฌธ์ ์ ์คํธ์ ์ค์งํ ์ ์์ต๋๊น?" - ๋น์ ์ด ๊ทธ๋ฌ๋ ๊ฒ์ฒ๋ผ?
๋ฉ์ธํ
์ด๋๊ฐ ์ฌ์ ํ ์ค๋ ๋์ ์๋ค๋ฉด, ์๋ก์ด ์ฝ๋ฉํธ๋ ์ต์ํ ๊ทธ๊ฒ์ ์๊ธฐ์์ผ์ค๋๋ค. ์ด ์์ ์์ ์ ์ง ๊ด๋ฆฌ์๊ฐ ์ค๋ซ๋์ ๊ทธ๊ฒ์ ๊ตฌํํ ๋ฐฉ๋ฒ์ด ์์ผ๋ฉฐ ์ฌ๋๋ค์ ์ ์ง ๊ด๋ฆฌ์๊ฐ ์ค์ ๋ก ์ ๊ฒฝ์ ์ฐ๋ Datadog๊ณผ ๊ฐ์ ๋ ๋์ ๋๊ตฌ๋ก ์ด๋ํด์ผ ํ์ง๋ง ์๋ฐฑ ๊ฐ์ ์๊ฒฌ(ํนํ ์ค์ ์๋๋ฆฌ์ค๊ฐ ์๋ ๊ฒฝ์ฐ ) ์์ง์๊ฐ๋ฝ์ ์น์ผ์ธ์ฐ๋ ๊ฒ๋ณด๋ค ํจ์ฌ ๋ ๋ง์ ์ํฅ์ ๋ฏธ์นฉ๋๋ค.
๋ฉ์ธํ ์ด๋๊ฐ ์ฌ์ ํ ์ค๋ ๋์ ์๋ค๋ฉด, ์๋ก์ด ์ฝ๋ฉํธ๋ ์ต์ํ ๊ทธ๊ฒ์ ์๊ธฐ์์ผ์ค๋๋ค. ์ด ์์ ์์ ์ ์ง ๊ด๋ฆฌ์๊ฐ ์ค๋ซ๋์ ๊ทธ๊ฒ์ ๊ตฌํํ ๋ฐฉ๋ฒ์ด ์์ผ๋ฉฐ ์ฌ๋๋ค์ ์ ์ง ๊ด๋ฆฌ์๊ฐ ์ค์ ๋ก ์ ๊ฒฝ์ ์ฐ๋ Datadog๊ณผ ๊ฐ์ ๋ ๋์ ๋๊ตฌ๋ก ์ด๋ํด์ผ ํ์ง๋ง ์๋ฐฑ ๊ฐ์ ์๊ฒฌ(ํนํ ์ค์ ์๋๋ฆฌ์ค๊ฐ ์๋ ๊ฒฝ์ฐ ) ์์ง์๊ฐ๋ฝ์ ์น์ผ์ธ์ฐ๋ ๊ฒ๋ณด๋ค ํจ์ฌ ๋ ๋ง์ ์ํฅ์ ๋ฏธ์นฉ๋๋ค.
๋๋ ์ ๋ฐ์ดํธ ์์ด +1/๋ฉ์์ง๊ฐ ๋ง์ ์ ์ผํ ์ฌ๋์ด ์๋๋ผ ์คํธ ๋๋ฌธ์ ์ ์ง ๊ด๋ฆฌ์๊ฐ ์ด ๋ฌธ์ ์ ๋ํ ์๋ฆผ์ ์์ ๊ฑฐ๋ถํ์ ์ ์์ต๋๋ค. Grafana์ DataDog๋ฅผ ๋น๊ตํ์ง ๋ง์ญ์์ค(์ ํฌ๋ ๋ ๋ค์ ์ฌ์ฉ์์์ผ๋ฉฐ DataDog์ผ๋ก ๋์๊ฐ ๋ฐฉ๋ฒ์ด ์์ต๋๋ค).
์ด๊ฒ์ ์ป๋ ๊ฐ์ฅ ์ข์ ๋ฐฉ๋ฒ์ ๊ธฐ๋ถํ๋ ๊ฒ์ ๋๋ค(๋๋ ์๋ง๋ Grafana Entreprise์ ๋ํด ์ง๋ถ)
๋น์ ์ ๋งค์ฐ ์๋ชป๋์์ต๋๋ค. ๋ฌด๋ฃ ์ฌ๋ถ๋ ๋ฃ์ ์ ์์ต๋๋ค
forum/slack/github/feedback ์ฑ๋๋ก ์ด๋ํ ๋ค์ ๋ฌด์ํ์ธ์. ๊ทธ๋ ๊ฒ ์๊ฐํ๋ค๋ฉด
์ํํธ์จ์ด๋ฅผ ์คํ ์์ค ๋ผ์ด์ ์ค์ ๋๋ ๊ฒ์ "๋ถ๋ง ์์"๊ณผ "์ฌ๋
๋น์ ์ ๊ธฐ๋ฅ์ ์ํด ๋ฌด๋ฃ๋ก ๊ฐ๋ฐํ ๊ฒ์
๋๋ค" ๋น์ ์ ๋ค์ ๋งค์ฐ ์๋ชป๋์์ต๋๋ค.
์ ๊ฒฝ์ฐ์๋ ์ด ๊ธฐ๋ฅ์ผ๋ก ๊ทธ๋ผํ๋๋ฅผ 10๋ช
์๊ฒ ํ๋งคํ ์ ์๋ค๊ณ ์ค๋ช
ํ์ต๋๋ค.
๋ด ๊ณ ๊ฐ. ๋๋ฅผ ๋ฌด์ํ๋ค๋ ๊ฒ์ ๊ณ ๊ฐ์๊ฒ ํ๋ฅผ ๋๋ค๋ ์๋ฏธ์
๋๋ค. ์์ฒญ๋
์ด๋ ์๋ง ๊ทธ๋ค์ "์ถฉ๋ถํ"๋์ ๋ฒ๊ณ ๋ ์ด์ ์ํ์ง ์์ต๋๋ค. ๋๋ ํ๋ณตํฉ๋๋ค.
๊ทธ๋ค์ ์ํด....
Il giorno mer 14 ott 2020 alle ore 15:35 Thomas Frรถssman <
์๋ฆผ@github.com> ์คํฌ๋ฆฝํธ:
์ฌ๋๋ค์ด ๋ค์ ํญ๋ชฉ์ ์ถ๊ฐํ์ง ์๊ณ ์ด ์ค๋ ๋ ๋ฌธ์ ์ ์คํธ์ ์ค์งํ ์ ์์ต๋๊น?
๊ฐ?.๋ฌธ์ ์๋จ์ ๋ฐ์์ ์ฌ์ฉํ์ฌ ๊ด์ฌ์ ํ์ํ์ญ์์ค.
๊ทธ๊ฒ์ด ๋๋ฌด ๊ธฐ๋ณธ์ ์ธ ๊ฒ์ด๋ผ๋ฉด ์๋ง๋ ๋ชจ๋ ๋ถ๋ง ์ ๊ธฐ์ ์ค ๋๊ตฐ๊ฐ๋
๋ค๋ฅธ ์ฌ๋๋ค์ด ๋ฌด๋ฃ๋ก ์์ ์ ์ํํ๋ ค๋ฉด ์ด๋ฅผ ์ง์ ๊ตฌํํด์ผ ํฉ๋๋ค.
ํ ๋ฆฌํ์คํธ๋ฅผ ํ๊ฑฐ๋ ๋ค์๊ณผ ๊ฐ์ ๊ฒฝ์ฐ ์์ฒด ํฌํฌ๋ฅผ ์ ์งํฉ๋๋ค.
๊ด๋ฆฌ์๋ ์ ์คํธ๋ฆผ์์ ๊ทธ๊ฒ์ ์ํ์ง ์์ต๋๋ค.โ
๋น์ ์ด ๋๊ธ์ ๋ฌ์๊ธฐ ๋๋ฌธ์ ์ด๊ฒ์ ๋ฐ๋ ๊ฒ์ ๋๋ค.
์ด ์ด๋ฉ์ผ์ ์ง์ ๋ต์ฅํ๊ณ GitHub์์ ํ์ธํ์ธ์.
https://github.com/grafana/grafana/issues/7832#issuecomment-708406018 ,
๋๋ ๊ตฌ๋ ์ทจ์
https://github.com/notifications/unsubscribe-auth/AABBIFUYLMIO4WH7LBYQ6FTSKWSLXANCNFSM4DDVAQPQ
.
๋ด๊ฐ _๋ชจ๋ _ ์ํํธ์จ์ด์ ์ง์ถํ ์ฉ์๊ฐ ์๋ ๊ธ์ก์ ํฌ์์ ๋ํด ์ ๊ณต๋ ๊ฒ์ผ๋ก ์์ํ ์ ์๋ ๊ณ ๊ฐ ์๋น์ค ์์ค์ ์ ๋น๋กํฉ๋๋ค. ๊ทธ๊ฒ์ด "์ ๋ฃ ์ง์"์ ์ ๊ณตํ๋ ์คํ ์์ค ์ ํ์ด๋ ์์ฉ ์ ํ์ด๋ ๊ทธ๊ฒ์ ๋ณ๋ก ์ค์ํ์ง ์์ต๋๋ค.
์ด ๋ฌธ์ ๋ฅผ ํ๋ก์ ํธ ๊ด๋ฆฌ์์ ์ฟ๋ณด๊ธฐ ์์ด ๋๋ฌด ์ค๋ซ๋์ ์ด์ด ๋๋ ๊ฒ์ ๋ถํํ๋ ๋์ ์ง์ถํจ์ผ๋ก์จ ์ด๋ค ๊ฒ์ด ๋ฌ๋ผ์ง์ง ์ฌ๋ถ์ ๋ํ ํฉ๋ฆฌ์ ์ธ ์์ฌ์ผ๋ก ์ถ๋ก ํฉ๋๋ค. ์ํํธ์จ์ด๋ฅผ ํ๋งคํ๋ ค๋ ๊ฒฝ์ฐ ์ด๋ฅผ ๊ณ ๋ คํ๋ ๊ฒ์ด ํ๋ช ํ ๊ฒ์ ๋๋ค.
pull ์์ฒญ์ ํ๊ฑฐ๋ ์์ฒด ํฌํฌ๋ฅผ ์ ์ง
์ด๋์์ ์์ํด์ผ ํ๋์ง์ ๋ํ ๊ฐ๋ฐ์์ ํํธ๊ฐ ์์๋ค๋ฉด, ๋จ์ํ ๊ฐ์น๊ฐ ๋๋ฌด ํฌ๊ธฐ ๋๋ฌธ์ ํด์ผ ํ๋์ง ์ฌ๋ถ์ ๊ด๊ณ์์ด ์ด๊ฒ์ ๊ณ ๋ คํ ๊ฒ์ด๋ผ๊ณ ๋งํ๋ ๊ฒ์ ์ ํผ์๊ฐ ์๋ ๊ฒ์ ๋๋ค. ์ ๊ณตํ๋ค. ์ฌํ๊ฒ๋ ๊ทธ๊ฒ์ ์ฌ์ค์ด ์๋ ๊ฒ ๊ฐ์ผ๋ฉฐ ์ ์ง ๋ณด์ ๋ด๋น์๊ฐ ์ค์ ๋ก ์ ๊ฒฝ ์ฐ์ง ์๋ ๊ฒ์ฒ๋ผ ๋ณด์ด๋ ๊ธฐ๋ฅ์ ์ํด ์ ํ์ ๋ฆฌ๋ฒ์ค ์์ง๋์ด๋งํ๋ ๋ฐ ๊ฑฐ์ ๊ด์ฌ์ด ์์ต๋๋ค.
๋ง์ง๋ง์ผ๋ก ์ค๋ ๋๊ฐ ๋ซํ๊ฑฐ๋ ์ ๊ธฐ์ง ์๋ ํ ์์ ์ ์๊ฐ์ ๋งํ์ง ์์ ์ด์ ๊ฐ ์์ต๋๋ค. ๊ทํ์๊ฒ ์ ํฉํ์ง ์์ ๊ฒฝ์ฐ ๊ตฌ๋ ์ ์ทจ์ํ ์ ์์ต๋๋ค. ๋๋ ์ค์ ๋ก ์ด๊ฒ์ ์๋์ ๋ถ์กฐ๋ฆฌ์ ๋ํด ํํํ๋ ์ฌ๋๋ค์ ์ฝ๋ ๊ฒ์ ์ฆ๊น๋๋ค. ๐
8์ ๋ํด ๊ณํ๋ ๊ฒฝ๊ณ NG(NextGen) ๊ฒฝ๊ณ ๋ ๋จ์ผ ๊ฒฝ๊ณ ์ ์์์ ์ฌ๋ฌ ๊ฒฝ๊ณ ์ธ์คํด์ค๋ฅผ ์ง์ํฉ๋๋ค. ๋ฐ๋ผ์ prometheus์ ๊ฐ์ ์์คํ
์์ host=*
์ ๊ฐ์ ๊ฒ์ ํธ์คํธ๋ณ๋ก ๊ฒฝ๊ณ ๋ฅผ ์์ฑํฉ๋๋ค.
https://github.com/grafana/grafana/issues/6983#issuecomment -712915673์ ์ถ๊ฐ๋ ๋จ์ผ ํต๊ณ์ ๋งฅ๋ฝ์์ ์ด์ ๋ํ ๋ช ๊ฐ์ง ์ผ๋ฐ ์ ๋ณด
์ฐ๋ฆฌ๋ ์ฌ์ ํ ๋์์ธํ๊ณ ํ๋กํ ํ์ ์ ๋ง๋ค๊ณ ์์ง๋ง ๋ค์ ์ฌํญ์ ๋ํ ๋ช ๊ฐ์ง ์ด๊ธฐ ์๊ฐ์ ์๋ตํฉ๋๋ค.
๊ทธ๋ํ๋น ์ฌ๋ฌ ๊ฒฝ๊ณ
๊ฒฝ๊ณ ์ ์๋ ์์ฒด ์ํฐํฐ์ด๋ฏ๋ก ํจ๋์ ์ฐ๊ฒฐ๋์ง ์์ต๋๋ค. ๊ฒฝ๊ณ ์ ์์์ ์ฌ๋ฌ ๊ฒฝ๊ณ ์ธ์คํด์ค๊ฐ ๋ ์ ์์ต๋๋ค. ๊ทธ๋ฌ๋ฉด ํจ๋์ด ์ธ์คํด์ค ๋๋ ์ ์๋ฅผ ๊ตฌ๋ ํ ์ ์์ต๋๋ค. ๊ทธ๋๋ ์ข์ ํ๋ฆ์ด๊ธฐ ๋๋ฌธ์ ๊ฒฝ๊ณ ๋ฅผ ์์ฑํ๊ธฐ ์ํด ๋์๋ณด๋ ํจ๋์์ ๋ฉ์ง UX ๊ฒฝ๋ก๋ฅผ ์ํ ๊ฒ์ด๋ผ๊ณ ์๊ฐํฉ๋๋ค.
๋ํ ๊ฒฝ๊ณ ์ ๊ฐ๋ณ ์ํ๋ฅผ ์ถ์ ํ๋ ๊ฒ์ด ํญ์ ์ ํธ๋๋ ๊ฒ์ ์๋๋๋ค(์ต์ข ์ฌ์ฉ์๋ ๊ฐ๋ณ ์ํ ๋ค์ ์๋ ์ธ๋ถ ์ ๋ณด๋ฅผ ์์์ผ ํ๊ธฐ ๋๋ฌธ์).
ํ๋์ ์ ์์์ ๋ง์ ๊ฒฝ๊ณ ๊ฐ ํ์ฉ๋๋ฉด ๊ทธ๋ฃนํ ๋ฐฉ๋ฒ์ด ๋ฌธ์ ๊ฐ ๋ฉ๋๋ค(๋ง์ ๊ฒฝ๊ณ ์ ๋๋ฌํ ์ ์์ผ๋ฏ๋ก). ํ์ฌ ์ด๊ฒ์ด Alerting NG์ ํจ๊ป ์๋ํ๋ ๋ฐฉ๋ฒ์ ๋ํ ๋ ๊ฐ์ง ๊ฒฝ๋ก๊ฐ ์์ต๋๋ค.
host=*,cluster=*
cluster=*
๋ฅผ ์ฟผ๋ฆฌํ๋ ๊ฒฝ์ฐ(๋๋ ๋ฐ์ดํฐ ์์ค์ ๊ฐ์ SQL์ ๊ฒฝ์ฐ ๊ทธ๋ฃนํ ๊ธฐ์ค). ๋๋ ๋ฐ์ดํฐ ์์ค๊ฐ ์ด ์์
์ ์ํํ์ง ์๋ ๊ฒฝ์ฐ ๊ทธ๋ฃน/๋ณ ํผ๋ฒ ์์
์ ํ์ฉํ๊ธฐ ์ํด ์๋ฒ ์ธก ํํ์(๊ฒฝ๊ณ ng์ ํจ๊ป ์ ๊ณต)์ ๊ธฐ๋ฅ์ ์ถ๊ฐํ๋ ค๊ณ ํฉ๋๋ค. IRM์ ์ฌ์ฉํ์ง ์๊ณ ์ด๋ฉ์ผ/์ฌ๋๊ณผ ๊ฐ์ ์๋น์ค๋ก ์ง์ ๋ณด๋ด๋ ๊ฒฝ์ฐ๊ฐ ์ด์ ํด๋นํฉ๋๋ค.๊ฒฝ๊ณ /์ค์
์ด๊ฒ์ ๋ ๋ณต์กํฉ๋๋ค. WIP ๋์์ธ์ ๊ฒฝ์ฐ ๊ธฐ๋ฅ์ผ๋ก ์ ๊ฑฐํ์ต๋๋ค(์ ์ด๋ ๊ฒฝ๊ณ ์ ์์ ๊ฒฝ์ฐ ๊ฒฝ๊ณ ์ ์๋ฅผ ๋ณต์ ํ๊ณ ๋ณ๊ฒฝํ ์ ์๋ ๋ฐฉ๋ฒ๊ณผ ์ฌ๊ฐ๋๋ก ๋ ์ด๋ธ์ ์ง์ ํ๊ฑฐ๋ ํ๊ทธ๋ฅผ ์ง์ ํ๋ ๋ฐฉ๋ฒ์ด ์์ ์ ์์)
๋ง์ ๊ฒฝ์ฐ์ ๋งค์ฐ ์ ์ฉํ๊ธฐ ๋๋ฌธ์ ์ด๊ฒ์ ์ด๋ ต์ต๋๋ค.
๊ทธ๋ ๋ค๋ฉด ์ ๊ทธ๊ฒ๋ค์ ๊ฐ์ง ์๊ธฐ๋ก ๊ฒฐ์ ํฉ๋๊น? ์ด๊ฒ์ ๋ถ๋ช ํ์ง ์์ ๋ณต์ก์ฑ์ ์๋นํ ์ถ๊ฐํฉ๋๋ค.
(์ ์ด๋ ๊ฒฝ๊ณ ์ ์์ ๊ฒฝ์ฐ ๊ฒฝ๊ณ ์ ์๋ฅผ ๋ณต์ ํ๊ณ ๋ณ๊ฒฝํ๊ณ ์ฌ๊ฐ๋๋ก ๋ ์ด๋ธ์ ์ง์ ํ๊ฑฐ๋ ํ๊ทธ๋ฅผ ์ง์ ํ๋ ๋ฐฉ๋ฒ์ด ์์ ์ ์์ต๋๋ค.
์ด๊ฒ์ ์ค์/๊ฒฝ๊ณ ๊ตฌ๋ถ์ ๋ํด ์๋ฒฝํ๊ฒ ์์ฉ ๊ฐ๋ฅํ ํด๊ฒฐ ๋ฐฉ๋ฒ์ ๋๋ค. ๋๋ ๋ณ๋์ ์๊ณ๊ฐ์ ์ ์งํ๋ ๊ฒ์ ๊ธฐ์๊ฒ ์๊ฐํฉ๋๋ค. ๊ฒฐํฉ๋ ๊ฒฝ๊ณ /์ฌ๊ฐํ ์๊ณ๊ฐ์ด ์์ผ๋ฉด ์์ผ๋ฉด ์ข๊ฒ ์ง๋ง ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๋ ๊ฒ์ ์๋๋๋ค.
๊ทธ๋ฐ ๋ค์ ๊ทธ๋ฃนํ ๋ฐฉ๋ฒ์ด ๋ฌธ์ ๊ฐ ๋ฉ๋๋ค(๋ง์ ๊ฒฝ๊ณ ๋ฅผ ๋ฐ์ ์ ์์ผ๋ฏ๋ก)
์์ ์ ํฐ์ผ ์๊ณผ ์๋ ์์ฑ์ ๊ด๋ฆฌํ๋ ๊ฒ์ ์ฌ์ฉ์์ ๋ชซ์ ๋๋ค. ์๋์ ์ค์ ํ๋ ๊ฒฝ์ฐ ๊ฐ๊ฐ์ ๋ณ๋์ ์ด๋ฉ์ผ ๋๋ ์๋ฆผ์ด์ด์ผ ํฉ๋๋ค. ์๋ฅผ ๋ค์ด ์ฌ๋ฌ ๊ฒฝ๋ณด๋ฅผ ํ๋์ ์ด๋ฉ์ผ๋ก ๊ทธ๋ฃนํํ์ฌ ๊ฒฝ๋ณด ํธ๋ฆฌ๊ฑฐ๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ํฐ์ผ์ ์์ฑํ๋ ์๋ํ๋ ์์คํ ์ ๋ง๋๋ ๊ฒฝ์ฐ ์ด๋ฅผ ์ด๋ ต๊ฒ ๋ง๋ค๊ฑฐ๋ ๊ท์ฐฎ๊ฒ ๋ง๋ค ์ ์์ต๋๋ค. ๋ํ ํ๋์ ์ด๋ฉ์ผ์ ์ฌ๋ฌ ๊ฐ์ ์๋์ด ํ์๋๋ค๋ ๊ฒ์ ๊ฐ ์๋์ด ์์ฒด ์ด๋ฉ์ผ ์ค๋ ๋๋ฅผ ๊ฐ์ง ์ ์๋ค๋ ๊ฒ์ ์๋ฏธํ๋ฉฐ, ์ฌ์ฉ์๊ฐ ์๋์ผ๋ก ๋ถ๋ฆฌํด์ผ ํ๊ณ ์ ์ค๋ ๋๊ฐ ์์๋ฉ๋๋ค. ๋์ ์ค๋ ๋๊ฐ ํด๋น ํน์ ์๋์ ํฌํจ๋ ์ ์๋๋ก ๊ฐ ์๋ ํธ๋ฆฌ๊ฑฐ์๋ ์์ฒด ์๋ฆผ์ด ์์ด์ผ ํฉ๋๋ค.
๊ทธ๋ฃนํ์ ๋ํด ๊ฑฑ์ ํ ํ์๊ฐ ์์ผ๋ฏ๋ก ์ด๊ฒ์ด ๋๋ผ์ด ๋์์ธ์ ๋จ์ํํ๊ธฐ๋ฅผ ๋ฐ๋๋๋ค. ๊ทธ๊ฒ์ ์ฌ์ฉ์๊ฐ ์ฒ๋ฆฌํ ๋ชซ์ ๋๋ค.
๊ฐ์ฅ ์ ์ฉํ ๋๊ธ
์๋ง๋ ์์ฒญ๋ ์์๊ฐ ์๋ค๋ฉด :)