Pinpoint

Pinpoint๋Š” ๋Œ€๊ทœ๋ชจ ๋ถ„์‚ฐ ์‹œ์Šคํ…œ์˜ ์„ฑ๋Šฅ์„ ๋ถ„์„ํ•˜๊ณ  ๋ฌธ์ œ๋ฅผ ์ง„๋‹จ, ์ฒ˜๋ฆฌํ•˜๋Š” ํ”Œ๋žซํผ์ž…๋‹ˆ๋‹ค. 2012๋…„ 7์›”์— ๊ฐœ๋ฐœ์„ ์‹œ์ž‘ํ•ด 2015๋…„ 1์›” 9์ผ์— ์˜คํ”ˆ์†Œ์Šค๋กœ ๊ณต๊ฐœํ–ˆ์Šต๋‹ˆ๋‹ค


Pinpoint ๊ฐœ๋ฐœ ๋™๊ธฐ์™€ Pinpoint์˜ ํŠน์ง•

์ธํ„ฐ๋„ท ์„œ๋น„์Šค์˜ ์‹œ์Šคํ…œ ๋ณต์žก๋„๊ฐ€ ์ฆ๊ฐ€ํ•จ์— ๋”ฐ๋ผ ์žฅ์• ๋‚˜ ์„ฑ๋Šฅ ๋ฌธ์ œ๊ฐ€ ๋ฐœ์ƒํ–ˆ์„ ๋•Œ ํ•ด๊ฒฐ์ด ์–ด๋ ค์›Œ์กŒ๋‹ค. ๋„ค์ด๋ฒ„์˜ ์‹œ์Šคํ…œ๋„ ๋งˆ์ฐฌ๊ฐ€์ง€์˜€๋‹ค. ์‹œ์Šคํ…œ ๋ณต์žก๋„๊ฐ€ ๋†’์•„์ง€๋ฉฐ ๋ฐœ์ƒํ•˜๋Š” ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•ด n๊ณ„์ธต ์•„ํ‚คํ…์ฒ˜๋ฅผ ํšจ๊ณผ์ ์œผ๋กœ ์ถ”์ ํ•  ์ˆ˜ ์žˆ๋Š” ์ƒˆ๋กœ์šด ํ”Œ๋žซํผ์„ ๊ฐœ๋ฐœํ•˜๊ธฐ๋กœ ํ–ˆ๊ณ  ๊ทธ๊ฒƒ์ด Pinpoint์ด๋‹ค.

Pinpoint์—๋Š” n๊ณ„์ธต ์•„ํ‚คํ…์ฒ˜๋ฅผ ์ถ”์ ํ•  ์ˆ˜ ์žˆ๋Š” ๋‹ค์Œ๊ณผ ๊ฐ™์€ ํŠน์ง•์ด ์žˆ๋‹ค.

  • ๋ถ„์‚ฐ๋œ ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜์˜ ๋ฉ”์‹œ์ง€๋ฅผ ์ถ”์ ํ•  ์ˆ˜ ์žˆ๋Š” ๋ถ„์‚ฐ ํŠธ๋žœ์žญ์…˜ ์ถ”์ 
  • ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜ ๊ตฌ์„ฑ์„ ํŒŒ์•…ํ•  ์ˆ˜ ์žˆ๋Š” ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜ ํ† ํด๋กœ์ง€ ์ž๋™ ๋ฐœ๊ฒฌ
  • ๋Œ€๊ทœ๋ชจ ์„œ๋ฒ„๊ตฐ์„ ์ง€์›ํ•  ์ˆ˜ ์žˆ๋Š” ์ˆ˜ํ‰ ํ™•์žฅ์„ฑ
  • ์ฝ”๋“œ ์ˆ˜์ค€์˜ ๊ฐ€์‹œ์„ฑ์„ ์ œ๊ณตํ•ด ๋ฌธ์ œ ๋ฐœ์ƒ ์ง€์ ๊ณผ ๋ณ‘๋ชฉ ๊ตฌ๊ฐ„์„ ์‰ฝ๊ฒŒ ๋ฐœ๊ฒฌ
  • bytecode instrumentation ๊ธฐ๋ฒ•์œผ๋กœ ์ฝ”๋“œ๋ฅผ ์ˆ˜์ •ํ•˜์ง€ ์•Š๊ณ  ์›ํ•˜๋Š” ๊ธฐ๋Šฅ์„ ์ถ”๊ฐ€

Google Dapper ์Šคํƒ€์ผ์˜ ๋ถ„์‚ฐ ํŠธ๋žœ์žญ์…˜ ์ถ”์ 

Pinpoint๋Š” Google Dapper ์Šคํƒ€์ผ์˜ ์ถ”์  ๋ฐฉ์‹์„ ์‚ฌ์šฉํ•ด, ๋ถ„์‚ฐ๋œ ์š”์ฒญ์„ ํ•˜๋‚˜์˜ ํŠธ๋žœ์žญ์…˜์œผ๋กœ ์ถ”์ ํ•œ๋‹ค.

Google Dapper์˜ ๋ถ„์‚ฐ ํŠธ๋žœ์žญ์…˜ ์ถ”์ ๋ฐฉ๋ฒ•

๋ถ„์‚ฐ ํŠธ๋žœ์žญ์…˜ ์ถ”์ ์˜ ํ•ต์‹ฌ์€ ๋‹ค์Œ ๊ทธ๋ฆผ์ฒ˜๋Ÿผ Node 1์—์„œ Node 2๋กœ ๋ฉ”์‹œ์ง€๋ฅผ ์ „์†กํ–ˆ์„ ๋•Œ, ๋ถ„์‚ฐ๋œ Node 1๊ณผ Node 2๊ฐ€ ์ฒ˜๋ฆฌํ•œ ๋ฉ”์‹œ์ง€์˜ ๊ด€๊ณ„๋ฅผ ์ฐพ์•„๋‚ด๋Š” ๊ฒƒ์ด๋‹ค.

google dapper ๊ทธ๋ฆผ

google dapper์—์„œ๋Š” Node 1์—์„œ ๋ฐœ์†กํ•˜๋Š” ๋ฉ”์‹œ์ง€์— ํƒœ๊ทธ๋ฅผ ์ถ”๊ฐ€ํ•˜์—ฌ ๊ฐ ๋ฉ”์‹œ์ง€๋ฅผ ๊ตฌ๋ถ„ํ•˜๋„๋ก ํ•˜์—ฌ ์ถ”์ ์ด ๊ฐ€๋Šฅํ•˜๋„๋ก ํ–ˆ๋‹ค.

Pinpoint์—์„œ๋Š” Google Dapper ์Šคํƒ€์ผ์˜ ์ถ”์  ๋ฐฉ๋ฒ•์„ ๋ณ€ํ˜•ํ•ด ํ˜ธ์ถœ ์ถ”์ ์— ์‚ฌ์šฉํ•œ๋‹ค. ์›๊ฒฉ ํ˜ธ์ถœ ์‹œ ๋ถ„์‚ฐ ํŠธ๋žœ์žญ์…˜์˜ ์ถ”์ ์„ ์œ„ํ•ด ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜ ์ˆ˜์ค€์—์„œ ํƒœ๊ทธ ๋ฐ์ดํ„ฐ๋ฅผ ํ˜ธ์ถœ ํ—ค๋”์— ์ถ”๊ฐ€ํ•œ๋‹ค. ํƒœ๊ทธ ๋ฐ์ดํ„ฐ๋Š” ํ‚ค์˜ ์ง‘ํ•ฉ์œผ๋กœ ๊ตฌ์„ฑ๋˜๋ฉฐ, ์ด ์ง‘ํ•ฉ์„ TraceId๋ผ๊ณ  ์ •์˜ํ•œ๋‹ค.

Pinpoint ์˜ ์ž๋ฃŒ๊ตฌ์กฐ

Span

  • RPC(remote procedure call) ์ถ”์ ์„ ์œ„ํ•œ ๊ธฐ๋ณธ ๋‹จ์œ„๋‹ค.
  • RPC๊ฐ€ ๋„์ฐฉํ–ˆ์„ ๋•Œ ์ฒ˜๋ฆฌํ•œ ์ž‘์—…์„ ๋‚˜ํƒ€๋‚ด๋ฉฐ ์ถ”์ ์— ํ•„์š”ํ•œ ๋ฐ์ดํ„ฐ๊ฐ€ ๋“ค์–ด ์žˆ๋‹ค. ์ฝ”๋“œ ์ˆ˜์ค€์˜ ๊ฐ€์‹œ์„ฑ์„ ํ™•๋ณดํ•˜๊ธฐ ์œ„ํ•ด, Span์˜ ์ž์‹์œผ๋กœ SpanEvent๋ผ๋Š” ์ž๋ฃŒ๊ตฌ์กฐ๋ฅผ ๊ฐ€์ง€๊ณ  ์žˆ๋‹ค.
  • Span์€ TraceId๋ฅผ ๊ฐ€์ง€๊ณ  ์žˆ๋‹ค.

Trace

  • Span์˜ ์ง‘ํ•ฉ์œผ๋กœ, ์—ฐ๊ด€๋œ RPC(Span)์˜ ์ง‘ํ•ฉ์œผ๋กœ ๊ตฌ์„ฑ๋œ๋‹ค.
  • Span์˜ ์ง‘ํ•ฉ์€ TransactionId๊ฐ€ ๊ฐ™๋‹ค.
  • Trace๋Š” SpanId์™€ ParentSpanId๋ฅผ ํ†ตํ•ด ํŠธ๋ฆฌ ๊ตฌ์กฐ๋กœ ์ •๋ ฌ๋œ๋‹ค.

TraceId

  • TransactionId์™€ SpanId, ParentId๋กœ ์ด๋ฃจ์–ด์ง„ ํ‚ค์˜ ์ง‘ํ•ฉ์ด๋‹ค.
  • TransactionId๋Š” ๋ฉ”์‹œ์ง€์˜ ์•„์ด๋””์ด๋ฉฐ, SpanId์™€ ParentId๋Š” RPC์˜ ๋ถ€๋ชจ ์ž์‹ ๊ด€๊ณ„๋ฅผ ๋‚˜ํƒ€๋‚ธ๋‹ค. - TransactionId(TxId): ๋ถ„์‚ฐ๋œ ๋…ธ๋“œ๋ฅผ ๊ฑฐ์ณ ๋‹ค๋‹ˆ๋Š” ๋ฉ”์‹œ์ง€์˜ ์•„์ด๋””๋กœ, ์ „์ฒด ์„œ๋ฒ„๊ตฐ์—์„œ ์ค‘๋ณต๋˜์ง€ ์•Š์•„์•ผ ํ•œ๋‹ค. - SpanId: RPC ๋ฉ”์‹œ์ง€๋ฅผ ๋ฐ›์•˜์„ ๋•Œ ์ฒ˜๋ฆฌ๋˜๋Š” ์ž‘์—…(job)์˜ ์•„์ด๋””๋ฅผ ์ •์˜ํ•œ๋‹ค. RPC๊ฐ€ ๋…ธ๋“œ์— ๋„์ฐฉํ–ˆ์„ ๋•Œ ์ƒ์„ฑํ•œ๋‹ค. - ParentSpanId(pSpanId): ํ˜ธ์ถœํ•œ ๋ถ€๋ชจ์˜ SpanId๋ฅผ ๋‚˜ํƒ€๋‚ธ๋‹ค.

Pinpoint ๊ฐ•์˜

Observability ์™€ APM ํ•„์š”์„ฑ

๋งˆ์ดํฌ๋กœ ์„œ๋น„์Šค๊ฐ€ ๋งŽ์•„์ง€๋ฉด์„œ ์„œ๋น„์Šค์˜ ํ๋ฆ„์„ ํŒŒ์•…ํ•˜๊ธฐ ์–ด๋ ค์›Œ์กŒ๋‹ค. ์ด๋Ÿฌํ•œ ์ƒํ™ฉ์—์„œ ์„œ๋น„์Šค ์ „๋ฐ˜์˜ Observability๋ฅผ ํ™•๋ณดํ•˜๊ธฐ ์œ„ํ•ด ๋‹ค์Œ ์„ธ๊ฐ€์ง€๊ฐ€ ํ•„์š”ํ•ด์กŒ๋‹ค.

  • Trace: ์„œ๋น„์Šค์— request๊ฐ€ ๋“ค์–ด์™€์„œ ๋‚˜๊ฐˆ ๋•Œ๊นŒ์ง€์˜ ๊ฒฝ๋กœ๋ฅผ ์ถ”์ ํ•˜๋Š” ์ •๋ณด โ‡’ Pinpoint
  • Log : ์ˆ˜๋งŽ์€ ์„œ๋ฒ„์— ๋‚˜๋‰˜์–ด์ง„ ๋กœ๊ทธ์ •๋ณด. โ‡’ NELO
  • Metric : ์ธํ”„๋ผ๋‚˜ ์ธ์Šคํ„ด์Šค์˜ ๋ฉ”ํŠธ๋ฆญ ์ •๋ณด โ‡’ NPOT

APM(Application Performance Management)

  • ์–ดํ”Œ๋ฆฌ์ผ€์ด์…˜์˜ ๊ฐ€์šฉ์„ฑ๊ณผ ์„ฑ๋Šฅ์„ ๊ด€๋ฆฌํ•˜๊ณ  ๋ชจ๋‹ˆํ„ฐ๋งํ•˜๋Š” ์‹œ์Šคํ…œ
  • pinpoint๋Š” ๋Œ€๊ทœ๋ชจ ๋ถ„์‚ฐ์‹œ์Šคํ…œ์— ์ ํ•ฉํ•œ APM ์ด๋‹ค.

APM ํ•„์š”ํ•œ ์ด์œ 

  • ๊ธฐ์กด์˜ ๋ฌธ์ œ ํ•ด๊ฒฐ ๋ฐฉ๋ฒ•
    • ๋ฌธ์ œ ๋ฐœ์ƒ โ†’ A ์‹œ์Šคํ…œ์˜ ๋ฌธ์ œ๋กœ ํ™•์ธ โ†’ ๋‹ด๋‹น์ž ์—ฐ๊ฒฐ โ†’ A ์‹œ์Šคํ…œ์˜ B ์„œ๋ฒ„ ๋ฌธ์ œ๋กœ ํ™•์ธ โ†’ ๋‹ด๋‹น์ž ์—ฐ๊ฒฐ โ†’ โ€ฆ ๋ฐ˜๋ณต
  • APM
    • ๋ฌธ์ œ ๋ฐœ์ƒ โ†’ APM(pinpoint) ํ™•์ธ โ†’ ๋‹ด๋‹น์ž ์—ฐ๊ฒฐ

Pinpoint ์†Œ๊ฐœ

์š”์ฒญ ์ฒ˜๋ฆฌ ์ˆœ์„œ

  1. ์œ ์ €์˜ ์š”์ฒญ
  2. Pinpoint agent instrumentation ์—์„œ ์š”์ฒญ์„ ๊ฐ€๋กœ์ฑ„์„œ ํ•„์š”ํ•œ ์ •๋ณด๋ฅผ ์ฃผ์ž…ํ•จ
  3. ์–ดํ”Œ๋ฆฌ์ผ€์ด์…˜์—์„  ์š”์ฒญ์— ๋งž๋Š” ์ž‘์—… ์ˆ˜ํ–‰ ํ›„ ์‘๋‹ต ๋ฐœ์†ก
  4. Pinpoint agent instrumentation ์—์„œ ์‘๋‹ต์„ ๊ฐ€๋กœ์ฑ„์„œ ์ •๋ณด๋ฅผ ์ˆ˜์ง‘ ํ›„ ๋น„๋™๊ธฐ๋กœ pinpoint collector๋กœ ๋ฐ์ดํ„ฐ๋ฅผ ๋ณด๋ƒ„.

bytecode ์ฃผ์ž…

  • java, node์™€ ๊ฐ™์€ ์–ธ์–ด์—์„œ๋Š” bytecode๋ฅผ ์ฃผ์ž…ํ•˜์—ฌ pinpoint์— ํ•„์š”ํ•œ ์ž‘์—…์„ ์ˆ˜ํ–‰
  • ๋‹ค๋ฅธ ์–ธ์–ด์—์„  SDK๋ฅผ ์ œ๊ณตํ•˜์—ฌ ์ง์—… pinpoint๋ฅผ ํ˜ธ์ถœ

overload

  • pinpoint๋กœ ๋ฐœ์ƒํ•˜๋Š” ์„ฑ๋Šฅ์ €ํ•˜๋Š” ํ˜„์žฌ 3% ๋ฏธ๋งŒ
  • ์ง€์†์ ์œผ๋กœ ๊ด€์ฐฐํ•˜์—ฌ pinpoint์˜ ์„ฑ๋Šฅ์„ ๋ชจ๋‹ˆํ„ฐ๋งํ•œ๋‹ค.

pinpoint feature ์†Œ๊ฐœ

server map

  • pinpoint๋กœ ๋ชจ๋‹ˆํ„ฐ๋งํ•˜๋Š” ์„œ๋ฒ„์˜ ๊ตฌ์กฐ๋ฅผ ๋ณด์—ฌ์คŒ

scatter chart

  • ์ดˆ๋ก์ƒ‰ : ์„ฑ๊ณตํ•œ transaction, ๋นจ๊ฐ„์ƒ‰ : ์‹คํŒจํ•œ transaction
  • ์„ธ๋กœ์ถ•์€ ์‘๋‹ต ์‹œ๊ฐ„.
  • ๋“œ๋ž˜๊ทธํ•˜๋ฉด ์„ ํƒ๋œ ์ ๋“ค์˜ ์ •๋ณด๊ฐ€ ๋ณด์—ฌ์ง

call stack

  • transaction ํ•˜๋‚˜๋ฅผ ์„ ํƒํ•˜๋ฉด ์ƒํƒœ ์ฝœ์Šคํƒ์ด ๋ณด์—ฌ์ง
  • ํ•ด๋‹น transaction์ด ์–ด๋–ป๊ฒŒ ํ˜ธ์ถœ๋˜์—ˆ๋Š”์ง€ ํ™•์ธํ•  ์ˆ˜ ์žˆ๋‹ค.

inspector

  • ์ธ์Šคํ„ด์Šค์˜ ๊ธฐ๋ณธ ์ •๋ณด ๋ฐ ๋ฉ”ํŠธ๋ฆญ ์ •๋ณด๋ฅผ ํ™•์ธ๊ฐ€๋Šฅ

์ฐธ๊ณ ๋ฌธ์„œ

Pinpoint ๊ฐ•์˜