[Datadog] Datadog Tag란? Tag Best Practice

Tag란?

---

• Tag(또는 Label)은 k8s, datadog과 같은 hyper-scale 시스템의 기본 개념이며 mordern 모니터링의 핵심입니다.
  → mordern 인프라에서 인스턴스와 컨테이너는 auto scaling에 의해 생성 삭제가 쉽게 이루어지기 때문에 모니터링하기 어렵습니다.

  → 이러한 이유로 data에 tag를 달아 모니터링하는 게 일반적입니다.

• Tag를 추가하면 다양한 HW 프로필, SW 버전, 가용 영역, 서비스, 역할 또는 필요한 다른 수준의 메트릭을 여러 가지 차원으로 관찰할 수 있습니다.
  → 어플리케이션 버전에 따라 데이터를 집계하고 가용 영역에 따라 데이터를 집계하는 방식으로 데이터 여러 가지 방향에서 관찰 할 수 있습니다.

• Tag는 메트릭이 수집되는 방식을 수정하지 않고도 인프라 메타데이터를 메트릭에 즉시 추가할 수 있는 유연성을 제공합니다.

Datadog Tag란?

---

• datadog tag는 datadog에서 인프라와 애플리케이션 데이터 간의 상관관계를 만드는 방법 또는 인프라와 애플리케이션 데이터를 상호 연결하는 방법입니다.
  → datadog은 tag를 사용해서 metric, log, trace를 상호 연결하여 모니터링 워크플로우를 최적화합니다.

• datadog tag는 datadog에서 데이터를 검색 및 필터링하고 여러 가지 데이터를 연관시키고 시각화하는 데 사용합니다.

  • 태그를 사용하면 host map 또는 log, apm과 같은 datadog의 다른 product에서 메트릭 데이터를 검색할 수 있습니다.
  • 서울에서 장애가 발생한 경우 'region: seoul'으로 검색하거나 필터링하여 서울과 관련된 데이터를 식별할 수 있습니다.
  • 비용을 관리해야 하는 재무팀의 경우 'cost_center: advertisement'으로 검색하거나 필터링하여 비용 정산에 필요한 데이터를 확인할 수 있습니다.

• datadog tag에는 service, env, version과 같이 특정 목적으로 예약된 태그(reserved tag)가 있습니다. 예약된 태그는 정해진 목적으로만 사용해야 합니다.

• datadog tag는 예약 태그 외에도 사용자 지정 태그(Custom tag)도 가능합니다.

  • datacenter: busan 또는 databaes: mysql과 같이 엔지니어가 사용하는 태그
  • cost_center: advertisement과 같이 재무팀이 사용할 수 있는 태그
  • customer.region: tokyo 와 같이 비즈니스 인사이트를 부여할 수 있는 태그
  • team: infra와 같이 owner ship을 부여할 수 있는 태그

• tag 명명 규칙

  • 태그는 문자로 시작해야하며 영어, 숫자, 마이너스(-), 콜론(:), 슬래시(/)를 지원합니다.
    지원하지 않는 문제에 대해서는 밑줄(_)로 변환됩니다.
  • 태그는 최대 200자까지 가능하며 유니코드 문자를 지원
  • 태그는 소문자로 변환되므로 CamelCase는 권장하지 않습니다.

• datadog tag는 simple value(단순 값)과 key-pair value(키-값 쌍)가 있습니다.

  • 단순 값은 필터링하는 데만 사용할 수 있지만, 키-값 쌍은 필터링하고 그룹화하는 데 사용할 수 있습니다.
  • 데이터 필터링 및 그룹화의 유연성을 제공하는 키:값 쌍 태그를 사용하는 것을 권장합니다.

• Unified Service Tagging → env, service, tag 태그를 할당하면 각 배포마다 어플리케이션 서비스가 수행되는 방식을 모니터링하고 비교할 수 있습니다.

• datadog은 tag를 사용하여 데이터를 상호 연결하고, 사용자는 datadog 사용하는 내내 tag를 이용하여 데이터를 검색, 필터링하기 때문에 best practice를 따르는 것을 권장합니다.

• tag는 use case와 end user를 기반하여 선정해야 합니다.
  → end user는 엔지니어, 기획자, 재무팀, 고객상담사 등이 될 수 있습니다.
  → 소유권을 나타내는 Ownership tag(team: xxx, owner:xxx)
  → 범위를 제한할수 있는 Scope Tag(env: xxx, datacenter: xxx)
  → 기능 별로 사용가능한 Function Tags(service:xxx, site:xxx, role:xxx, databaes:xxx)
  → 업무 관리자 및 재무팀에서 사용 가능한 Business Role Tags(business_unit:xxx, cost_center:xxx)

• tag를 할당하기 전에 사용자는 tag에 대한 standard를 만들어 명확성과 일관성을 확보하는 것이 좋습니다.
  → datadog은 tag를 사용하여 데이터를 연관 짓기 때문에 app, app_name, application과 같이 다양한 태그를 사용하면 사용자에게 혼란을 줄 수 있습니다.

Datadog에서 Tag를 할당하는 방법

---

• tag를 할당하는 가장 효율적인 방법은 integration inheritance입니다.
  → integration에 의해 수집된 데이터에 상속되고 자동으로 할당되는 것을 integration inheritance이라고 합니다.
  → integration inheritance에 의해 할당되는 태그는 native tag라고 합니다.

• 추가로 tag를 할당하는 방법은 4가지이며 한가지 또는 모두를 사용할 수 있습니다.
  → Configuration file, UI(datadog website), API(datadog API를 사용할 때 태깅), DogStatsD(DogStatsD로 메트릭을 제출할 때 태깅)