Databricks 쿼리로 집계한 DataHub 테이블 3258건의 Table Description 작성 상태(양호/미흡/누락)와 컬럼 Description 완성도 구간별 분포를 측정한 조사 결과.
리뷰 전새 문서승인 0/2
Databricks 쿼리로 집계한 DataHub 테이블 3258건의 Table Description 작성 상태(양호/미흡/누락)와 컬럼 Description 완성도 구간별 분포를 측정한 조사 결과.
DataHub 의 Table Description 보강 계획을 세우기 위해, 현재 테이블·컬럼 단위 설명 작성 상태가 어느 수준인지 파악한다.
Databricks 노트북으로 전체 테이블·컬럼의 Description 작성 여부를 쿼리해 집계했다. 상세 집계 데이터는 별도 Google Sheet 에 있다.
Table Description 판단 기준 — 아래 템플릿(제목 + 리스트 형식)에 맞춰 작성됐는지로 나눈다.
| 판정 | 기준 |
|---|---|
| 양호 | 템플릿에 맞춰 작성 완료 (제목 + 리스트 형식) |
| 미흡 | 작성되었으나 템플릿에 맞지 않음 |
| 누락 | 전혀 작성되지 않음 |
Table Description Template:
## 테이블 설명
- 이 테이블의 목적과 간단한 설명
- 저장되어 있는 데이터의 주된 특징
Column Description 은 테이블별로 컬럼 Description 이 작성된 컬럼의 비율(완성도)을 0-9%부터 100%까지 10%p 구간으로 나눠 집계했다.
| 상태 | 개수 | 비율 |
|---|---|---|
| 양호 | 107 | 3.3% |
| 미흡 | 134 | 4.1% |
| 누락 | 3017 | 92.6% |
| 총계 | 3258 | 100% |
| 완성도 구간 | 개수 | 비율 |
|---|---|---|
| 0-9% | 2237 | 68.7% |
| 10-19% | 19 | 0.6% |
| 20-29% | 15 | 0.5% |
| 30-39% | 15 | 0.5% |
| 40-49% | 13 | 0.4% |
| 50-59% | 15 | 0.5% |
| 60-69% | 18 | 0.6% |
| 70-79% | 34 | 1.0% |
| 80-89% | 126 | 3.9% |
| 90-99% | 373 | 11.4% |
| 100% | 393 | 12.1% |
| 총계 | 3258 | 100% |
technology-data/data-platform/datahub-table-documentation-tagging-guide.mdtechnology-data/data-platform/datahub-metadata-quality-workflow-decision.md