현장 비즈니스와 데이터 엔지니어링의 교차점
저는 경기도 하남 미사 지역에서 실물 부동산 중개 비즈니스를 직접 운영하며 현장의 데이터를 다루는 실무자이자, 파이프라인과 데이터 거버넌스를 설계하는 데이터 엔지니어입니다. 공학 전공 및 국가공인 정보처리기사 자격을 바탕으로 지자체의 정보통신 공사 기술 분석 업무를 총괄해 왔으며, 일선 고등학교에서 AI 교육 코디네이터로 활동하며 디지털 전환의 최전방을 경험했습니다. 무엇보다 지난 18년간 수학 교육 현장에서 치열하게 다져온 논리적 사고력과 알고리즘 설계 역량은, 현재 얽히고설킨 방대한 데이터 아키텍처를 직관적이고 효율적으로 풀어내는 저만의 가장 강력한 무기가 되었습니다.
왜 데이터 거버넌스와 MDM인가?
현업에서 부동산 비즈니스를 운영하고 G2B 공공입찰 데이터를 연동하는 웹 애플리케이션을 직접 구축하면서, 저는 치명적인 데이터의 민낯을 마주했습니다. 국토교통부 실거래가, LH 입찰 공고, 건축물대장 상의 명칭은 시스템마다 전부 제각각이었고, 이 파편화된 데이터들은 통계와 의사결정을 심각하게 왜곡시켰습니다. 이러한 ‘데이터 사일로(Silo)’의 비극을 뼈저리게 겪은 후, 저는 단순한 데이터 수집을 넘어 파이썬(Python)을 활용해 DQI(품질 지표)를 엄격히 통제하고 퍼지 매칭(Fuzzy Matching)으로 단일 진실 공급원(SSOT)을 엮어내는 마스터 데이터 관리(MDM) 파이프라인을 직접 설계하게 되었습니다.
쭈비스(Jjubis.com)가 지향하는 가치
이 블로그는 흔한 개발 문법이나 뜬구름 잡는 학술적 거버넌스 이론을 나열하는 곳이 아닙니다. 파이프라인이 뱉어내는 붉은색 에러 로그와 밤새워 사투를 벌이고, 파편화된 공공데이터의 결측치를 정제해 내며 얻은 ‘날 것 그대로의 트러블슈팅 경험’을 기록하는 살아있는 시스템 감사 트레일(Audit Trail)입니다. 데이터가 서버에 갇혀있는 것을 넘어 실제 비즈니스 가치로 변환되는 전체 생애주기(Data Lifecycle)를 치열하게 고민합니다. 코드를 짜는 것에 만족하지 않고 현장에서 데이터의 진짜 무게를 이해하는 전문가로서, 실전에서 작동하는 견고한 거버넌스 인사이트만을 공유하겠습니다.