Be Data

[보안뉴스 문정후 기자] 새로운 집으로 이사갔을 때를 상상해 보라. 특히 상황이 좋아져 더 좋은 집으로 갔을 때를 떠올려보라. 꿈이 성취된 기분에 가까운 기쁨과 만족감을 느낄 수 있을 것이다. 다만 그 전에 할 일이 있다. 집안의 모든 물건들을 하나하나 검토해 필요한 것과 버려도 될 것을 잘 구분해야 하는데, 새 집이라는 기쁨과 설레임이 있음에도 이 과정은 쉽지 않다. 잘 쓸 것처럼 생각돼 바리바리 포장해서 왔더니 새 집과 전혀 맞지 않아 결국 버려야 하는 경우도 생기고, 상자 이름표가 뒤바뀌거나 떨어져 한 동안 필요한 걸 찾지 못하고 새 것을 구매해야 할 때도 있다. 그렇다. 예상치 못한 비용이 반드시 들어가는 게 전형적인 이사의 과정이다. 심지어 짐도 다 정리하고 무사히 정착했나 싶었는데, 옛 집과 ..

데이터 엔지니어 데이터를 활용하는 모든 사람들을 위해 데이터를 저장, 가공, 처리하는 직군 데이터 인프라를 구축하는 역할 우리가 물(=데이터)을 사용할 수 있도록 배관(=데이터 ETL 파이프라인)을 만들어주는 배관공(=데이터 엔지니어) 업무 Database에 저장된 데이터를 data warehouse 로 옮기는 일 데이터 분석을 더 쉽게 할 수 있는 환경(인프라) 구축 데이터 마트 구축 SQL Join 한 결과를 Batch로 Table에 저장 특정 목적, 도메인에 맞는 마트 구축 데이터 분석시 데이터 시각화 도구가 필요한 경우, 데이터마트와 시각화 도구를 결합하는 환경을 마련 Tableau Redash, Superset, Metabase, 등 BI도구 Data Product 개발 AB test platf..