DEVOCEAN

이번 세션에서는 SK하이닉스의 여러 Data Platform Service중 하나인 kubernetes+Airflow를 이용한 'ETL Platform Service : Haflow'에 대해 소개합니다.

다양한 ETL 솔루션을 도입하여 운영하면서 발생한 문제점들을 자체 개선하고, 리소스 효율화를 위해 오픈소스인 kubernetes+Airflow를 활용하여 SK하이닉스만의 클라우드 네이티브 기반 ETL Platform Service:Haflow를 구축한 사례에 대해 소개합니다. 기존 ETL 솔루션상에서 문제점을 확인하고 해당 문제점과 Haflow에서 문제를 극복한 방법, Haflow만의 장점과 아키텍처, 프로세스 등 ETL 전반적인 업무 노하우에 대해 공유합니다.

■ 발표자 소개

김민우 (SK하이닉스)

입사 16년차, ETL 업무 8년차. 회사 인생 절반을 ETL 업무에 매달려온... 따로 공부할 것도, 배울 것도 많은 힘든 길을 가고 있습니다.

제발 여러분들은 그 힘든 길을 가지 마세요(님아 그 강을 건너...)... 하지만 이미 늦으신분 들.. 하아.. 뭐 어쩌겠어요. 저와 같이 그 강, 한 번 건너보시죠...