현업데이터엔지니어들이먼저알아본화제의그책!
데이터파이프라인설계와구축의핵심원칙을한권에!
이책은특정도구,기술또는플랫폼을사용하는데이터엔지니어링을다루지않는다.이러한관점에서데이터엔지니어링관련기술에접근하는도서는많지만,그런책들은수명이짧다.대신이책은데이터엔지니어링이면의기본개념에초점을맞춘다.
이책의목표는현재의데이터엔지니어링관련내용과자료의공백을메우는것이다.특정데이터엔지니어링도구와기술을다루는기술자원이부족한것은아니지만,사람들은이러한구성요소들을실제세계에적용되는일관된전체적결과물로조립하는방법을이해하는데어려움을겪는다.이책은데이터수명주기의시작단계부터최종단계에이르기까지모든단계를살펴본다.특히분석가,데이터과학자,머신러닝엔지니어와같은다운스트림데이터소비자의요구를충족하기위해다양한기술을결합하는방법을보여준다.한편으로는특정기술,플랫폼,프로그래밍언어의세부사항을다루는오라일리도서들을보완하는역할을한다.
이책의주요내용은데이터생성,저장,수집,변환,서빙등을다루는데이터엔지니어링수명주기다.데이터의태동기이후우리는수많은특정기술과공급업체제품의흥망성쇠를목격했지만,데이터엔지니어링수명주기단계는본질적으로바뀌지않았다.이프레임워크를통해독자는기술을실제비즈니스문제에적용하는데필요한올바른이해를얻을수있다.
여기서우리의목표는두가지축을아우르는원칙을세우는것이다.첫째,데이터엔지니어링을모든관련기술을포괄하는원칙으로정제하고자한다.둘째,오랜시간이지나도변함없는원칙을제시하고자한다.이러한아이디어가지난20년간의데이터기술격변기를거치며얻은교훈을반영하고,우리의내적프레임워크가미래에도10년이상유용하게유지되기를바란다.
_서문‘이책에대하여’중에서
대상독자
-데이터엔지니어링실무를맡고있는담당자
-데이터엔지니어링업무를희망하는중/고급소프트웨어엔지니어
-기술실무자와연계해작업하는데이터이해관계자또는팀리더
-데이터분석및데이터과학담당자로서데이터엔지니어링을이해하려는사람
-데이터엔지니어링분야의큰그림을그려보고싶은누구나
주요내용
-전체데이터엔지니어링환경의간결한개요파악
-모범사례의엔드투엔드프레임워크로데이터엔지니어링문제평가
-데이터기술,아키텍처및프로세스를선택할때마케팅과대광고차단
-데이터엔지니어링수명주기로강력한아키텍처설계및구축
-데이터엔지니어링수명주기전반에걸쳐데이터거버넌스및보안통합