데이터베이스 신뢰성 엔지니어링 : 탄력적인 데이터베이스 시스템 설계와 관리

ㆍ이책에서다루는내용

-서비스레벨요구사항과위험관리
-운영가시성을위한아키텍처구축및진화
-인프라엔지니어링및관리
-릴리스프로세스를원활하게수행하는방법
-데이터저장,인덱싱,복제
-데이터스토어의특성식별과모범사례
-데이터스토어아키텍처의구성요소와데이터기반의아키텍처

ㆍ이책의대상독자

데이터스토어의설계,구축,안정적인운영에흥미가있는모든사람을대상으로한다.독자는데이터베이스의지식을넓히려고하는소프트웨어엔지니어혹은같은이유를가진시스템엔지니어일수도있다.스킬향상을원하는데이터베이스전문가라면여기서가치를발견할것이고,이업계에새로들어온사람이라면확실한이해를줄수있을것이다.

ㆍ이책의구성

1장은데이터베이스신뢰성엔지니어링(databasereliabilityengineering)의개념을소개한다.원칙을안내하는것에서출발해운영중심부로넘어가고마지막으로매슬로우의욕구계층(Maslow’shierarchyofneeds)을기반으로DBRE의비전을구축하기위한프레임워크를제시한다.

2장에서는서비스수준요구사항(servicelevelrequirements)을설명한다.이는제품을위한기능요구사항만큼이나중요하다.이장은서비스수준요구사항이무엇이고어떻게그것을정의하는지알아본다.이후에는이러한요구사항을측정하고처리하는방법을살펴본다.

3장에서는위험평가와관리(riskassessmentandmanagement)를알아본다.위험의기초적인측면을설명하고난후시스템및데이터베이스엔지니어링에위험평가를접목시키기위한실전프로세스를살펴본다.또한함정과복잡성도살펴본다.

4장에서는운영가시성(operationalvisibility)을다룬다.지표(metric)와이벤트를이야기하고이를측정하기위한계획을어떻게세우는지,시간이지남에따른반복작업은어떤게있는지알아본다.그리고모니터링시스템의구성요소와이를사용하는클라이언트를파헤친다.

5장과6장에서는인프라의엔지니어링과관리(infrastructureengineeringandmanagement)를자세히살펴본다.데이터스토어를위한호스트구축원칙을설명하고가상화와컨테이너,환경설정관리,자동화와오케스트레이션(orchestration)을살펴본다.이는데이터를저장하고접근하는시스템을구축하고자구동되는모든부분을이해할수있게도와준다.

7장에서는백업과복구(backupandrecovery)를다룬다.DBE를마스터로향하게하는가장중요한부분일것이다.데이터는유실하게되면게임끝이다.서비스수준요구사항에서출발해적절한백업과복구방법을평가하고,어떻게확장하는지그리고어떻게이처럼중요한부분과자주간과하기쉬운운영측면을테스트하는지평가한다.

8장에서는릴리스관리(releasemanagement)를살펴본다.데이터스토어에대한변경사항을어떻게테스트(test),빌드(build),배포(deploy)하는지와데이터접근코드나SQL에대한내용도살펴본다.

9장에서는보안(security)을다룬다.데이터보안은기업의생존에매우중요하다.끊임없이발전하는데이터인프라에서보안을계획하고관리하는방법에대한전략을다룬다.

10장에서는데이터스토리지와인덱스그리고복제(datastorage,indexing,andreplication)를다룬다.관계형데이터가저장되는방법을설명한후이를문자열정렬과로그구조의병합트리(logstructuredmergetree)를비교한다.인덱스의다양성을살펴보고난후데이터복제토폴로지를살펴본다.

11장은데이터스토어의필드가이드(datastorefieldguide)다.여기서는여러분이평가하고운영해야할데이터스토어에서찾을수있는수많은다양한속성을살펴본다.

12장에서는분산데이터베이스에사용되는좀더일반적인설계패턴과연관된파이프라인을살펴본다.먼저데이터베이스생태계(ecosystem)에전통적으로자리잡고있는아키텍처구성요소를살펴보는것부터시작해서이들이가진이점,복합성,일반적인사용법등을살펴본다.

13장에서는여러분조직에서데이터베이스신뢰성엔지니어링의문화를형성하는방법을다룬다.그리고오늘날의조직에서관리자(administrator)에서엔지니어로서DBRE의역할로전환할수있는다양한방법을살펴본다.

ㆍ지은이의말

이책에서는차세대데이터베이스전문가인데이터베이스신뢰성엔지니어(DBRE)를위한프레임워크를보여준다.먼저데이터베이스관리자란직업에어떤선입견이있는지떠올려보자.이불가사의한생명체와협력하고있는소프트웨어또는시스템엔지니어들은다음과같은선입견을갖고있을것이다.

전통적으로데이터베이스관리자(DBA)는데이터베이스(DB)내부를속속들이이해했다.그들은옵티마이저,쿼리엔진,특정시스템의성능기준에맞는튜닝과제작에능했다.이들은데이터베이스를더잘운영하고자다른기술을습득해야한다면그렇게했다.컴퓨터중앙처리장치(CPU)나디스크스핀들(diskspindles)부하를분산시키는방법,CPU친밀도(affinity)를사용하고자DB를설정하는방법,스토리지서브시스템을평가하는방법등을배웠다.

DBA가가시성(visibility)문제에직면했을때그들은핵심지표를식별하기위한그래프를만드는방법을배웠다.아키텍처의한계에직면했을때캐시계층에대해배웠고,개별노드의한계에부딪혔을때샤딩과같은새로운설계패턴의개발을배우며주도했다.이러한과정에서캐시무효화(cacheinvalidation),데이터리밸런싱(datarebalancing),순차DB변경(rollingDBchange)작업등과같은새로운운영기법을정복하고있었다.

하지만오랫동안DBA들은사일로(silo)와스노우플레이크(snowflake)를만드는비즈니스를하고있었다.그들이쓰는도구와하드웨어,언어는달랐다.DBA는SQL,시스템엔지니어는펄(perl),소프트웨어엔지니어는C++,웹개발자는PHP,네트워크엔지니어들은그들만의완벽한어플라이언스를만들고있었다.오직팀의절반정도만어떤식으로든버전관리시스템을사용하고있었고,철저하게서로의영역에관여하거나침범하지않았다.마치다른나라로들어가야하는것처럼보였다.

이런모델이효과적이고지속가능하다는것을증명할수있는시대는얼마남지않았다.이책은데이터베이스엔지니어링시야를통해바라본신뢰성엔지니어링의관점이다.모든사례를다루고있지는않지만여러분의경험에빗대어우리가중요하게여기는것을설명할것이다.이러한프레임워크는다양한데이터스토어,아키텍처,조직등에적용할수있을것이다.

ㆍ옮긴이의말

과거데이터베이스는스페셜리스트만의전유물이었다.설치는어려웠고튜닝은복잡했으며쿼리작성에조금만신경을못써도서비스에영향을미치게되는두려운존재였다.데이터베이스는아주예쁜유리병과도같았고이를잘다루려면오랜시간동안숙련된장인의손길이필요할것만같았다.하지만최근클라우드컴퓨팅,MSA아키텍처,자동화시스템등의기술발달로현대의데이터베이스는더이상그들만의전유물이아니게됐다.필요하면누구나쉽게접근할수있게진입장벽이낮아졌으며,또한어느정도까지는서비스도가능할정도로표준화됐다.

이러한시대의변화는자연스럽게데이터베이스를바라보는관점의변화를만들었으며이에따른데이터베이스관리자의역할도적지않게바뀌었다.이로인해DBRE라는새로운관점의데이터베이스관리가필요하게됐고그에맞는요구사항들이생겨나기시작했다.그렇다면DBRE의개념은무엇이며그동안데이터베이스관리자의역할과어떤점이다른지필연적으로궁금증이발생할것이다.

이책은이러한궁금증에대한답을제시한다.서비스,아키텍처,인프라등다양한관점에서데이터베이스를바라보고데이터베이스관리자의역할을재정의해어떤배경지식이필요한지설명한다.특히데이터베이스신뢰성이라는관점으로데이터베이스관리를지향하고있으며이를위해반복적인관리포인트를줄이고아키텍처나퍼포먼스에집중하고자프레임워크를만들고수행방안을전개한다.현대의데이터베이스가누구나사용가능하다고해서모두가데이터베이스를능숙하게다룰수있는것은분명아닐것이다.근본적으로데이터베이스관리자는내부구조,아키텍처,동작원리를학습해기본기가바탕이돼야함은DBRE의관점에서도변함이없다.

항상새로운기술이나타나고변화함에따라이에맞는도전과제들을수행하기위해서우리는배워야할게너무나많은세상을살고있다.많은데이터베이스관리자는DBRE라는용어를들어보지만않았을뿐이미이러한변화를피부로느끼며현업에서데이터베이스신뢰성향상을위해노력하고있을것이다.

이책이최근시대의환경변화로인해데이터베이스관리자의역할이어디까지인지고민하고있던사람에게조금이나마도움이되기를바란다.이책을통해다양한관점에서데이터베이스를생각해볼수있으며나아가우리가책임지고있는데이터베이스의신뢰성을좀더성숙하게발전시킬수있는전환점이될수있기를기대한다.

추천사

우리는전반적인데이터베이스산업에서전례없는변화와혼란의시기를목격하고있다.기술채택의생명주기는새로운도전과기회와함께머리를어지럽게만드는지점까지가속화됐다.
아키텍처는매우빠르게진화하고있어서지금까지익숙해진업무는더이상필요하지않게됐으며그렇게많이투자했던제반기술은이제거의연관이없다.보안,코드형인프라,클라우드의수용력(예를들어서비스형인프라와데이터베이스)과같은새로운혁신과압박으로인해우리가어떻게구축하고있는지재고할필요성을느끼게한다.
필연적으로기존의관리성작업부하에서벗어나아키텍처,자동화,소프트웨어엔지니어링,지속적인통합및배포,시스템편성기술등을강조하는프로세스로전환했다.그동안우리가보호하고관리해온데이터의가치와중요성은그규모만큼이나(혹은그이상으로)증가했고앞으로도그가치가증가하지않는미래는그려지지않는다.우리는이와같은세상에서무언가의미있고중요한차이를만들어낼수있는운이좋은위치에있다.
한때본인이뛰어난데이터베이스관리자라고의심없이생각했던많은사람은시대의흐름에압박받고있으며심지어뒤처질위험에처해있다.동시에이분야에뛰어든새로운사람들은조직의패러다임을갈망한다.이두가지상황에대한답은동일하다.학습의즐거움,자기계발,긍정적,열정그리고자신감이다.이는피할수없는고난과위험에도어떤업무를맡아그것을끝까지관철시키기위함이다.이책은데이터베이스인프라엔지니어링에대한새로운사고방식을소개하고운영,가이드북,플레이북등우리가수행하고재구성했던모든것을새로운방향으로이끈다는점에서주목할만한성과다.즉,이것이바로데이터베이스신뢰성엔지니어링이다.
-폴밸리(PaulVallee)(파이시안(Pythian)의사장겸CEO)