의사결정을 위한 데이터 과학 (데이터 과학 총론)

루이즈파울로파베로

LuizPauloFavero
상파울루대학교(FEAUSP및EPUSP)폴리테크닉스쿨의경제학,경영학,회계대학의정교수이며데이터과학,데이터분석,다변량모델링,머신러닝과딥러닝을가르치고있다.뉴욕의콜롬비아대학교에서데이터분석과계량경제학박사후학위를받았으며,FEA/USP의종신교수다(양적모델링에더중점을두고있음).USP폴리테크닉스쿨에서공학학위를받고,GetulioVargasFoundation(FGV/SP)에서경영학석사학위를받은다음FEA/USP에서조직경제학에적용되는데이터과학및정량적방법으로석사및박사학위를받았다.상파울루연방대학교(UNIFESP),DomCabralFoundation,GetulioVargasFoundation,FIA,FIPE,MONTVERO의객원교수다.9권의책을저술했으며,IJMDA(InternationalJournalofMultivariateDataAnalysis)의창립자이자전편집장이다.라틴아메리카데이터과학아카데미(LatinAmericanAcademyofDataScience)의회원이자창립자이기도하다.R,파이썬,SAS,Stata,IBMSPSS같은데이터분석,머신러닝/딥러닝,빅데이터,플랫폼을사용해소매,산업,광업,은행,보험,의료등의분야에서컨설턴트로일하고있다.

1부.비즈니스데이터분석기초

1장.데이터분석과의사결정소개
1.1소개:데이터,정보,지식간의계층구조
1.2책의개요
1.3맺음말
1.4독자의견

2장.변수형식과측정그리고정확도척도
2.1소개
2.2변수의형식
2.2.1비계량또는정성변수
2.2.2계량또는정량변수
2.3변수형식×측정척도
2.3.1비계량변수:명목척도
2.3.2비계량변수:서열척도
2.3.3정량변수:구간척도
2.3.4정량변수:비율척도
2.4변수의형식×범주의개수와정확성의척도
2.4.1이분또는이진변수(더미)
2.4.2다진변수
2.4.3이산정량변수
2.4.4연속정량변수
2.5맺음말
2.6연습문제

2부.기술통계량

3장.일변량기술통계량
3.1소개
3.2빈도분포표
3.2.1정성변수의빈도분포표
3.2.2이산데이터에대한빈도분포표
3.2.3부류로그룹화된연속데이터의빈도분포표
3.3결과의그래프표현
3.3.1정성변수의그래프표현
3.3.2정량변수의그래프표현
3.4일변량기술통계량에서가장보편적인요약측도
3.4.1위치나장소의측도
3.4.2산포나변동성의측도
3.4.3형태측도
3.5실제엑셀예제
3.6SPSS를사용한실제사례
3.6.1빈도옵션
3.6.2기술통계옵션
3.6.3데이터탐색옵션
3.7Stata를사용한실제사례
3.7.1Stata로일변량빈도분포표구하기
3.7.2Stata의일변량기술통계량요약
3.7.3Stata의백분위계산
3.7.4Stata의차트:히스토그램,줄기-잎,상자도표
3.8맺음말
3.9연습문제

4장.이변량기술통계량
4.1소개
4.2두정성변수간의연계성
4.2.1결합빈도분포표
4.2.2연계성측도
4.3두정량변수간의상관관계
4.3.1결합빈도분포표
4.3.2산포도를통한그래픽표현
4.3.3상관관계측도
4.4맺음말
4.5연습문제

3부확률통계

5장.확률개론
5.1소개
5.2용어와개념
5.2.1확률실험
5.2.2표본공간
5.2.3사건
5.2.4합집합,교집합,여집합
5.2.5독립사건
5.2.6배반사건
5.3확률의정의
5.4기초확률법칙
5.4.1확률변동장
5.4.2표본공간의확률
5.4.3공집합의확률
5.4.4확률의덧셈법칙
5.4.5여사건의확률
5.4.6개별확률에대한확률곱의법칙
5.5조건부확률
5.5.1확률곱셈법칙
5.6베이즈정리
5.7조합론
5.7.1배열
5.7.2조합
5.7.3순열
5.8맺음말
5.9연습문제

6장.확률변수와확률분포
6.1소개6.2확률변수
6.2.1이산확률변수
6.2.2연속확률변수
6.3이산확률변수의확률분포
6.3.1이산균등분포
6.3.2베르누이분포
6.3.3이항분포
6.3.4기하분포
6.3.5음이항분포
6.3.6초기하분포
6.3.7푸아송분포
6.4연속확률변수의확률분포
6.4.1균등분포
6.4.2정규분포
6.4.3지수분포
6.4.4감마분포
6.4.5카이제곱분포
6.4.6스튜던트t분포
6.4.7스네데커의F분포
6.5맺음말
6.6연습문제

4부.통계적추론

7장.표본추출
7.1소개
7.2확률또는무작위표본추출
7.2.1단순무작위표본추출
7.2.2체계적표본추출
7.2.3층화표본추출
7.2.4클러스터표본추출
7.3비확률또는비무작위표본추출
7.3.1편의표본추출
7.3.2판단또는유의표본추출
7.3.3할당표본추출
7.3.4기하전파또는스노우볼표본추출
7.4표본크기
7.4.1단순무작위표본의크기
7.4.2체계적표본의크기
7.4.3층화표본의크기
7.4.4클러스터표본의크기
7.5맺음말
7.6연습문제

8장.추정
8.1소개
8.2점과구간추정
8.2.1점추정
8.2.2구간추정
8.3점추정기법
8.3.1모멘트기법
8.3.2최소자승법
8.3.3최대우도추정
8.4구간추정또는신뢰구간
8.4.1모집단평균의신뢰구간
8.4.2비율의신뢰구간
8.4.3모집단분산의신뢰구간
8.5맺음말
8.6연습문제

9장.가설검정
9.1소개
9.2모수적검정
9.3정규성의일변량검정
9.3.1콜모고로프-스미노프검정
9.3.2사피로-윌크검정
9.3.3사피로-프란시아검정
9.3.4SPSS를사용한정규성검정해법
9.3.5Stata를사용한정규성검정해법
9.4분산의동질성검정
9.4.1바틀렛의??2검정
9.4.2코크란의C검정
9.4.3하틀리의Fmax검정
9.4.4레빈의F검정
9.4.5SPSS를사용한레빈의검정해법
9.4.6Stata를사용한레빈의검정해법
9.5단일확률표본으로부터의모집단평균(μ)에관한가설검정
9.5.1모집단표준편차(σ)를알고분포가정규임을알경우의Z검정9.5.2모집단의표준편차(σ)를모를경우의스튜던트t검정
9.5.3SPSS를사용한단일표본의스튜던트t검정해법
9.5.4Stata소프트웨어를사용한단일표본의스튜던트t검정해법
9.6두독립확률표본의두모집단평균을비교하는스튜던트t검정
9.6.1SPSS를사용한두독립표본의스튜던트t검정해법
9.6.2Stata를사용한두독립표본의스튜던트t검정해법
9.7두대응확률표본의두모집단평균을비교하기위한스튜던트t검정
9.7.1SPSS를사용한대응표본의스튜던트t검정해법
9.7.2Stata를사용한두대응표본의스튜던트t검정해법
9.8셋이상의모집단평균비교를위한ANOVA
9.8.1일원배치ANOVA
9.8.2요인ANOVA
9.9맺음말
9.10연습문제

10장.비모수적검정
10.1소개
10.2단일표본검정
10.2.1이항검정
10.2.2단일표본의카이제곱검정(χ2)
10.2.3단일표본의부호검정
10.3두대응표본의검정
10.3.1맥네마르검정
10.3.2두대응표본의부호검정
10.3.3윌콕슨검정378
10.4두독립표본의검정
10.4.1두독립표본의카이제곱(χ2)검정
10.4.2만-휘트니U검정
10.5k대응표본검정
10.5.1코크란Q검정
10.5.2프리드먼검정
10.6k독립표본검정
10.6.1k독립표본의χ2검정
10.6.2크루스칼-월리스검정
10.7맺음말
10.8연습문제

5부.다변량탐색적데이터분석

11장.클러스터분석
11.1소개
11.2클러스터분석
11.2.1클러스터분석에서거리와유사성측도의정의
11.2.2클러스터분석의응집계획
11.3SPSS를사용한계층적,비계층적클러스터분석
11.3.1SPSS를사용한계층적응집계획수행
11.3.2SPSS를이용해비계층k평균응집계획수행
11.4Stata를사용한계층적,비계층적응집계획클러스터분석
11.4.1Stata를사용한계층적응집계획수행
11.4.2Stata를사용한비계층적k평균응집계획수행
11.5맺음말
11.6연습문제

12장.주성분요인분석
12.1소개
12.2주성분요인분석
12.2.1피어슨의선형상관관계와요인의개념
12.2.2요인분석의전반적적절성:카이저-마이어-올킨통계량과바렛의구형성검정
12.2.3주성분요인의정의:상관행렬r의고윳값과고유벡터의결정그리고요인점수계산
12.2.4요인적재및공통성
12.2.5요인회전
12.2.6주성분요인분석의실제예제
12.3SPSS를사용한주성분요인분석
12.4Stata를사용한주성분요인분석
12.5맺음말
12.6연습문제

6부.일반화선형모델

13장.단순및다중회귀모델
13.1소개
13.2선형회귀모델
13.2.1최소자승에의한선형회귀모델추정
13.2.2회귀모델의해석력:결정계수R2
13.2.3회귀모델과각모수의일반통계적유의성
13.2.4모델모수의신뢰구간구축과예측
13.2.5다중선형회귀모델의추정
13.2.6회귀모델에서의더미변수
13.3OLS로추정된회귀모델의예측
13.3.1잔차의정규성
13.3.2다중공선성문제
13.3.3이분산성문제
13.3.4잔차의자기상관문제
13.3.5명세문제의탐지:Linktest와RESET검정
13.4비선형회귀모델
13.4.1박스-콕스변환:일반회귀모델
13.5Stata를사용한회귀모델의추정
13.6SPSS를사용한회귀모델의추정
13.7맺음말
13.8연습문제

14장.이진및다항로지스틱회귀모델
14.1소개
14.2이진로지스틱회귀모델
14.2.1최대우도에의한이진로지스틱회귀모델의추정
14.2.2이진로지스틱회귀모델의일반통계적유의성과각모수
14.2.3이진로지스틱회귀모델의모수에대한신뢰구간구성
14.2.4컷오프,민감도분석,전체모델효율,민감도,특이성
14.3다항로지스틱회귀모델
14.3.1최대우도에의한다항로지스틱회귀모델추정
14.3.2다항로지스틱회귀모델과그각모수에대한일반통계적유의성
14.3.3다항로지스틱회귀모델에대한모수의신뢰구간구성
14.4Stata를사용한이진및다항로지스틱회귀모델추정
14.4.1Stata를사용한이진로지스틱회귀
14.4.2Stata를사용한다항로지스틱회귀
14.5SPSS를사용한이진및다항로지스틱회귀모델추정
14.5.1SPSS를사용한이진로지스틱회귀
14.5.2SPSS를사용한다항로지스틱회귀
14.6맺음말
14.7연습문제
부록:프로빗회귀모델
A.1개요
A.2예제:Stata를사용한프로빗회귀모델추정

15장.개수데이터를위한회귀모델:푸아송과음이항
15.1소개
15.2푸아송회귀모델
15.2.1최대우도에의한푸아송회귀모델의추정
15.2.2푸아송회귀모델