국제개발협력평가의 이해

박수영

박수영은KOICAODA연구센터센터장이며,『Jour-nalofInternationalDevelopmentCooperation』편집위원장입니다.영국멘체스터대학교글로벌개발연구소(GlobalDevleopmentInstitute)에서개발정책학박사학위를취득했습니다.한국국제협력단(KOICA),유엔아시아태평양경제사회위원회(UN-ESCAP),호주국제개발청(AusAID)등에서사업기획및관리,평가와모니터링등다양한개발협력업무를수행했으며,개발효과성,성과관리,개발정책일관성분야에연구를계속해왔습니다.주요참여저서는『열두개의키워드로이해하는국제개발협력』,『국제개발협력(입문편)』이있습니다.
연구발간물로는『개발재원:TOSSD와혼합재원논의를중심으로』,『개발협력평가지수분석과함의:CDI와QuODA를중심으로』,『Post-2015체제의개발재원논의분석』,『지속가능개발목표(SDGs)수립현황과대응방안』,『원조효과성분석연구동향고찰을통한개발협력정책제언』,『AnalysisofSaemaulUndong:aKoreanruraldevelopmentprogrammeinthe1970s』등이있습니다.

제1장평가의주요개념
1.평가정의
2.평가목적
3.평가기준
4.평가원칙
5.평가종류

제2장프로그램이론과변화이론
1.이론적배경
2.프로그램이론의구성
3.논리모형과변화이론
4.의미와한계

제3장평가기획
1.사전조사
2.평가질문개발
3.평가계획서수립

제4장평가수행
1.평가수행계획서작성
2.데이터수집
3.현지조사
4.수행관리

제5장평가종료와보고
1.평가결과보고서작성
2.평가결과소통
3.평가결과활용

제6장데이터수집I
1.데이터수집전략
2.문헌조사
3.인터뷰

제7장데이터수집II
1.포커스그룹
2.전문가판단
3.설문조사

제8장표본추출
1.의미
2.방법
3.비무작위표집법
4.무작위표집법

제9장데이터분석
1.분석의의미
2.정성분석
3.정량분석
4.지표와범위

제10장영향평가I:정성평가와RCT
1.기여도분석
2.가장중요한변화법
3.RCT와인과추론
4.RCT수행방법
5.RCT설계시고려사항
6.RCT의한계

제11장영향평가II:준실험설계법
1.전후비교법
2.단절적시계열기획법
3.비동등집단설계법
4.회귀불연속기획법
5.이중차분법

제12장인도주의활동평가
1.주요개념
2.모니터링과평가주기
3.실시간평가와공동평가
4.주의사항

제13장평가품질과윤리
1.평가품질
2.평가와정치
3.평가윤리

제14장조직성과관리
1.배경과의미
2.사례분석
3.의미와한계

참고문헌

표목차
〈표1-01〉평가의다양한정의들
〈표1-02〉OECDDAC평가기준
〈표1-03〉평가의종류
〈표2-01〉프로그램이론의서로다른정의
〈표2-02〉논리모형예시
〈표2-03〉PDM의구조와내용
〈표3-01〉평가질문유형
〈표3-02〉OECDDAC평가기준별표준질문
〈표3-03〉평가질문점검표
〈표3-04〉예산을고려한표본규모조절
〈표3-05〉평가계획서의구성
〈표3-06〉평가팀업무일자산정양식
〈표3-07〉평가예산항목예시
〈표4-01〉평가매트릭스양식
〈표5-01〉평가결과보고서구성예시
〈표5-02〉평가결과보고서품질확인서
〈표5-03〉관리자답변매트릭스
〈표6-01〉SDGs지표관련데이터베이스
〈표6-02〉문헌자료분류기준
〈표6-03〉문헌자료선정기준표예시
〈표7-01〉개방형질문과폐쇄형질문비교
〈표8-01〉95%신뢰수준과5%오차범위에필요한최소표본크기
〈표8-02〉엑셀로생성한난수표
〈표9-01〉코드와코딩구조예시
〈표9-02〉코드색인예시
〈표9-03〉평가매트릭스를활용한삼각측량법
〈표9-04〉에티오피아인종명목데이터빈도표
〈표9-05〉시험성적등간데이터빈도표
〈표9-06〉성별만족도조사결과표
〈표9-07〉QQTtargeting예시
〈표13-01〉유용성세부기준과설명
〈표13-02〉타당성세부기준과설명
〈표13-03〉정당성세부기준과설명
〈표13-04〉정확성세부기준과설명
〈표13-05〉책무성세부기준과설명
〈표13-06〉AEA의평가자를위한원칙
〈표13-07〉UNEG평가윤리가이드라인의평가원칙
〈표14-01〉네덜란드중점지원주제와국별프로그램연계

그림목차
〈그림2-01〉프로그램이론의구조
〈그림2-02〉변화이론예시
〈그림2-03〉프로그램이론예시
〈그림2-04〉PDM의논리체계
〈그림2-05〉변화이론도식화예시
〈그림2-06〉구체화된변화이론도식의예시
〈그림3-01〉평가기획절차
〈그림4-01〉평가수행절차
〈그림5-01〉평가종료절차
〈그림5-02〉그래프를활용한시각화예시
〈그림5-03〉워드클라우드를사용한핵심단어표현예시
〈그림9-01〉상자수염그래프
〈그림9-02〉표준정규분포그래프
〈그림11-01〉전후비교법
〈그림11-02〉단절적시계열기획법
〈그림11-03〉단순비동등집단설계법
〈그림11-04〉코호트비동등집단설계법
〈그림11-05〉기초선추가비동등집단설계법
〈그림11-06〉회귀불연속기획법
〈그림11-07〉이중차분법
〈그림14-01〉개발협력기관조직성과관리틀
〈그림14-02〉네덜란드원조성과체계


상자목차
〈상자1-01〉OECDDAC의평가정의
〈상자1-02〉모니터링과평가비교
〈상자3-01〉사업평가기획수립에필요한주요문서예시
〈상자3-02〉사업관련주요이해관계자예시
〈상자4-01〉평가수행계획서목차예시
〈상자6-01〉반구조화인터뷰추가질문예시
〈상자6-02〉인터뷰체크리스트
〈상자6-03〉인터뷰기법사용시유의점
〈상자7-01〉포커스그룹사용시유의점
〈상자7-02〉평가에서델파이기법사용
〈상자7-03〉설문조사질문작성에서발생가능한실수
〈상자7-04〉설문조사시유의점
〈상자8-01〉미국대선여론조사와표집틀의중요성
〈상자10-01〉평가협약서주요내용
〈상자12-01〉인도주의활동원칙
〈상자12-02〉인도주의지원평가기준
〈상자13-01〉뉘른베르크강령
〈상자13-02〉터스키기매독실험

기후위기,분쟁,감염병위기와같은새롭고복잡한위기에대응하여효과적인사업수행을위해국제개발협력평가는어떻게변화해야하는가.

제2차세계대전이후70여년간이어져왔던국제개발협력은21세기에전환점을맞이하고있다.기후위기와감염병위기와같은전과다른위기에대응하기위해국제사회는국제개발협력사업의효과성제고를통해위기에보다효율적으로대응하고자노력하고있다.혁신을위해서는사업에대한논리적이고체계적이며,객관적인성찰을통한학습이필요하다.따라서다양한국제개발협력기관은성과관리와평가강화를통해위기대응능력을강화하고자노력하고있다.

하지만개발협력에서의평가는개념에대한체계적인학습과더불어실제수행에대한실용지식이필요한복잡한주제이다.그러나아직까지국제개발협력평가에대해이론부터실제까지의정보를종합적이고포괄적으로소개한책은없었다.이책은평가와관련된다양한개념과의미를정리하고,단계별평가업무수행법을예시와함께소개하고,평가를위한실제분석도구(tools)와조사방법을설명한다.이책은독자여러분들이평가이론을체계적으로이해하고,실제평가업무를단계별로수행할수있도록실질적인정보와자료를포함했다.

이책은크게네부분으로구성된다.첫번째부분에서는평가와관련된주로개념과배경이론을담고있다.먼저평가의정의,원칙,기준,유형에대해서알아보고,이어개발협력평가에서논리적기초가되는프로그램이론과변화이론에대해서살펴본다.두번째부분은평가단계별업무를소개한다.평가업무를기획,수행,종료의세단계로구분하여단계별수행사항을다양한도구(tool)와예시와함께설명한다.세번째부분에서는개발협력평가에서많이사용되는문헌조사,인터뷰,포커스그룹,설문조사등의방법론과함께,다양한방법론을통해수집한데이터의분석법에학습한다.마지막으로네번째부분에서는평가와관련된최근이슈들을보다심도있게살펴본다.먼저영향평가와인도주의활동평가의특성과방법을살펴본다.아울러최근강조되고있는평가윤리와평가품질보증방법에대해생각해본다.

한정된개발협력자원에비해대응해야할위기상황이증가하는현재명확한평가를통해재원활용의효과성을높이는문제는더욱중요해지고있다.이에따라많은개발협력기관에서는평가를통한학습을강조하며사업효과성을높이기위해노력하고있다.이책은평가이론부터실제까지를총망라한정보와지식을제공하여독자여러분들이평가의정확한의미를학습하고평가업무에대한실용적인지식을습득하여평가를실제로수행하는데있어유용한지침서가될것이다.