자연어 처리 첫단추 끼우기

임주희

출간작으로『머신러닝첫단추끼우기』등이있다.

1자연어처리소개
실습1셋업

2기본언어모델
2.0학습목표
2.1텍스트분석과토큰화
2.2n-gram모델
2.3단어가방모형(BagofWords,BoW)
실습2간단한말뭉치분석으로영어텍스트의특징파악하기
실습3n-gram모델을바탕으로새로운텍스트생성해보기
실습4BoW모형직접구현해보기

3워드임베딩(Wordembeddings)
3.0학습목표
3.1워드임베딩의기본적개념
3.2오토인코더(Autoencoder)
3.3비지도학습방식을이용한위드임베딩
실습5워드임베딩
실습6오토인코더
실습7오토인코더를통한워드임베딩학습

4RNN
4.0학습목표
4.1Intro
4.2RNN이란?
4.3RNN구축하기
4.4TransformingtoBeLinear
4.5Backpropagation
4.6VariationsofRNN
실습8RNN학습시켜보기1
실습9RNN학습시켜보기2

5Seq2Seq
실습10Seq2seq
실습11Attention기반seq2seq

6신경망성능향상을위한기법들
6.0학습목표
6.1BatchNormalization
6.2LayerNormalization
6.3ResidualConnection
실습12Transfomer