machine translation
-
seq2seq 그리고 attentionNatural Language Processing 2022. 2. 4. 23:06
Reference https://guillaumegenthial.github.io/sequence-to-sequence.html Seq2Seq with Attention and Beam Search Sequence to Sequence basics for Neural Machine Translation using Attention and Beam Search guillaumegenthial.github.io https://wikidocs.net/24996 1) 시퀀스-투-시퀀스(Sequence-to-Sequence, seq2seq) 이번 실습은 케라스 함수형 API에 대한 이해가 필요합니다. 함수형 API(functional API, https://wikidocs.net/38861 )에 대해서 우선 숙 ..
-
기계 번역에서 alignment 의미Natural Language Processing 2022. 1. 25. 18:07
* alignment 의미 기계 번역 관련 논문[1]을 읽는데 다음과 같은 내용이 나왔다. In MT, one can intuitively interpret this attention mechanism as inducing an alignment between source and target sentences, as first proposed by Bahdanau et al. (2015). "어텐션 메커니즘은 source 문장과 target 문장 간의 alignment를 유도하는 것으로 직관적으로 해석할 수 있다" 이런 의미이다. 여기에서 alignment 단어는 컴퓨터 비전 분야에서도 정말 많이 봤던 단어이다. 자연어 특히 기계 번역에서의 alignment의 의미가 궁금하여 찾아보니 다음과 같았다. S..