Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | ||||||
2 | 3 | 4 | 5 | 6 | 7 | 8 |
9 | 10 | 11 | 12 | 13 | 14 | 15 |
16 | 17 | 18 | 19 | 20 | 21 | 22 |
23 | 24 | 25 | 26 | 27 | 28 |
Tags
- 텍스트 분류
- numpy
- 히스토그램
- 밑바닥부터 시작하는 딥러닝2
- word2vec
- 자연어 처리
- F분포
- 밑바닥부터 시작하는 딥러닝
- rnn
- Pandas
- 파이썬 pandas
- 구글 BERT의 정석
- student t분포
- 기초통계
- 결정계수
- 감성분석
- 가설검정
- 오래간만에 글쓰네
- 다층 퍼셉트론
- Django
- 차원축소
- 군집화
- 텐서플로2와 머신러닝으로 시작하는 자연어처리
- 코사인 유사도
- 최소자승법
- 은준아 화이팅
- 머신러닝
- 회귀분석
- 기술통계학
- 모두의 딥러닝
Archives
- Today
- Total
목록BERT 추출 요약 (1)
데이터 한 그릇
텍스트 요약을 위한 BERTSUM 탐색
텍스트 요약 태스크를 수행하기 위해서 사전 학습된 BERT 모델을 활용해 파인 튜닝을 진행하는 법을 알아본다. 텍스트 요약에 맞춰 파인 튜닝된 BERT 모델을 BERTSUM 모델이라고 한다. (텍스트 요약에 맞춘 파인 튜닝 BERT 모델 : BERTSUM) 먼저 다양한 텍스트 요약 방식을 이해 (추출 요약, 생성 요약) 그리고 밑의 세 가지 추출 요약 수행 법을 배운다. 분류기가 있는 BERTSUM 트랜스포머를 활용한 BERTSUM LSTM을 활용한 BERTSUM 그 다음으로는 추출 요약을 수행하기 위해 BERTSUM을 어떻게 활용하는지 알아본다. 그 다음으로 ROUGE 메트릭 : 텍스트 요약 평가 지표를 알아본다. (ROUGE - N, ROUGE - L) 그 다음으로 BERTSUM 모델의 성능을 확인한..
NLP/구글 BERT의 정석
2022. 2. 17. 10:44