데이터 한 그릇

텍스트 데이터에서 다양한 방법으로 텍스트 분류 모델을 만들기 전에, EDA 작업과 전처리 작업을 진행할 예정. 데이터는 kaggle 에 있는 wrod2vec -nlp-tutorial 데이터를 사용할 것. 이때 캐글의 데이터는 직접 홈페이지 다운 방식이 아니라 api 를 사용. 데이터 EDA import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns !kaggle competitions download -c word2vec-nlp-tutorial 캐글 api 이용해서 wrod2vec -nlp-tutorial 데이터 다운. DATA_IN_PATH = './data_in/' TRAIN_INPUT_DATA..

자연어 생성과 기계 이해 자연어 생성 우리가 말하고 쓰는 것처럼 기계가 하면 어떨까? 지금은 기계가 사실에 관련된 글을 잘 작성하지만 감정과 관련된 것과 논리가 들어간 글은 잘 쓰지 못한다. 가장 자연어 생성 중 핫한 것은 자연어 번역 기계 이해 기계가 어떤 텍스트에 대해서 학습하고 질문이 들어오면 답변을 하는 것. 기계가 텍스트를 이해하고 논리적 추론을 할 수 있는지 데이터를 통해서 학습해 보는 것.