데이터 한 그릇

인간의 말을 컴퓨터가 알아듣게 만드는 처리 컴퓨터는 인간의 말을 그대로 이해할 수 없다. 컴퓨터가 알아들을 수 있게 언어를 가공해서 줘야만 한다. 즉, 전처리 작업이 필요하다. 텍스트의 토큰화 텍스트가 존재한다면 이를 단어별, 문장별, 형태소별로 나눌 수 있다. 입력된 텍스트를 잘게 나누는 과정을 토큰화(Tokenization) 라고 한다. from tensorflow.keras.preprocessing.text import text_to_word_sequence text = '해보지 않으면 해낼 수 없다. 오늘 저녁은 뭘 먹지' result = text_to_word_sequence(text) print(result) 결과 : ['해보지', '않으면', '해낼', '수', '없다', '오늘', '저녁은..

컨볼루션 신경망(CNN) 컨볼루션 신경망은 입력된 이미지에서 `다시 한번 ` 특징을 추출하기 위해서 `커널` 을 사용하는 기법. 다시 한번 특징을 추출. 합성곱 예를 들어서 어떤 이미지 데이터가 4 * 4 의 구조를 가지고 있다고 가정하자. 커널은 하나 생성하는데 그 크기가 2*2 라고 해보자. 커널 각각의 칸 안에는 가중치가 들어가 있다. 2*2커널은 이미지 데이터의 처음부터 한칸씩 좌우, 위아래로 움직이며 원래 있던 값들에서 가중치들을 곱해준다. 그러면 3 * 3 의 행렬이 도출된다. 이렇게 해서 새롭게 만들어진 층을 컨볼루션(합성곱) 이라고 한다. 만일 이러한 커널을 여러 개 생성을 하면 여러 개의 합성곱이 탄생한다. 합성곱 층을 처음에 만들 때도 다중 퍼셉트론을 만들 때처럼 똑같이 input_di..