목록딥러닝_프로젝트 (2)

Colab으로 하루에 하나씩 딥러닝

20 뉴스그룹 데이터 준비 및 특성 추출

데이터셋 확인 및 분리 (사이킷런 20 뉴스그룹) 해당 데이터는 언론에서 나오는 기사가 아닌 게시판에 올라온 사용자들의 포스트 categories 매개 변수를 이용해 20개의 topic 중에서 원하는 토픽을 선택할 수 있음 remove로 필요 없는 데이터 삭제 가능 각 데이터셋 내에서 .data는 텍스트의 내용,. target은 숫자로 표시된 라벨을 가져옴 ### 데이터셋 불러오기 from sklearn.datasets import fetch_20newsgroups # 20개 토픽 중 선택하고자 하는 토픽을 리스트로 생성 categories = ['alt.atheism', 'talk.religion.misc','comp.graphics','sci.space'] # 학습 데이터셋을 가져옴 newsgroup..
딥러닝_프로젝트 2022. 12. 22. 22:59
한국어 영화 리뷰 카운트 벡터 변환

### 데이터 다운로드 !git clone https://github.com/wikibook/textmining.git ### 데이터 확인하기 import pandas as pd df = pd.read_csv("/content/textmining/data/daum_movie_review.csv") df.head(10) ### review 항목을 바탕으로 카운트 벡터 생성 from sklearn.feature_extraction.text import CountVectorizer daum_cv = CountVectorizer(max_features=1000) # review를 이용해 count vector를 학습하고, 변환 daum_DTM = daum_cv.fit_transform(df.review) pri..
딥러닝_프로젝트 2022. 12. 20. 12:15
이전 Prev 1 Next 다음