AI SCHOOL

Okt Library # 한국어 형태소 분석기 KoNLPy 패키지에 속한 라이브러리 KoNLPy 테스트 # Copy python from konlpy.tag import Okt tokenizer = Okt() tokens = tokenizer.pos("아버지 가방에 들어가신다.", norm=True, stem=True) …

Import Libraries # Copy python import requests from bs4 import BeautifulSoup import pandas as pd from datetime import datetime import time # time.sleep() import re 뉴스 검색 결과에서 네이버 뉴스 추출 # …

Scikit-learn Library # Traditional Machine Learning (vs DL, 인공신경을 썼는지의 여부) Copy python from sklearn import datasets, linear_model, model_selection, metrics data_total = datasets.load_boston() x = …

Tokenizing Text Data # Import Libraries # Copy python import nltk from nltk.corpus import stopwords from collections import Counter Set Stopwords # Copy python stop_words = …

NLTK Library # NLTK(Natural Language Toolkit)은 자연어 처리를 위한 라이브러리 Copy python import nltk nltk.download() 문장을 단어 수준에서 토큰화 # Copy python sentence = 'NLTK is a leading platform for building Python …

BeautifulSoup Library # Copy python from bs4 import BeautifulSoup from urllib.request import urlopen 단어의 검색 결과 출력 # 다음 어학사전 URL 불러오기 # Copy python # 찾는 단어 입력 word = 'happiness' url = …

Web Crawling vs Web Scraping # Web Crawling: Bot이 web을 link를 통해 돌아다니는 것 Web Scraping: Webpage에서 원하는 자료를 긇어오는 것 HTML Tags # Tag’s Name: html, head, body, p, span, li, ol, ul, div Tag’s …

Visualization Libraries # Plotly Altair Bokeh (Website Graph) @ https://j.mp/30772sU Data Chart Types # Numeric: 숫자 자체에 의미가 있음 (온도 등), 연속형 Categoric: 숫자 너머에 의미가 있음 (성별, 강아지 품종 등), 불연속형 @ …

Visualization Library # Copy python import seaborn as sns sns.heatmap(gu_df[]) Visualization Issues # 한글 데이터 표시 오류 서로 다른 자릿수로 구성된 열에 동일한 스케일 적용 시각화된 테이블 형태의 비직관성 문제 인구수가 고려되지 않은 부정확한 데이터 한글 데이터 시각화 # …

Practice Data # 서울시 범죄현황 통계자료 범죄별로 검거율 계산 # Copy python # gu_df는 실습 자료에 서울시 경찰청의 소속 구 데이터를 추가한 DataFrame gu_df['강간검거율'] = gu_df['강간(검거)']/gu_df['강간(발생)']*100 gu_df['강도검거 …