란 개발일지

멋쟁이사자처럼 X K-DIGITAL Training - 06.15 Selenium 이용하여 기사 본문 번역하기 라이브러리 from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.common.keys import Keys from bs4 import BeautifulSoup import time import pandas as pd import numpy as np from collections import Counter from konlpy.tag import Okt from PIL import Image from wordcloud import WordCloud, ImageColorGe..

PYTHON/K-DIGITAL 2021. 6. 25. 23:53

멋쟁이사자처럼 X K-DIGITAL Training - 06.14 스크랩한 기사로 텍스트 데이터 분석 및 워드클라우드 만들기 라이브러리 import numpy as np import pandas as pd import nltk from konlpy.tag import Okt import matplotlib import matplotlib.pyplot as plt from matplotlib import font_manager, rc from wordcloud import WordCloud from PIL import Image from wordcloud import ImageColorGenerator numpy 벡터, 행렬 등 수치 연산을 수행하는 선형대수 라이브러리 pandas 데이터프레임 생성하여 행..

PYTHON/K-DIGITAL 2021. 6. 25. 21:00

멋쟁이사자처럼 X K-DIGITAL Training - 06.11 [이전] 2021.06.23 - [python/k-digital] - [K-DIGITAL] 파이썬 웹 크롤링 - 뉴스 기사 스크랩 [K-DIGITAL] 파이썬 웹 크롤링 - 뉴스 기사 스크랩 멋쟁이사자처럼 X K-DIGITAL Training - 06.11 웹 스크랩핑 vs 웹 크롤링 웹 스크랩핑 (scraping) 웹 사이트 상에서 원하는 정보를 추출하는 기술 특정 웹 사이트 또는 페이지에서 특정 정보 검색 웹 크롤링 juran-devblog.tistory.com 이전 글에서는 '뉴시스' 언론사 기준으로 여러 기사 본문 스크랩핑을 진행하였다. 텍스트데이터 분석에 쓰기에 데이터 양도 부족할 뿐더러 몇 개의 뉴스에서는 본문이 제대로 스크랩되..

PYTHON/K-DIGITAL 2021. 6. 23. 13:24

멋쟁이사자처럼 X K-DIGITAL Training - 06.11 웹 스크랩핑 vs 웹 크롤링 웹 스크랩핑 (scraping) 웹 사이트 상에서 원하는 정보를 추출하는 기술 특정 웹 사이트 또는 페이지에서 특정 정보 검색 웹 크롤링 (crawling) 웹 크롤러(자동화 봇)가 일정 규칙으로 웹페이지 브라우징(탐색) 하는 것 웹 크롤러(crawler)는 사이트나 네트워크가 제공할 수 있는 것을 끝없이 탐색하면서 스스로 웹 페이지를 탐색할 수 있는 프로그램의 능력을 의미 검색 엔진에서 url의 콘첸츠를 추출하고 이 페이지에서 다시 다른 링크를 확인하고 링크의 url을 가져오는데 주로 사용 검색 결과에서 뉴스 기사 스크랩하기 라이브러리 import requests from bs4 import Beautiful..

PYTHON/K-DIGITAL 2021. 6. 23. 00:38

멋쟁이사자처럼 X K-DIGITAL Training - 06.21 [github] likelion-kdigital/semi-project-1 https://github.com/ijo0r98/likelion-kdigital/tree/main/semi-project-1 ijo0r98/likelion-kdigital 멋쟁이사자처럼 & K-Digital Training✏. Contribute to ijo0r98/likelion-kdigital development by creating an account on GitHub. github.com 시각화 자료 추가 1) 사고 발생건수 시각화 그래프 유형 stacked df_bic_acc_plt.plot(kind="bar", stacked=True, figsize=(..

PYTHON/K-DIGITAL 2021. 6. 22. 23:24

멋쟁이사자처럼 X K-DIGITAL Training - 06.21 [github] likelion-kdigital/semi-project-1 https://github.com/ijo0r98/likelion-kdigital/tree/main/semi-project-1 ijo0r98/likelion-kdigital 멋쟁이사자처럼 & K-Digital Training✏. Contribute to ijo0r98/likelion-kdigital development by creating an account on GitHub. github.com [이전] 세미프로젝트1. 서울시 자전거사고 분석(1) 문제분석 2021.06.18 - [python/K-Digital] - [K-DIGITAL] 세미프로젝트1. 서울시 자..

PYTHON/K-DIGITAL 2021. 6. 22. 22:49

멋쟁이사자처럼 X K-DIGITAL Training - 06.16 [이전] 2021.06.21 - [python/K-Digital] - [K-DIGITAL] 파이썬을 활용한 기초 통계분석(1) 빈도 분석과 이상치 [K-DIGITAL] 파이썬을 활용한 기초 통계분석(1) 빈도 분석과 이상치 멋쟁이사자처럼 X K-DIGITAL Training - 06.16 라이브러리 import pandas as pd import numpy as np import matplotlib.pyplot as plt # font from matplotlib import font_manager, rc # rc == run configure(con.. juran-devblog.tistory.com 라이브러리 import pandas a..

PYTHON/K-DIGITAL 2021. 6. 22. 14:59

멋쟁이사자처럼 X K-DIGITAL Training - 06.16 라이브러리 import pandas as pd import numpy as np import matplotlib.pyplot as plt # font from matplotlib import font_manager, rc # rc == run configure(configuration file) %matplotlib inline font_name = font_manager.FontProperties(fname="c:/Windows/Fonts/malgun.ttf").get_name() rc('font', family=font_name) # run configure pandas 데이터 처리 및 분석 라이브러리로 행과 열로 이루어진 데이터 객체..

PYTHON/K-DIGITAL 2021. 6. 21. 13:14

Pandas 라이브러리 데이터 처리, 분석을 위한 라이브러리로 행과 열로 이루어진 데이터 객체(데이터프레임)를 만들어 사용 설치 pip install pandas 라이브러리 import pandas as pd 시리즈(Series) 차원이 없는(행과 열의 구별이 없는) 배열 데이터 pd.Series([1,3,5,7]) pd.Series([1, 3, 5, 7], index=['a', 'b', 'c', 'd']) 값 a.values # array([1, 3, 5, 7], dtype=int64) 인덱스 (없을 시 숫자로 기본 인덱스 생성) a.index # RangeIndex(start=0, stop=4, step=1) b.index # ['a', 'b', 'c', 'd'] 값마다 개수 count series...

PYTHON/기본 2021. 6. 19. 02:24

멋쟁이사자처럼 X K-DIGITAL Training - 06.18 [github] likelion-kdigital/semi-project-1 https://github.com/ijo0r98/likelion-kdigital/tree/main/semi-project-1 ijo0r98/likelion-kdigital 멋쟁이사자처럼 & K-Digital Training✏. Contribute to ijo0r98/likelion-kdigital development by creating an account on GitHub. github.com [이전] 세미프로젝트1. 서울시 자전거사고 분석(1) 문제분석 2021.06.18 - [python/K-Digital] - [K-DIGITAL] 세미프로젝트1. 서울시 자..

PYTHON/K-DIGITAL 2021. 6. 19. 00:48

멋쟁이사자처럼 X K-DIGITAL Training - 06.17 [github] likelion-kdigital/semi-project-1 https://github.com/ijo0r98/likelion-kdigital/tree/main/semi-project-1 ijo0r98/likelion-kdigital 멋쟁이사자처럼 & K-Digital Training✏. Contribute to ijo0r98/likelion-kdigital development by creating an account on GitHub. github.com 서울시에서 자전거타기에 가장 위험한 곳은? 필요한 라이브러리 import numpy as np import pandas as pd import seaborn as sns ..

PYTHON/K-DIGITAL 2021. 6. 18. 23:43

멋쟁이사자처럼 X K-DIGITAL Training - 06.10 [이전] 파이썬 통계자료 분석 및 시각화 복습(1) 데이터 전처리 2021.06.15 - [python/K-Digital] - [K-DIGITAL] 파이썬 통계자료 분석 및 시각화 복습(1) 데이터 전처리 [K-DIGITAL] 파이썬 통계자료 분석 및 시각화 복습(1) 데이터 전처리 멋쟁이사자처럼 X K-DIGITAL Training - 06.09 필요한 라이브러리 준비 import numpy as np import pandas as pd numpy 벡터, 행렬 등 수치 연산을 수행하는 선형대수 라이브러리 pandas 데이터 처리 및 분석 라이.. juran-devblog.tistory.com 필요한 라이브러리 import numpy as..

PYTHON/K-DIGITAL 2021. 6. 16. 00:03