파이썬 기초 (2) 썸네일형 리스트형 [파이썬] 웹 스크래핑.4 - CSV 기본 * 시가총액 상위 구하기 (naver > 증권 > 시가총액) url = https://finance.naver.com/sise/sise_market_sum.naver?&page=2 (첫번째 ; https://finance.naver.com/sise/sise_market_sum.naver 이지만, &page =1 해도 동일한 결과 ) 여기선 1~5까지의 페이지만 구하기로 한다. (필요하면 계속 구할수있지만) 종목들과 정보가 있는 table (class는 type_2) 에 있는 항목들을 찾는다 필요없는 정보는 (공백 들) 필터링해서 필요한 정보만 받는다 csv로 저장하기위한 file 준비를 한다. * source import csv import requests from bs4 import BeautifulS.. [파이썬] 웹 스크래핑.3 - BeautifulSoup4 - 1. 설치 및 기본적인 찾기 User Agent HTTP 요청을 보내는 디바이스와 브라우저 등 사용자 s/w의 식별 정보를 담고 있는 request header의 한 종류. 보통 http 요청 에러 발생시 요청을 보낸 사용자 환경을 알아보기 위해 사용 기본 형태 : User-Agent: / ex) 크롬의 경우 Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.103 Safari/537.36 활용 : User Agent 정보를 기반으로 특정 브라우저에서만 다르게 동작하도록 하거나 할 때 등 BeautifulSoup4 진행 BeautifulSoup4 설치 및 기본 활용 터미널에서 "pip install beautifulsoup4".. 이전 1 다음
