개발일기 정답찾기

[파이썬] 크롤링 requests 패키지 임포트 - 유딩동 Tistory 본문

IT/crawling scraping

[파이썬] 크롤링 requests 패키지 임포트 - 유딩동 Tistory

유딩동 2021. 6. 8. 09:01

안녕하세요, 유딩동입니다.

파이썬 크롤링에 앞서 패키지를 import 하는 글을

정리해 보았습니다.

 

사실 저는 거의 툴을 쓰지 않고

파이썬으로 프로젝트 개발을 거의 완료 한 상태인데

왜 이제서.. 파이참을 설치하였고,

다 만들어 두고 정리를 하는지는 모르겠지만 ... ㅜㅜ

그래도 정리 시작 해 봅니다!!

 

먼저, 파이썬 IDE 파이참을 설치 하였어요.

https://11uding.tistory.com/8

 

파이썬 IDE 개발툴 파이참 PyCharm 설치하기, 장점 - 유딩동 Tistory

안녕하세요. 파이썬으로 크롤링을 진행하게 되었어요. 기존에는 이클립스를 사용하였었는데 사용하다가 몇가지 불편한 점들이 있었어요! 지금 VS code도 사용 중인데 개발툴을 여러개 써보고 싶

11uding.tistory.com

 

크롤링을 하기 위해서 requests 모듈이 필요합니다.

import하는 방법이 몇가지 있는데,

 

 

1. 빨간줄이 뜨는 소스 - 마우스오버 - Install Package requests

-> 패키지 설치 완료 XD

 

 

이렇게 밑에 install 완료라고 뜹니다!

빨간 박스 보이시나요?

 

2. File - Settings - Python Interpreter 에서 패키지 설치!

 

+버튼 누르고

임포트 원하는 모듈을 검색 해주세요!

 

requests 를 누르고, Install Package 를 눌러주세요!

 

 

이제 install이 되었으니

크롤링을 시작해 보죠

 

import requests URL = "http://11uding.tistory.com/"; res = requests.get(URL) print(res)

 

응답코드가 이렇게 찍히네요? :D

 

import requests URL = "http://11uding.tistory.com/"; res = requests.get(URL) html = res.text print(html)

 

이제 제 티스토리를 출력해 올 수 있도록

res.text로 출력해 봅니다!

제목이 안녕하세요, 유딩동입니다 글이 뜨는데!!

 

바로 이 글이라구요..

ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ

request를 이용한 크롤링의 시작 참 쉽죠? XD

 


웹페이지에서 개발자도구에서 볼 수 있는 태그가 쭈루륵 나왔네요!

Comments