Database

참고 사이트 (1)

Raccoon2125 2021. 1. 15. 12:07

웹 크롤링, robot.txt, MongoDB, pypi, requests, bs4

 

< 웹 크롤링 >

https://movie.naver.com/movie/running/current.nhn

 

현재상영작 : 네이버 영화

상영 중 영화의 예매율/평점/좋아요 순 정보 제공.

movie.naver.com

https://ai-inter1.com/python-requests/

 

図解!PythonのRequestsを徹底解説!(インストール・使い方) - AI-interのPython3入門

02. Requests 図解!PythonのRequestsを徹底解説!(インストール・使い方) 更新日:2020年6月12日 Requestsとは requestsとは、HTTP通信用のPythonのライブラリです。主にWEBスクレイピングでHTMLやXMLファイル

ai-inter1.com

https://www.ymori.com/books/python2nen/test1.html

 

Python2年生

 

www.ymori.com

https://www.ymori.com/books/python2nen/test2.html

 

Python2年生

 

www.ymori.com

< robot.txt > https://limelightkr.co.kr/robots-txt-%EA%B7%B8%EA%B2%8C-%EB%AD%90%EC%A3%A0/

 

Robots.txt 그게 뭐죠? - 라임라이트 블로그

Robots.txt 파일이란 웹 크롤러(Web Crawlers)와 같은 착한 로봇들의 행동을 관리하는 것을 말합니다. 우리가 이 로봇들을…

limelightkr.co.kr

 

< MongoDB >

https://velopert.com/mongodb-tutorial-list

 

[MongoDB] 강좌 목록 | VELOPERT.LOG

 

velopert.com

< Pypi > : 파이프라인을 사용한 설치 시 버전을 쉽게 확인(적합성 여부 판단)

※ 빅데이터 활용에 사용되는 패키지: requests, bs4(BeautifulSoup)

pypi.org/

 

PyPI · The Python Package Index

The Python Package Index (PyPI) is a repository of software for the Python programming language.

pypi.org

파이프라인으로 requests 설치 및 경로 확인

< requests (get vs post) > https://im-developer.tistory.com/166

 

[HTTP] HTTP Method 정리 / GET vs POST 차이점

GET이나 POST는 매우 자주 쓰는 HTTP 메소드들이다. 아마 제일 많이 쓰지 않나 싶다. 근데 정확히 두 개가 어떻게 다른지, 어떤 특징을 가지고 있는지 잘 모르겠어서 정리해보려고 한다. 아래 글들은

im-developer.tistory.com

< bs4 (BeautifulSoup) > https://systemtrade.tistory.com/345

 

[파이썬] BS4... find() , find_all()

>>> html = ''' ........ ''' >>> from bs4 import BeautifulSoup >>> bs = BeautifulSoup ( html , "html.parser" ) >>> print ( bs  .perttify () ) # bs로 불러온 내용 보기 ....... find, find_all >>> bs..

systemtrade.tistory.com