Pythonのurllib3でBasic認証を通す

Basic認証をかけて制作しているWEBサイトをクロールする場面があった。 urllib3を使ってクローラーの準備はできているものとして、basic認証を通したい。 header情報を追加するだけだった。 通常は、 http = urllib3.PoolManager() response = http.request...

[Python] RequestsでBasic認証をパスして情報を取得する

RequestsはPythonでhttpコンテンツを簡単に取得できるライブラリ。初心者がスクレイピングを勉強する時にも使いやすい。 Basic認証がかかっているウェブサイトの場合でも、認証情報を指定することで問題なくコンテンツを取得できる。 Python環境で、 import requests requests.get...