Python-URLの構築

リクエストモジュールは、URLを構築し、URL値を動的に操作するのに役立ちます。URLの任意のサブディレクトリをプログラムでフェッチしてから、その一部を新しい値に置き換えて新しいURLを作成できます。

Build_URL

以下の例では、 urljoinURLパス内のさまざまなサブフォルダーをフェッチします。urljoinメソッドは、ベースURLに新しい値を追加するために使用されます。

from requests.compat import urljoin
base='https://stackoverflow.com/questions/3764291'
print urljoin(base,'.')
print urljoin(base,'..')
print urljoin(base,'...')
print urljoin(base,'/3764299/')
url_query = urljoin(base,'?vers=1.0')
print url_query
url_sec = urljoin(url_query,'#section-5.4')
print url_sec

上記のプログラムを実行すると、次の出力が得られます-

https://stackoverflow.com/questions/
https://stackoverflow.com/
https://stackoverflow.com/questions/...
https://stackoverflow.com/3764299/
https://stackoverflow.com/questions/3764291?vers=1.0
https://stackoverflow.com/questions/3764291?vers=1.0#section-5.4

URLを分割する

URLは、メインアドレス以外の多くの部分に分割することもできます。URLに添付された特定のクエリまたはタグに使用される追加のパラメーターは、以下に示すようにurlparseメソッドを使用して分離されます。

from requests.compat import urlparse
url1 = 'https://docs.python.org/2/py-modindex.html#cap-f'
url2='https://docs.python.org/2/search.html?q=urlparse'
print urlparse(url1)
print urlparse(url2)

上記のプログラムを実行すると、次の出力が得られます-

ParseResult(scheme='https', netloc='docs.python.org', path='/2/py-modindex.html', params='', query='', fragment='cap-f')
ParseResult(scheme='https', netloc='docs.python.org', path='/2/search.html', params='', query='q=urlparse', fragment='')