<pre id="jbbnp"><rp id="jbbnp"></rp></pre>

    [使用案例]使用ip代理爬取貓眼電影案例

    發布時間:2020-05-24 關注熱度:°C

      使用ip代理爬蟲的好處其中一點就是我們不用擔心我們的IP被網站封禁了,ip代理更換IP,這樣我們就能夠繼續訪問網站了,爬蟲程序也能夠繼續進行。

    ip代理使用步驟

      ProxyHandler處理(代理服務器),使用ip代理,是爬蟲的常用手段,通常使用UserAgent 偽裝瀏覽器爬取仍然可能被網站封了IP,但是我們使用ip代理就不怕它封了我們的IP了。

      基本使用步驟:

      1、設置代理地址

      2、創建ProxyHandler

      3、創建Opener

      4、安裝Opener# 使用代理服務器訪問貓眼

      以下是代碼部分:

      # https://maoyan.com/

      from urllib import request,error

      '''

      '''

      if __name__ == '__main__':

      url = "https://baidu.com/"

      # 1.設置代理地址

      proxy = {'http': '218.60.8.83:3129'}

      # 2.創建ProxyHandler

      proxy_handler = request.ProxyHandler(proxy)

      # 3.創建Opener

      opener = request.build_opener(proxy_handler)

      # 4.安裝Opener

      request.install_opener(opener)

      # 下面再進行訪問url就會使用代理服務器

      try:

      rsp = request.urlopen(url)

      html = rsp.read().decode()

      print(html)

      except error.HTTPError as e:

      print(e)

      except Exception as e:

      print(e)

      上面IP海介紹了一個比較基礎的爬取貓眼電影的操作,大家可以通過這幾個步驟來了解ip代理的使用。

     

    版權聲明:本文為IP海(iphai.cn)原創作品,未經許可,禁止轉載!

    Copyright © 2020-2022 www.meshmotors.com. All Rights Reserved. IP海 版權所有.
    IP海僅提供中國內IP加速服務,無法跨境聯網,用戶使用IP海從事的任何行為均不代本公司的意志和觀點,產生的相關責任用戶自負。
    ICP備案鄂ICP備19030659號-3 公安備案鄂公網安備42100302000141號 計算機軟件著作權證計算機軟件著作權證 ICP/EDI許可證ICP/EDI許可證:鄂B2-20200106

    微信掃一掃咨詢
    八戒八戒在线www日本