跳轉至
第 9 章 · 進階導讀

9.2 進階爬蟲

⏱️ 20 分鐘 📖 互動式 🎯 進階

🎯 學習目標

  • requests / BeautifulSoup
  • 處理動態網頁
  • 反爬蟲對策

🌐 requests

import requests

r = requests.get("https://example.com")
print(r.status_code)
print(r.text)

🥣 BeautifulSoup

from bs4 import BeautifulSoup
soup = BeautifulSoup(r.text, "html.parser")
titles = soup.find_all("h2")

🎭 Selenium(動態)

from selenium import webdriver
driver = webdriver.Chrome()
driver.get("https://example.com")

⚠️ 注意事項

  • 尊重 robots.txt
  • 加 delay
  • 不要商業濫用