Python ile Web Scraping 2025 BeautifulSoup ve Selenium Uygulamalı Rehber

Web Scraping Nedir?​

• Ürün fiyatlarını çekmek
• Haber başlıklarını toplamak
• İçerik arşivlemek
• Akademik araştırmalarda veri seti oluşturmak

Kullanılacak Araçlar​

BeautifulSoup​

Selenium​

BeautifulSoup ile Temel Web Scraping​

pip install requests beautifulsoup4

Örnek Uygulama: Bir Blog Sayfasından Başlıkları Alma​

import requests
from bs4 import BeautifulSoup

url = 'https://example-blog.com'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')

titles = soup.find_all('h2', class_='post-title')
for title in titles:
print(title.get_text(strip=True))

• requests modülü sayfa içeriğini alır.
• BeautifulSoup ile HTML analiz edilir.
• find_all() fonksiyonu belirli etiketleri seçer.

Selenium ile Dinamik Web Scraping​

pip install selenium

Örnek Uygulama: JavaScript ile Yüklenen Ürün Listesi​

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By
import time

driver = webdriver.Chrome()
driver.get("https://example-ecommerce.com/products")

time.sleep(3)  # Sayfanın yüklenmesini beklemek

products = driver.find_elements(By.CLASS_NAME, "product-title")
for product in products:
print(product.text)

driver.quit()

• Tarayıcı başlatılır ve hedef sayfa açılır.
• find_elements ile çoklu veri çekilir.
• sleep yerine WebDriverWait kullanmak daha sağlıklıdır.

Hangi Aracı Ne Zaman Kullanmalıyım?​

Web Scraping Etik Kuralları​

• Web sitelerinin robots.txt dosyasına saygı gösterin.
• Aşırı istek göndererek sunucuları yormayın.
• Elde ettiğiniz verileri ticari amaçla kullanmadan önce yasal durumları kontrol edin.