آموزش web Scraping با python

Web Scraping چیست؟ کاربردهای Web Scraping تفاوت Web Scraping و Web Crawling ساختار صفحات وب و HTML آشنایی با HTTP و Request/Response آماده‌سازی محیط Python نصب کتابخانه‌های موردنیاز

معرفی کتابخانه Requests ارسال GET و POST Request کار با Response بررسی Status Code ارسال Header و User-Agent کار با Query Parameters مدیریت خطاهای HTTP

معرفی BeautifulSoup تبدیل HTML به ساختار قابل پردازش پیدا کردن تگ‌ها و عناصر HTML استفاده از find و find_all استخراج متن و Attributeها کار با CSS Selector استخراج لینک‌ها و تصاویر

طراحی ساختار Scraper استخراج اطلاعات چندین صفحه کار با Pagination دنبال کردن لینک‌ها ذخیره داده‌های استخراج‌شده مدیریت Exceptionها ایجاد ساختار قابل توسعه برای پروژه

تمیز کردن داده‌های متنی حذف داده‌های اضافی تبدیل فرمت داده‌ها کار با تاریخ و اعداد حذف داده‌های تکراری اعتبارسنجی داده‌های استخراج‌شده آماده‌سازی داده برای ذخیره‌سازی