اسکراپینگ وب با پایتون

مربی رایان میچل تمرین اسکراپینگ وب با استفاده از زبان برنامه نویسی پایتون را آموزش می دهد. رایان به شما کمک می کند بفهمید که چگونه یک انسان در حال مرور وب با یک وب اسکراپر متفاوت است. او ابزارهای توسعه دهنده کروم و نحوه استفاده از آنها برای بررسی تماس های شبکه را معرفی می کند. رایان به شما نشان می دهد که چگونه Scrapy را با pip نصب کنید و چگونه می توانید کد "Hello, World" را برای خراش دادن یک صفحه وب ساده بنویسید. او نحوه استفاده از Scrapy LinkExtractor برای یافتن پیوندهای داخلی در یک صفحه وب را پوشش می‌دهد، سپس نحوه پیکربندی Scrapy و ItemPipeline را برای نوشتن داده‌ها در فرمت‌های فایل مختلف نشان می‌دهد. رایان شما را از طریق بهترین روش‌ها برای سازماندهی پروژه‌هایتان، نوشتن تجزیه‌کننده‌های قابل استفاده مجدد و محافظت از عنکبوت‌هایتان در آینده راهنمایی می‌کند. او توضیح می دهد که API ها چگونه کار می کنند و چگونه می توان از آنها برای بازیابی مستقیم داده ها استفاده کرد. رایان سرصفحه‌ها و کوکی‌ها را بررسی می‌کند، سپس به اتوماسیون مرورگر و نحوه ادغام سلنیوم با Scrapy می‌پردازد. در پایان، او ایده هایی برای ادامه تحصیل در علوم کامپیوتر و تفکر خلاقانه در مورد اتوماسیون ارائه می دهد.