دانلود کتاب Webbots, Spiders, and Screen Scrapers: A Guide to Developing Internet Agents with PHP/CURL – Webbots، Spiders و Screen Scrapers: راهنمای توسعه نمایندگی های اینترنتی با PHP/CURL

There’s a wealth of data online, but sorting and gathering it by hand can be tedious and time consuming. Rather than click through page after endless page, why not let bots do the work for you?

Webbots, Spiders, and Screen Scrapers will show you how to create simple programs with PHP/CURL to mine, parse, and archive online data to help you make informed decisions. Michael Schrenk, a highly regarded webbot developer, teaches you how to develop fault-tolerant designs, how best to launch and schedule the work of your bots, and how to create Internet agents that:

• Send email or SMS notifications to alert you to new information quickly
• Search different data sources and combine the results on one page, making the data easier to interpret and analyze
• Automate purchases, auction bids, and other online activities to save time

Sample projects for automating tasks like price monitoring and news aggregation will show you how to put the concepts you learn into practice.

This second edition of Webbots, Spiders, and Screen Scrapers includes tricks for dealing with sites that are resistant to crawling and scraping, writing stealthy webbots that mimic human search behavior, and using regular expressions to harvest specific data. As you discover the possibilities of web scraping, you’ll see how webbots can save you precious time and give you much greater control over the data available on the Web.

انبوهی از داده‌های آنلاین وجود دارد، اما مرتب‌سازی و جمع‌آوری آن‌ها با دست می‌تواند خسته‌کننده و زمان‌بر باشد. به جای کلیک کردن روی صفحه پشت سر صفحه بی پایان، چرا اجازه نمی دهید ربات ها کار را برای شما انجام دهند؟

Webbots، Spiders و Screen Scrapers به شما نشان می دهند که چگونه برنامه های ساده با PHP ایجاد کنید. /CURL برای استخراج، تجزیه و بایگانی داده های آنلاین برای کمک به شما در تصمیم گیری آگاهانه. Michael Schrenk، یک توسعه‌دهنده وب‌بات معتبر، به شما می‌آموزد که چگونه طرح‌های مقاوم در برابر خطا را توسعه دهید، چگونه بهترین راه‌اندازی و زمان‌بندی کار ربات‌های خود را انجام دهید، و چگونه عوامل اینترنتی ایجاد کنید که:

• ارسال کنید. اعلان‌های ایمیل یا پیامک برای آگاه کردن سریع اطلاعات جدید
• جستجوی منابع داده‌های مختلف و ترکیب نتایج در یک صفحه، تفسیر و تجزیه و تحلیل داده‌ها را آسان‌تر می‌کند
• خریدها، پیشنهادات مزایده را به‌طور خودکار انجام دهید. و سایر فعالیت های آنلاین برای صرفه جویی در زمان

پروژه های نمونه برای خودکارسازی کارهایی مانند نظارت بر قیمت و تجمیع اخبار به شما نشان می دهد که چگونه مفاهیمی را که یاد می گیرید در عمل پیاده کنید.

این ویرایش دوم Webbots, Spiders, and Screen Scrapers شامل ترفندهایی برای برخورد با سایت هایی است که در برابر خزیدن و خراشیدن مقاوم هستند، نوشتن وب ربات های مخفی که رفتار جستجوی انسان را تقلید می کنند و استفاده از عبارات منظم برای جمع آوری داده های خاص. همانطور که احتمالات خراش وب را کشف می کنید، خواهید دید که چگونه وب ربات ها می توانند در وقت گرانبهای شما صرفه جویی کنند و کنترل بسیار بیشتری بر داده های موجود در وب به شما بدهند.