Product details
- Publisher : O'Reilly Media; 2nd edition (April 24, 2018)
- Language : English
- Paperback : 308 pages
- ISBN-10 : 1491985577
- ISBN-13 : 978-1491985571
جلد معمولی سیاه و سفید_کتاب Web Scraping with Python: Collecting More Data from the Modern Web
If programming is magic then web scraping is surely a form of wizardry. By writing a simple automated program, you can query web servers, request data, and parse it to extract the information you need. The expanded edition of this practical book not only introduces you web scraping, but also serves as a comprehensive guide to scraping almost every type of data from the modern web.
Part I focuses on web scraping mechanics: using Python to request information from a web server, performing basic handling of the server’s response, and interacting with sites in an automated fashion. Part II explores a variety of more specific tools and applications to fit any web scraping scenario you’re likely to encounter.
- Parse complicated HTML pages
- Develop crawlers with the Scrapy framework
- Learn methods to store data you scrape
- Read and extract data from documents
- Clean and normalize badly formatted data
- Read and write natural languages
- Crawl through forms and logins
- Scrape JavaScript and crawl through APIs
- Use and write image-to-text software
- Avoid scraping traps and bot blockers
- Use scrapers to test your website
منابع کتاب جلد معمولی سیاه و سفید_کتاب Web Scraping with Python: Collecting More Data from the Modern Web
اگر برنامه نویسی جادویی است، خراش دادن وب مطمئناً نوعی جادوگری است. با نوشتن یک برنامه خودکار ساده، می توانید از سرورهای وب پرس و جو کنید، داده ها را درخواست کنید و آن ها را تجزیه کنید تا اطلاعات مورد نیاز خود را استخراج کنید. نسخه توسعه یافته این کتاب کاربردی نه تنها خراش دادن وب را به شما معرفی می کند، بلکه به عنوان یک راهنمای جامع برای خراش دادن تقریباً هر نوع داده از وب مدرن عمل می کند.
بخش اول بر مکانیک خراش دادن وب متمرکز است: استفاده از پایتون برای درخواست اطلاعات از یک وب سرور، انجام مدیریت اولیه پاسخ سرور، و تعامل با سایت ها به صورت خودکار. بخش دوم انواع ابزارها و برنامه های کاربردی خاص تر را بررسی می کند تا با هر سناریوی خراش وب که احتمالاً با آن مواجه می شوید مطابقت داشته باشد.
- صفحات پیچیده HTML را تجزیه کنید
- خزنده ها را با چارچوب Scrapy توسعه دهید
- روش‌هایی را برای ذخیره داده‌هایی که می‌خراشید یاد بگیرید
- خواندن و استخراج داده ها از اسناد
- پاک کردن و عادی سازی داده های با فرمت بد
- خواندن و نوشتن زبان های طبیعی
- از طریق فرم ها و لاگین ها بخزد
- جاوا اسکریپت را خراش دهید و از طریق API ها بخزید
- از نرم افزار تبدیل تصویر به متن استفاده کنید و بنویسید
- از خراش دادن تله ها و مسدود کننده های ربات خودداری کنید
- برای تست وب سایت خود از اسکراپر استفاده کنید
ارسال نظر درباره جلد معمولی سیاه و سفید_کتاب Web Scraping with Python: Collecting More Data from the Modern Web