خانه/خدمات/ربات‌ها/ربات

اسکریپر شبح

اسکریپر شبح ابزار اسکرپینگ وب برای دریافت HTML صفحات با پروکسی چرخشی (IP چرخان) است. این سرویس با مدیریت آنتی‌بات و محدودیت‌های دسترسی، محتوای صفحات را سریع و پایدار استخراج می‌کند؛ مناسب جمع‌آوری داده، مانیتورینگ قیمت، رصد تغییرات و تحلیل رقبا.

اسکریپر شبح - آسان اسکریپ
اسکریپر شبح
شبح یک سرویس API اسکرپینگ وب برای دریافت HTML صفحات سایت است که با استفاده از پروکسی چرخشی (IP چرخان) و مکانیزم‌های ضدبات/آنتی‌بوت کمک می‌کند محتوای وب‌سایت‌ها را پایدارتر و با خطای کمتر جمع‌آوری کنید. این ابزار برای جمع‌آوری داده در مقیاس بالا، مانیتورینگ قیمت، تحلیل رقبا، استخراج اطلاعات محصولات و انواع پروژه‌های داده‌محور مناسب است و خروجی را به‌صورت مرتب و قابل پردازش در اختیار شما می‌گذارد. اگر سایت داینامیک باشد، می‌توانید رندر جاوااسکریپت را فعال کنید تا محتوا مانند مرورگر بارگذاری شود و داده‌هایی که بعد از اجرای اسکریپت‌ها نمایش داده می‌شوند نیز قابل دریافت باشند.
نمونه‌ای از خروجی ربات
{
  "results": {
    "data": {
      "target_url": "asanscrape.com",
      "html": "<!DOCTYPE html>\n<html lang=\"fa\" dir=\"rtl\">\n<head>\n  <meta charset=\"utf-8\" />\n  <meta name=\"viewport\" content=\"width=device-width, initial-scale=1\" />\n  <title>آسان اسکریپ</title>\n</head>\n<body>\n  <header>\n    <nav>\n      <a href=\"/\">خانه</a>\n      <a href=\"/articles\">مقاله\u200cها</a>\n      <a href=\"/robots\">ربات\u200cها</a>\n    </nav>\n  </header>\n\n  <main>\n    <h1>ربات\u200cها رو به کار بگیر، آسان اسکریپ کن!</h1>\n    <p>با ربات\u200cهای سریع ما، نه وقتت هدر میره، نه انرژی\u200cات! هر دیتایی که بخوای، آماده و خوش\u200cدست، فقط چند کلیک با تو فاصله داره!</p>\n\n    <section>\n      <h2>ربات های هوشمند ما</h2>\n      <ul>\n        <li>شبح اسکریپر — دریافت\u200cکننده HTML سایت\u200cها با IP چرخشی و ضدبلاک</li>\n        <li>اسکریپر گوگل سرچ — ابزار استخراج اطلاعات از جستجوی گوگل</li>\n        <li>اسکریپر پروفایل اینستاگرام — ابزار استخراج اطلاعات پروفایل اینستاگرام</li>\n      </ul>\n    </section>\n  </main>\n</body>\n</html>",
      "html_length": 833
    }
  }
}
							
نحوه استفاده از این سرویس

این سرویس چگونه کار میکند؟

کافی است لینک صفحه‌ی موردنظر را وارد کنید و درخواست را ارسال کنید؛ اسکریپر شبح در چند لحظه با استفاده از پروکسی چرخشی و مکانیزم‌های ضدبات، صفحه را واکشی می‌کند و محتوای HTML را به‌صورت مرتب در خروجی برمی‌گرداند. اگر صفحه محتوای داینامیک دارد، می‌توانید رندر جاوااسکریپت را فعال کنید تا داده‌ها مثل مرورگر لود شوند. برای اجرای خودکار هم می‌توانید همین فرآیند را از طریق REST API روی لیست‌های بزرگ لینک‌ها در ابزارهای اتوماسیون اجرا کنید.

پروکسی چرخشی (Rotating Proxy)

IP را به‌صورت خودکار می‌چرخاند تا درخواست‌ها پایدارتر و با ریسک بلاک کمتر انجام شوند.

رندر جاوااسکریپت (JS Rendering)

صفحات داینامیک را مثل مرورگر رندر می‌کند تا محتوای لودشده با اسکریپت هم قابل دریافت باشد.

ضدبات و کاهش بلاک (Anti-Bot)

با تکنیک‌های ضدبات، خطاهای کپچا/محدودیت و بلاک را کمتر می‌کند و نرخ موفقیت را بالا می‌برد.

برای مشاهده تمامی سرویس ها وارد پنل کاربری شوید.

کاربرد ها

مانیتورینگ قیمت/موجودی با اسکرپینگ مقاوم

واکشی دوره‌ای صفحات فروشگاهی با چرخش IP و آنتی‌بوت برای کاهش بلاک و خطا.

استخراج داده از سایت‌های داینامیک (SPA/AJAX)

فعال‌سازی JS Rendering برای دریافت محتوایی که بعد از اجرای جاوااسکریپت لود می‌شود.

جمع‌آوری کاتالوگ محصول و ساخت دیتاست

استخراج مشخصات، SKU، دسته‌بندی و ویژگی‌ها در مقیاس بالا برای ذخیره‌سازی و تحلیل.

رصد تغییرات صفحات و هشداردهی

مقایسه‌ی HTML/DOM در بازه‌های زمانی و تشخیص تغییرات مهم (قیمت، متن، ساختار) برای آلارم.

تغذیه‌ی پایپ‌لاین داده (ETL / BI / ML)

دریافت خروجی پایدار و قابل‌پردازش برای ورود مستقیم به دیتابیس، داشبوردها یا مدل‌های داده‌محور.

آسان اسکریپ +100 ربات و سرویس فعال و بروز دارد، برای مشاهده تمامی سرویس ها کلیک کنید.

ربات های آسان اسکریپ

خدمات API

خدمات API برای توسعه دهنگان عزیز