اسکریپر شبح
استخراج HTML سایت ها با پروکسی چرخشی و ضدبات.
اسکریپر شبح ابزار اسکرپینگ وب برای دریافت HTML صفحات با پروکسی چرخشی (IP چرخان) است. این سرویس با مدیریت آنتی‌بات و محدودیت‌های دسترسی، محتوای صفحات را سریع و پایدار استخراج می‌کند؛ مناسب جمع‌آوری داده، مانیتورینگ قیمت، رصد تغییرات و تحلیل رقبا.
اسکریپر شبح
شبح یک سرویس API اسکرپینگ وب برای استخراج HTML صفحات سایت است که با استفاده از پروکسی چرخشی (IP چرخان) و مکانیزم‌های ضدبات/آنتی‌بوت کمک می‌کند محتوای وب‌سایت‌ها را پایدارتر و با خطای کمتر جمع‌آوری کنید. این ابزار برای جمع‌آوری داده در مقیاس بالا، مانیتورینگ قیمت، تحلیل رقبا، استخراج اطلاعات محصولات و انواع پروژه‌های داده‌محور مناسب است و خروجی را به‌صورت مرتب و قابل پردازش در اختیار شما می‌گذارد. اگر سایت داینامیک باشد، می‌توانید رندر جاوااسکریپت را فعال کنید تا محتوا مانند مرورگر بارگذاری شود و داده‌هایی که بعد از اجرای اسکریپت‌ها نمایش داده می‌شوند نیز قابل دریافت باشند.
{
"results": {
"data": {
"target_url": "asanscrape.com",
"html": "<!DOCTYPE html>\n<html lang=\"fa\" dir=\"rtl\">\n<head>\n <meta charset=\"utf-8\" />\n <meta name=\"viewport\" content=\"width=device-width, initial-scale=1\" />\n <title>آسان اسکریپ</title>\n</head>\n<body>\n <header>\n <nav>\n <a href=\"/\">خانه</a>\n <a href=\"/articles\">مقاله\u200cها</a>\n <a href=\"/robots\">ربات\u200cها</a>\n </nav>\n </header>\n\n <main>\n <h1>ربات\u200cها رو به کار بگیر، آسان اسکریپ کن!</h1>\n <p>با ربات\u200cهای سریع ما، نه وقتت هدر میره، نه انرژی\u200cات! هر دیتایی که بخوای، آماده و خوش\u200cدست، فقط چند کلیک با تو فاصله داره!</p>\n\n <section>\n <h2>ربات های هوشمند ما</h2>\n <ul>\n <li>شبح اسکریپر — دریافت\u200cکننده HTML سایت\u200cها با IP چرخشی و ضدبلاک</li>\n <li>اسکریپر گوگل سرچ — ابزار استخراج اطلاعات از جستجوی گوگل</li>\n <li>اسکریپر پروفایل اینستاگرام — ابزار استخراج اطلاعات پروفایل اینستاگرام</li>\n </ul>\n </section>\n </main>\n</body>\n</html>",
"html_length": 833
}
}
}نحوه استفاده از این سرویس
این سرویس چگونه کار می‌کند؟
کافی است لینک صفحه‌ی موردنظر را وارد کنید و درخواست را ارسال کنید؛ اسکریپر شبح در چند لحظه با استفاده از پروکسی چرخشی و مکانیزم‌های ضدبات، صفحه را واکشی می‌کند و محتوای HTML را به‌صورت مرتب در خروجی برمی‌گرداند. اگر صفحه محتوای داینامیک دارد، می‌توانید رندر جاوااسکریپت را فعال کنید تا داده‌ها مثل مرورگر لود شوند. برای اجرای خودکار هم می‌توانید همین فرآیند را از طریق REST API روی لیست‌های بزرگ لینک‌ها در ابزارهای اتوماسیون اجرا کنید.
پروکسی چرخشی (Rotating Proxy)
IP را به‌صورت خودکار می‌چرخاند تا درخواست‌ها پایدارتر و با ریسک بلاک کمتر انجام شوند.
رندر جاوااسکریپت (JS Rendering)
صفحات داینامیک را مثل مرورگر رندر می‌کند تا محتوای لودشده با اسکریپت هم قابل دریافت باشد.
ضدبات و کاهش بلاک (Anti-Bot)
با تکنیک‌های ضدبات، خطاهای کپچا/محدودیت و بلاک را کمتر می‌کند و نرخ موفقیت را بالا می‌برد.
برای مشاهده تمامی سرویس ها وارد پنل کاربری شوید.
ورود به داشبوردکاربردهای این سرویس
مانیتورینگ قیمت/موجودی با اسکرپینگ مقاوم
واکشی دوره‌ای صفحات فروشگاهی با چرخش IP و آنتی‌بوت برای کاهش بلاک و خطا.
استخراج داده از سایت‌های داینامیک (SPA/AJAX)
فعال‌سازی JS Rendering برای دریافت محتوایی که بعد از اجرای جاوااسکریپت لود می‌شود.
جمع‌آوری کاتالوگ محصول و ساخت دیتاست
استخراج مشخصات، SKU، دسته‌بندی و ویژگی‌ها در مقیاس بالا برای ذخیره‌سازی و تحلیل.
رصد تغییرات صفحات و هشداردهی
مقایسه‌ی HTML/DOM در بازه‌های زمانی و تشخیص تغییرات مهم (قیمت، متن، ساختار) برای آلارم.
تغذیه‌ی پایپ‌لاین داده (ETL / BI / ML)
دریافت خروجی پایدار و قابل‌پردازش برای ورود مستقیم به دیتابیس، داشبوردها یا مدل‌های داده‌محور.
خدمات API
با چند خط کد، خروجی ربات‌های استخراج داده و وب اسکریپینگ رو مستقیم در اپلیکیشنت دریافت کن.
