نسخه 1.9 از ابزار خط فرمان shot-scraper منتشر شد که توسط سایمون ویلیسون توسعه یافته است. این ابزار برای گرفتن اسکرینشات و استخراج وبسایتها با استفاده از جاوااسکریپت از ترمینال طراحی شده است.
ویژگی جدید این نسخه، گزینه `-x/--extract` است که امکان استخراج تمام منابع بارگذاری شده توسط یک صفحه را به صورت فایل فراهم میکند. مسیر ذخیرهسازی این فایلها را میتوان با استفاده از گزینه `-o dir/` تعیین کرد.
همچنین، دستور `shot-scraper accessibility` برای سازگاری با آخرین نسخه Playwright اصلاح شده است.
این ابزار با الهام از یک تحقیق دیجیتال برای بررسی دلیل اسپم شدن راب پایک، امکان بررسی و تحلیل منابع وب را فراهم میکند. به عنوان مثال، با استفاده از دستور `shot-scraper har --wait 10000 'https://theaidigest.org/village?day=265' -x` میتوان منابع یک صفحه وب را استخراج و در یک پوشه JSON ذخیره کرد.
این ابزار برای توسعهدهندگان و تحلیلگران وب مفید است و امکان بررسی و تحلیل دقیقتر محتوای وب را فراهم میکند.
مشاهده مطلب اصلی