آموزش جامع ابزار اسکریمینگ فراگ (screaming frog) در سئو

استفاده از screaming frog پیچیدگی‌های سئو را برای شما هموار می‌کند و نتایج کاربردی و قابل‌لمسی را در اختیار شما می‌گذارد. باتوجه‌به رقابتی که در مورد بهینه‌سازی سایت‌ها و آنالیز انواع دیتاها برای برطرف‌کردن مشکلات رتبه‌بندی سایت وجود دارد، اهمیت آشنایی و آموزش اسکریمینگ فراگ به‌صورت صفر تا صد خود را نشان می‌دهد.

اگر شما نیز به دنبال آموزش screaming frog هستید و می‌خواهید بیش‌تر با قابلیت‌ها و امکانات این ابزار آشنا شوید، ادامه این مطلب را از دست ندهید.

ابزار اسکریمینگ فراگ چیست و چه کاربردی دارد؟

آموزش اسکریمینگ فراگ حائز اهمیت است زیرا یکی از ابزارهای کاربردی برای مدیریت سئو داخلی OnPage و سئو تکنیکال است. همان‌طور که می‌دانید برای بررسی وضعیت یک سایت لازم است پارامترها و ویژگی‌های متعددی مورد بررسی قرار بگیرد، این ویژگی‌ها بسیار زیاد هستند و به کیفیت محتوا و عناوین کاربردی محدود نمی‌شوند، بلکه هر جزء هرچند کوچک می‌تواند در ارتقای جایگاه سایت شما نقش مهمی داشته باشد.

یکی از ابزارهایی که به شکلی سازمان‌یافته و مفید در زمینه سئو، تمام فرایندهای مؤثر را انجام می‌دهد و سایت شما را از دیدگاه موتورهای جستجو بررسی می‌کند، ابزار اسکریمینگ فراگ Screaming Frog است.

با نصب این نرم‌افزار خواهید توانست محتوای متنی، تصاویر، CSS و هر صفحه یا پستی را از جهت بهینه‌سازی موتورهای جستجو بررسی کنید تا در صورت نیاز تغییرات موردنظر برای بهبود جایگاه سایت را اعمال کنید؛ بنابراین با کمک این ابزار سئو نه‌تنها یک کار سخت، زمان‌بر و نیازمند صرف انرژی زیاد نخواهد بود، بلکه تبدیل به فرایندی جذاب و لذت‌بخش می‌شود.

دانلود اسکریمینگ فراگ

برای دسترسی به این ابزار می‌توانید وارد وب‌سایت https://www.Screamingfrog.co.uk  شوید و نسخه سازگار با سیستم‌عامل خود را (ویندوز، لینوکس، مک)، را دانلود کنید؛ ابزار اسکریمینگ فراگ در دو نسخه معمولی (که به‌صورت رایگان است) و نسخه پریمیوم (که نیاز به پرداخت هزینه دارد)، در دسترس است. تفاوت نسخه رایگان و پریمیوم در این است که نسخه رایگان فقط می‌تواند تا 500 صفحه از سایت را کرال کند درحالی‌که نسخه پریمیوم این محدودیت را ندارد.

البته لازم به ذکر است با استفاده از برخی لایسنس‌ها می‌توانیم به‌صورت رایگان از امکانات نسخه پریمیوم استفاده کنیم. نسخه‌های کرک شده نیز در تعدادی از سایت‌های ایرانی در دسترس هستند.

امکانات ابزار اسکریمینگ فراگ

برای شروع کار و  آموزش اسکریمینگ فراگ باید URL سایت را در بخش Enter url to spider وارد کنید و بر روی گزینه Start کلیک نمایید.

البته اگر قصد دارید Subdomainهای دیگر  از قبیل blog و shop را نیز کراول کند، باید تیک گزینه Crawl All Subdomains را نیز بزنید.

اسکریمنگ فراگ فرایندهای کراول و ایندکس را شبیه‌سازی می‌کند و این امکان را به ما می‌دهد که خطاها و ایراداتی را که در بخش onpage سایت وجود دارد مشاهده کنیم و به این طریق چک‌ لیست سئو داخلی هر سایتی را که می‌خواهید بررسی کنید.

در ادامه مبحث آموزش اسکریمینگ فراگ بخشی از مهم‌ترین امکاناتی را که ابزار screaming frog در اختیار ما می‌گذارد معرفی می‌کنیم، با استفاده از این قابلیت‌ها خواهیم توانست از دیتاهای مدنظر خود خروجی مناسب تهیه کنیم و در راستای بهبود سایت مورداستفاده قرار دهیم.

1. بررسی لینک‌های داخلی داده شده به هر صفحه و شناسایی انکر تکست لینک‌دهی با استفاده از آن انجام شده است.
2. بررسی لینک‌های داده شده از یک سایت به سایت‌های دیگر.
3. شناسایی صفحاتی با تایتل یا دسکریپشن کوتاه یا خیلی بلند و یا تکراری، یا بدون تایتل دسکریپشن.
4. شناسایی صفحاتی که محتوای تکراری دارند.
5. بررسی وضعیت هدینگ‌های صفحات همراه با ریز جزئیات.
6. بررسی صفحات نوایندکس، نوفالو و ...
7. بررسی و نشان‌دادن وضعیت کلی سایت در قالب نمودارهای مختلف.
8. نشان‌دادن وضعیت Status Code برای هرکدام از صفحات سایت.
9. بررسی وضعیت اسکیما های استفاده شده در سایت.
10. شناسایی زنجیره‌های ریدایرکت Redirect Chain
11. نشان‌دادن تصاویری که فاقد ALT  (متن جایگزین) هستند.
12. بررسی محتوا از نظر گرامر زبان و املای لغات.
13. ایجاد نقشه سایت.
14. امکان اتصال سرچ کنسول، گوگل آنالیتکس، MOZ و ... به ابزار اسکریمینگ فراگ.
15. بررسی وضعیت سایت از نظر امنیت.
16. بررسی و پیاده‌سازی ساختار پیلار کلاستر.
17. شناسایی صفحاتی با کم‌ترین و بیش‌ترین تعداد لینک‌های داخلی.
18. شناسایی متنی که دارای بیش‌ترین استفاده در لینک‌دهی داخلی است.
19. شناسایی تصاویری با حجم بالا.
20. شناسایی صفحاتی با ارور 500 و 404 .
21. بررسی و نشان‌دادن تعداد کلمات هر صفحه.
22. شناسایی صفحات به‌اصطلاح یتیم سایت.
23. استخراج داده‌ها با استفاده از Regex، XPath و ...
24. بررسی نسخه AMP سایت و شناسایی ایرادات موجود.
25. بررسی تگ‌های کنونیکال و کنیبالیزیشن.
26. بررسی دستورالعمل متاروبات‌ها

حالت‌های مختلف کرال کردن سایت با استفاده از ابزار اسکریمینگ فراگ

برای کرال کردن سایت موردنظر توسط اسکریمینگ کرال می‌توانید حالت‌های مختلفی را تعیین کنید، به‌عنوان‌مثال تعیین کنید که تمام سایت کرال شود یا تنها صفحات خاصی از سایت بررسی و کرال شود. برای تنظیم این موارد باید از بخش Mode این ابزار حالت موردنظر خود را انتخاب کنید؛ همچنین می‌توانید وضعیت قبل و بعد یک پروژه را با هم مقایسه کنید و گزارشی از تغییرات سایت دریافت کنید.

در ادامه تعدادی از قابلیت‌های ابزار screaming frog را به‌صورت خلاصه معرفی می‌کنیم. اگر قصد یادگیری کامل تمام امکانات این برنامه را دارید، لازم است که آموزش اسکریمینگ فراگ را از طریق برنامه‌ها و دوره‌های آموزشی که در این زمینه وجود دارد دنبال کنید.

معرفی تعدادی از کاربردهای اسکریمینگ فراگ

1. بررسی Response Code تمام صفحات یک سایت
   در نرم‌افزار screaming frog می‌توانید وضعیت HTTP را بررسی کنید؛ کدهای مهم که نشان‌دهنده وضعیت HTTP هستند عبارت‌اند از 200، 301، 302، 404، 500 و 503؛ به‌این‌ترتیب می‌توانید بفهمید کدام صفحات ریدایرکت شده‌اند و کدام صفحات سرور ارور دارند، و ...  در دوره‌های آموزش اسکریمینگ فراگ شما به طور کامل با این کدها، مفهوم هرکدام و برطرف‌کردن آن‌ها آشنا می‌شوید.
    
2. آنالیز تمام URLهای سایت
   ساختار URL مناسب اهمیت زیادی در سئوی یک سایت دارد، در این راستا ابزار استریمینگ فراگ به بررسی دقیق عملکرد ساختار URL می‌پردازد. در این مورد شما می‌توانید فیلترهای کاراکترهای non ASCll، underscores ، حروف بزرگ و حروف تکراری و URLهای پویا را مورد بررسی قرار دهید. باتوجه‌به این ‌که عناصر گفته شده می‌توانند ایندکس کردن را با مشکل مواجه سازند، لذا داشتن این قابلیت گامی مؤثر در راستای بهینه‌سازی سایت است.
    
3. بررسی عناوین با اسکریمینگ فراگ
   این ابزار عناوین را از نظر سئو بررسی می‌کند تا در جهت وجود کلمات کلیدی بهینه‌سازی شوند. بیاید یک مثال بزنیم:
   در مورد سئوی عناوین می‌دانیم که یک عنوان نباید بیش‌تر از 60 کاراکتر باشد. جالب است بدانیم که موتورهای جستجو عناوین را با معیار پیکس مورد سنجش قرار می‌دهند، و عناوینی که بیش‌تر از 512 پیکسل باشد را کوتاه می‌کند.
   باتوجه به این‌که برخی از حروف و اعداد در مقایسه با سایرین، فضای بیش‌تری را اشغال می‌کنند، لذا ممکن است برخی از عناوین که کوتاه‌تر از 60 کاراکتر هستند نیز از دید گوگل و از نظر تعداد پیکسل، طولانی محسوب شوند؛ بنابراین درنظرگرفتن معیار کاراکتر برای تعیین طول یک عنوان معیار چندان مناسب و کاربردی نیست.
   ابزار اسکریمینگ عناوین را به جای تعداد کاراکتر با تعداد پیکسل مورد سنجش قرار می‌دهد و در صورت طولانی بودن به شما هشدار خواهد داد.

4. آنالیز متا دیسکریپشن در اسکریمینگ فراگ
   یکی دیگر از قابلیت‌های این ابزار که اهمیت آموزش اسکریمینگ فراگ را مهم ‌می‌کند، آنالیز متادیسکریپشن است. همان‌طور که می‌دانید توضیحات متا همان توضیحاتی است که در نتایج گوگل، پایین‌تر از عنوان صفحه به نمایش درمی‌آید. طول متادیسکریپشن نباید از 160 کاراکتر بیش‌تر باشد، در غیر این صورت توسط موتورهای جستجو به طور کامل نمایش داده نمی‌شوند،که این امر به محتوا لطمه وارد می‌کند. با استفاده از ابزار screaming frog  خواهید توانست متادیسکریپشن را شبیه‌سازی کنید. برای این منظور باید بر روی URL کلیک کنید و صفحه SERP SNIPPET را انتخاب و عنوان و توضیحات متا را تغییر دهید؛ به‌این‌ترتیب با کمک این ابزار می‌توانید تغییرات را در رایانه، تبلت یا تلفن همراه ببینید و متوجه شوید که چگونه به نظر می‌رسد.
    
5. کمک به بهینه‌سازی تصاویر
   بر اساس اعلام گوگل، یکی از مهم‌ترین معیارها برای رتبه‌بندی سایت‌ها، معیار سرعت است. تأثیر تصاویر به‌عنوان یکی از عوامل کندکننده سرعت صفحه انکارناپذیر است، مخصوصاً تصاویری با وضوح و حجم بالا پهنای باند زیادی را اشغال خواهند کرد.
   در این راستا آموزش frag scramble اهمیت پیدا می‌کند زیرا این ابزار تمام تصاویر موجود در یک سایت را از نظر وضوح تصویر و حجم اشغال شده توسط آن، بررسی می‌کند و اطلاعات را در اختیار شما قرار می‌دهد. به‌طوری‌که تصاویر با حجم بیش‌تر از 100 کیلوبایت که از نظر گوگل مناسب نیستند شناسایی شده و به‌منظور اعمال تغییرات مناسب، هشدار صادر می‌شود.
   علاوه بر این، با کمک این نرم‌افزار قادر خواهید بود که سرعت هر صفحه را در قسمت Response Time ببینید؛ همچنین برای به‌دست‌آوردن اطلاعات بیش‌تر در مورد زمان بارگیری می‌توانید از ابزاری مانند جی تی متریکس GTmetrix استفاده نمایید.
    
6. اطلاعات مربوط به دایرکتیو
   در تب Directive می‌توانید اطلاعات مربوط به ربات‌های متا، لینک‌های Canonical و rel=next/prev annotation در اختیار شما قرار داده می‌شود، همچنین می‌توانید با به‌کاربردن فیلترهای مربوط به یک دایرکتیو خاص و کراولینگ فوری، تمام صفحات سایت را مشاهده و بررسی کنید.
    
7. کمک به شناسایی لینک‌های شکسته
   اسکریمنگ فراگ به‌راحتی می‌تواند کار شناسایی broken Link را انجام دهد. بعد از شناسایی شما می‌توانید با ارسال این لینک‌ها را به یک Developer ، آن‌ها را اصلاح کنید.
    
8. شناسایی تصاویر فاقد Alt Text
   متن جایگزین عکس در کدهای HTML یک سایت برای توصیف آن تصویر به کار برده می‌شود. اسکریمینگ فراگ می‌تواند به‌راحتی تصاویر فاقد متن جایگزین را شناسایی کند، به‌این‌ترتیب تنها کاری که شما باید انجام دهید اصلاح کردن و استفاده از Alt Text مناسب است.
    
9. شناسایی محتواهای مشابه و تکراری
   یکی از عوامل پایین آورنده رتبه سایت، وجود محتواهای مشابه و تکراری است. اسکریمینگ فراگ با شناسایی این محتواها به شما کمک می‌کند تا در راستای حذف یا اصلاح آن‌ها اقدام کنید و به‌این‌ترتیب به بهینه‌سازی محتوای سایت و بهبود رتبه سایتتان کمک کنید.
    
10. نحوه اجرای کدهای جاوا
    کدهای جاوا اسکریپت به‌وسیله ربات‌های گوگل خوانده و اجرا می‌شوند. اما ازآنجاکه کدهای JS برای موتور جستجو دشوار و هزینه‌بر است، پیشنهاد می‌شود که این کدها با استفاده از ابزار اسکریمینگ فراگ مورد بررسی قرار بگیرند و در صورت وجود خطا، اصلاح شوند.
     
11. بررسی سایت از نظر معماری
    یکی دیگر از کاربردها که در دوره‌های آموزش اسکریمنگ فراگ به‌صورت صفر تا صد آموزش داده می‌شود، ارزیابی لینک‌های داخلی و ساختار URL و سپس ارائه نتایج به‌صورت نموداری از عملکرد و سازوکار وب‌سایت موردنظر است.
     
12. تجزیه و تجلیل سرعت سایت
    این ابزار با کمک API گوگل پیچ اینسایت Google PageSpeed insight، اطلاعاتی را در مورد سرعت سایت و تجربه کاربری به دست می‌آورد.
     
13. شناسایی صفحات یتیم Orphan Page
    منظور از صفحات یتیم، صفحاتی از سایت است که هیچ لینک داخلی به آن‌ها داده نشده است. اسکریمینگ فراگ می‌تواند این صفحات را شناسایی کند تا درصورتی‌که از نظر سئو اهمیت داشته باشند، برای آن‌ها لینک داخلی تعریف کنیم (در غیر این صورت لازم نیست کاری کنید).

کاربردهای ابزار اسکریمینگ فراگ سئو اسپایدر

1. قابلیت برنامه‌ریزی
   برنامه اسکریمینگ فراگ از قابلیت برنامه‌ریزی و تنظیم برخوردار است، به این صورت که می‌توانید آن را به‌گونه‌ای تنظیم کنید که بررسی و کرال سایت را در فواصل مشخصی (مثلاً هر ماه یک‌بار) انجام دهد و گزارش آن را در قالب یک فایل اکسل ذخیره کند.
    
2. امکان اتصال و ادغام GSC & PSI با GA
   یکی دیگر از دلایلی که آموزش اسکریمنگ فراگ را ارزشمند می‌کند توانایی اتصال سرچ کنسول، گوگل آنالیتسک و گوگل پیچ اسپید اینسایت به یکدیگر است. به این ترتیب می‌توانیم متریک‌های هر کدام از این ابزارها را در کنار دیتاهایی که اسکریمینگ فراگ در اختیار ما می‌گذارد داشته باشم.
   به‌علاوه امکان متصل کردن اکانت MOZ هم به این برنامه وجود دارد تا متریک‌هایی از قبیل Page Authority و Domain Authority را به گزارش‌های دریافتی از screaming frog اضافه کنیم.
    
3. توانایی سرچ HTML
   هر کدی را که بخواهید (از  قبیل Google Specific Text، Analytics Code و ...) را می‌توانید در Source Code پیدا کنید.
    
4. استخراج داده‌ها با استفاده از XPath
   یکی دیگر از امکانات که با آموزش اسکریمینگ فراگ به‌صورت صفر تا صد فرا خواهید گرفت، جمع‌آوری انواع داده‌ها (تگ‌های متا اجتماعی، عناوین اضافی، قیمت‌ها، SKU و ...) از HTML یک صفحه وب با کمک XPath، CSS Path یا Regex  است.

استفاده از اسکریمینگ فراگ برای ساخت نقشه سایت

ابزار اسکریمینگ فراگ کمک می کند صفحات مورد دلخواه خود را به صورت یک فایل xml خروجی بگیرید و سپس نقشه ایجاد شده را در هاست خود آپلود کنید مراحل کار به صورت ذیل است:

1. از بخش منو بخش mode و سپس زیر گزینه spider را انتخاب کنید سپس آدرس سایت خودتان را در باکس جستجو وارد و دکمه start را کلیک کنید

2. پس از کراول شدن سایت از منوی sitemaps گزینه XML sitemap را انتخاب کنید

3. در configuration تب pages گزینه canonicalised را تیک بزنید و سپس گزینه export را انتخاب و فایل xml خود را در مسیر دلخواه ذخیره کنید

لایسنس اسکریمینگ فراگ

لایسنس اسکریمینگ فراگ را می توانید از سایت اصلی خود این نرم افزار خرید کنید اگر نیاز به لایسنس رایگان دارید می توانید در تلگرام سرچ کنید یا اینکه از سایت سافت 98 دانلود کنید.