ابزارحرفه‌ای و قدرتمند است، که به وبمسترها و متخصصان سئو امکان می‌دهد تا به‌راحتی ساختار وب‌سایت را بررسی و تجزیه و تحلیل کنند. پس اگر در حال آموزش حرفه ای سئو در اصفهان هستید حتما تسلط لازم را در استفاده از این ابزار به دست اوردید
نرم‌افزار اسکریمینگ فراگ روی سیستم‌عامل‌های ویندوز، مک و لینوکس قابل نصب است و مانند خزنده‌های گوگل، لینک‌ها، تصاویر، کد CSS و دیگر عناصر وب‌سایت را بررسی می‌کند. با شبیه‌سازی رفتار موتورهای جستجو، به کاربران کمک می‌کند تا مشکلات احتمالی در پیمایش سایت را شناسایی کرده و نقاط ضعف و قوت آن را مشخص کنند. تجزیه و تحلیل دستی یک وب‌سایت بزرگ بسیار زمان‌بر و دشوار است. سئوکاران حرفه ای با استفاده از ابزار اسکریمینگ فراگ می توانند به تحلیل سریع و دقیق داده‌ها، در صرفه‌جویی زمان و انرژی نقش موثری داشته باشند. با استفاده از آن می‌توان اطلاعات کلیدی مانند کدهای پاسخ سرور، تگ‌های متا و ساختار URLها را بررسی کرد. داده‌های حاصل از این بررسی به وبمسترها کمک می‌کند تا خطاها را برطرف کرده و رتبه وب‌سایت خود را در نتایج جستجو بهبود بخشند. نسخه رایگان آن به 500 URL محدود می‌شود، در حالی که نسخه پولی امکان کرال نامحدود و دسترسی به قابلیت‌های بیشتری را ارائه می‌دهد. در مجموع،Screaming Frog ضروری برای انجام ممیزی سئو و تحلیل تکنیکال وب‌سایت‌هاست و در بهبود رتبه‌بندی سایت در موتورهای جستجو نقش کلیدی ایفا می‌کند.
چطوری از اسکریمینگ فراگ برای انالیز و بررسی سایتمان استفاده کنیم؟
شما باید نرم افزار اسکریمینگ فراگ را دانلود کنید
نسخه رایگان ابزار اسکریمینگ فراگ قادر است که تا 500 لینک را انالیز کند. در صورتی که نسخه پولی تمام سایت را میتوانید انالیز کنید. لازم به ذکر است که تا نسخه 19 میتوانید به نسخه کرک دسترسی داشته باشید. اما اگر بخواهید با قابلیت های به روز تری دسترسی داشته باشید باید لایسنس فعال سازی ان را خریداری کنید.
قدم بعدی پس از نصب و راه اندازی این است که ادرس سایت را در قسمت جستجو وارد کنید و دکمه استارت را فشار دهید. شما پس از زدن دکمه استار میتوانید کمی صبر کنید که زمان اتمام خزش در سایت های مختلف متفاوت است.
وقتی که خزش یوزر ایجنت های اسکریمینگ فراگ تمام شد شما به خطاها و صفحاتی که نیاز به رسیدگی دارد را خواهی دید.
قابلیت های اسکریمینگ فراگ
از مواردی که شما قادر خواهید بود با ابزار اسکریمینگ فراگ بررسی کنید موارد زیر است:
| قابلیت | توضیحات |
| تحلیل سئو فنی | شناسایی مشکلات فنی سئو مانند تگ‌های تکراری، کنترل دسترسی و خطاهای سرور. |
| شناسایی مشکلات لینک | یافتن لینک‌های شکسته (404) و لینک‌های ریدایرکت (301 و 302) برای بررسی و اصلاح. |
| بررسی عناوین صفحات | تحلیل عنوان صفحات برای اطمینان از وجود عناوین منحصر به فرد و بهینه (طول کمتر از 60 کاراکتر). |
| تحلیل متا تگ‌ها | بررسی و تحلیل تگ‌های متا (شامل توضیحات و کلمات کلیدی) در صفحات وب‌سایت و شناسایی متا تگ‌های گم‌شده. |
| بررسی ساختار URL | تحلیل طول و ساختار URLها برای شناسایی مشکلات نمایه‌سازی و بهینه‌سازی لینک‌ها. |
| شناسایی داده‌های ابرداده | بررسی و شناسایی ابرداده‌های گم‌شده و نادرست برای بهبود سئو. |
| تحلیل کدهای وضعیت HTTP | بررسی کدهای وضعیت مانند 200 (OK)، 301 (ریدایرکت دائمی)، 302 (ریدایرکت موقتی)، 404 (یافت نشد) و 500 (خطای سرور. |
| خزیدن در زیر دامنه‌ها | قابلیت خزیدن همزمان در زیر دامنه‌ها و دامنه‌های فرعی برای بررسی کامل وب‌سایت. |
| تحلیل داده‌های رقبا | جمع‌آوری و تحلیل داده‌ها برای مقایسه با رقبای موجود در بازار و شناسایی نقاط قوت و ضعف. |
| خزیدن و تحلیل وب‌سایت | خزیدن کامل وب‌سایت و ارائه گزارش‌های جامع در مورد تمام صفحات، از جمله صفحات متحرک. |
| قابل سفارشی‌سازی | قابلیت شخصی‌سازی برای استخراج داده‌ها و ادغام با ابزارهای دیگر مانند Google Analytics و Google Search Console. |
| خروجی داده‌ها | امکان ذخیره و خروجی گرفتن از داده‌ها به فرمت‌های مختلف مانند CSV، Excel و Google Sheets. |
| تحلیل فایل‌های robots.txt | بررسی و تحلیل فایل robots.txt برای اطمینان از عدم مسدود شدن صفحات مهم در خزیدن. |
| تحلیل فایل sitemap.xml | بررسی و تحلیل فایل sitemap.xml برای اطمینان از صحیح بودن ساختار و لینک‌ها. |
| گزارش خطاهای محتوا | شناسایی خطاهای محتوایی مانند تکرار محتوا یا صفحات با محتوای ضعیف. |
| داده‌های Schema و Structured Data | تحلیل و شناسایی داده‌های ساختاریافته و Schema.org برای بهینه‌سازی نتایج در SERP. |
| تجزیه و تحلیل تصاویر | بررسی تصاویر وب‌سایت برای شناسایی تصاویر بدون متن ALT و فرمت‌های نادرست. |
| بررسی سرعت بارگذاری صفحات | ارزیابی مدت زمان بارگذاری صفحات برای شناسایی نقاط ضعف عملکرد وب‌سایت. |
| تحلیل متا تگ‌های اجتماعی | بررسی و بهینه‌سازی متا تگ‌های Open Graph و Twitter Cards برای اشتراک گذاری بهتر محتوای اجتماعی. |
| گزارش و تجزیه و تحلیل Crawl Depth | بررسی عمق خزیدن به منظور شناسایی ساختار لینک‌های داخلی و دسترسی به صفحات مهم. |
| تحلیل انواع محتوا | شناسایی فرمت‌های مختلف محتوا (متن، تصویر، ویدیو و …) و کیفیت و تنوع آن‌ها. |
| * بررسی و شناسایی مشکلات فنی پیچیده مانند canonicalization، hreflang، مشکلات رندرینگ JavaScript و AMP. | |
| شناسایی و مدیریت لینک‌ها | یافتن لینک‌های شکسته داخلی و خارجی، لینک‌های ریدایرکت، لینک‌های Nofollow و Dofollow، لینک‌های تصویر و انکرتکست‌ها. |
| بهینه‌سازی عناوین و توضیحات صفحات | بررسی طول، یکتایی و ارتباط عناوین و توضیحات متا با محتوای صفحات. |
| تحلیل ساختار URL و معماری سایت | بررسی URLهای طولانی، URLهای حاوی کاراکترهای غیرمجاز، URLهای داینامیک و URLهای تکراری و شناسایی ساختار منطقی و بهینه برای وب‌سایت. |
| مدیریت داده‌های اسکیما سایت Schema و Structured Data | تحلیل و اعتبارسنجی داده‌های ساختاریافته، بررسی Schema.org و ارزیابی نحوه استفاده از آن‌ها برای بهبود نمایش نتایج در SERP. |
| تحلیل تصاویر و بهینه‌سازی آن‌ها | شناسایی تصاویر بدون متن ALT، بررسی حجم فایل تصاویر، فرمت‌های تصویر (JPEG، PNG، WebP) و بهینه‌سازی تصاویر برای سرعت بارگذاری بهتر. |
| تحلیل فایل‌های Robots.txt و Sitemap.xml | بررسی و تحلیل فایل‌های Robots.txt برای اطمینان از مسدود نشدن صفحات مهم و Sitemap.xml برای اطمینان از فهرست شدن تمامی صفحات مهم در موتورهای جستجو. |
| گزارش‌گیری از خطاهای محتوایی و تکراری | شناسایی محتوای تکراری داخلی و خارجی، محتوای نازک (Thin Content)، محتوای قدیمی و محتوایی که ارزش افزوده‌ای برای کاربر ندارد. |
| تحلیل و گزارش‌گیری از سرعت بارگذاری صفحات | ارزیابی سرعت بارگذاری صفحات (PageSpeed Insights)، بررسی Core Web Vitals (LCP، FID، CLS) و شناسایی عوامل موثر در کاهش سرعت بارگذاری صفحات. |
| تحلیل متا تگ‌های شبکه‌های اجتماعی | بررسی و بهینه‌سازی متا تگ‌های Open Graph (OG) برای فیسبوک و متا تگ‌های Twitter Cards برای توییتر. |
| تجزیه و تحلیل Crawl Depth و معماری لینک داخلی | بررسی عمق خزیدن، ساختار لینک‌های داخلی، شناسایی صفحات دور از دسترس و بهینه‌سازی لینک‌دهی داخلی برای بهبود ناوبری و انتقال ارزش سئو. |
| تحلیل Log File و داده‌های سرور | تجزیه و تحلیل Log Fileهای سرور برای شناسایی مشکلات فنی، خطاهای خزیدن، الگوهای ترافیکی و رفتارهای کاربران. |
| قابلیت ادغام با ابزارهای دیگر | ادغام با Google Analytics، Google Search Console، PageSpeed Insights و سایر ابزارهای سئو برای دریافت داده‌های بیشتر و تحلیل دقیق‌تر. |
| قابلیت سفارشی‌سازی و استخراج داده | استخراج داده‌های سفارشی از HTML، CSS و JavaScript، ایجاد فیلترها و قوانین سفارشی برای شناسایی الگوها و مشکلات خاص. |
| قابلیت ارائه گزارش‌های متنوع | ارائه گزارش‌های جامع و تفصیلی در قالب‌های مختلف (CSV، Excel، PDF) و قابلیت سفارشی‌سازی گزارش‌ها. |
| بررسی ریدایرکت‌ها | بررسی انواع ریدایرکت‌ها (301، 302، متا رفرش) و اطمینان از صحیح بودن آن‌ها و جلوگیری از ریدایرکت‌های زنجیره‌ای. |
| تحلیل AMP Accelerated Mobile Pages | بررسی و اعتبارسنجی صفحات AMP و شناسایی مشکلات مربوط به پیاده‌سازی AMP. |
| تحلیل و بررسی محتوای JavaScript | بررسی محتوایی که با JavaScript تولید می‌شود و اطمینان از ایندکس شدن صحیح محتوا توسط موتورهای جستجو. |
| قابلیت Crawl کردن وب‌سایت‌های بزرگ | قابلیت Crawl کردن وب‌سایت‌های بزرگ با میلیون‌ها صفحه و مدیریت منابع سرور به صورت بهینه. |
رفع کنیبالیزیشن با استفاده از اسکریمینگ
کنیبالیزیشن (Canibalization) یا هم نوع خواری صفحات به وضعیتی است که در آن چندین صفحه از یک وب‌سایت برای یک کلمه کلیدی خاص بهینه‌سازی شده‌اند و باهم رقابت میکنند.
کنیبالیزیشن صفحات می‌تواند باعث شود که موتورهای جستجو نتوانند تشخیص دهند کدام صفحه باید رتبه‌بندی شود. در نتیجه، ممکن است هردو یا چند صفحه به‌طور همزمان رتبه‌های پایین‌تری کسب کنند. اما برای پیدا کردن صفحاتی که نتایج باهم ظاهر می شوند باید بعد از اینکه ادرس سایت شما توسط اسکریمینگ فراگ کامل بررسی شد باید به به بخش “Canonical” بروید.
شما میتوانید تگ‌های کانونیکال مربوط به هر URL را مشاهده کنید. بررسی کنید که آیا صفحات مشابه به درستی دارای تگ‌های کانونیکال هستند و آیا به URL اصلی اشاره میکنند.
برای رفع مشکل کنیبالیزیشن یا باید ریدایرکت 301 کرد یا اینکه تگ کنونیکال به کار ببرید. این کار کاملا بستگی به وضعیت صفحات و نیاز شما دارد.
آپدیت محتوا و بهبود کرال باجت سایت با حذف و آپدیت محتوا و لینک سازی داخلی صفحات
براساس داده‌های موجود، وب‌سایت‌هایی که در نتایج جستجوی گوگل رتبه بالایی دارند، معمولاً مقالاتی با حجم ۱۸۰۰ تا ۲۵۰۰ کلمه دارند. بنابراین، هنگام ثبت سفارش تولید محتوا، میتوانید تعداد کلمات مورد نیاز خود را از این بازه انتخاب کنید. محتوای کوتاه، که معمولاً کمتر از ۳۰۰ کلمه است، برای وب‌سایت‌ها مناسب نمی‌باشد و توصیه می‌شود که محتوای هر صفحه حداقل ۵۰۰ کلمه داشته باشد.
در اسکریمینگ فراگ میتوانید مقدار و حجم صفحاتی که محتوای کمی دارد شناسایی کنید و برای ان بریف محتوایی بنویسید تا محتوای با کیفیت و مفید برای ان صفحه نویسنده بنویسد. بدین منظور باید به تب Internal، فیلتر را روی HTML تنظیم کنید و سپس به سمت راست صفحه اسکرول کنید تا ستون Word Count یا تعداد کلمات را مشاهده کنید. این ستون را از کم به زیاد مرتب کنید تا صفحات با محتوای اندک را شناسایی کنید. اگر صفحاتی کمتر از ۱۰۰۰ کلمه محتوا دارند و با استراتژی‌های شما همخوانی دارند، میتوانید آن‌ها را به‌روزرسانی کنید و کیفیتشان را افزایش دهید. همچنین، صفحاتی که محتوای ناچیزی دارند، ممکن است قابل حذف باشند. بهتر است که لینک سازی داخلی آن را نیز می توانید چک کنید.
با اسکریمینگ فراگ در سریع ترین زمان ممکن تصاویر سایتتان را سئو کنید
سئوی تصاویر معمولاً به‌عنوان یک جنبه نادیده گرفته‌شده در سئو داخلی و سئوی محتوا تلقی می‌شود. در ادامه، به بررسی دقیق‌تری از جزئیات فرآیند سئوی تصاویر خواهیم پرداخت تا اطمینان حاصل شود که عکس‌های موجود در سایت به‌خوبی برای موتورهای جستجو بهینه‌سازی شده‌اند.
و اما برای برای تحلیل وضعیت تصاویر، به تب Images مراجعه کنید و فیلتر را روی Missing Alt Text قرار دهید تا تصاویری که دارای متن جایگزین نیستند را شناسایی کنید. همچنین میتوانید تصاویر با متن جایگزین طولانی (بیش از ۱۰۰ کاراکتر) را با استفاده از فیلتر Alt Text Over 100 Characters پیدا کنید تا اطمینان حاصل کنید سئو تصاویرتان به درستی رعایت شده است.
عناوین بهینه و جذاب بنویس و نرخ تبدیل و رشد سایتت زیاد کن
تگ تایتل (Title Tag) یک عنصر کلیدی در HTML است که عنوان یک صفحه وب را مشخص می‌کند و به‌طور همزمان به موتورهای جستجو و کاربران اطلاعات مربوط به محتوای آن صفحه را ارائه می‌دهد. تگ تایتل در قسمت <head> مستند HTML قرار می‌گیرد و در نتایج جستجو (SERP) به‌عنوان لینک قابل‌کلیکی که کاربران روی آن کلیک میکنند، نمایش داده می‌شود.
تگ تایتل باید مختصر، توصیفی و شامل کلمات کلیدی مرتبط باشد تا هم جذابیت لازم را برای کاربران ایجاد کند و هم به بهبود سئو (SEO) کمک کند. طول مناسب تگ تایتل معمولاً بین 50 تا 60 کاراکتر است تا از نمایش ناقص در نتایج جستجو جلوگیری شود. به‌طور کلی، تگ تایتل نقشی حیاتی در جذب ترافیک و افزایش نرخ کلیک (CTR) ایفا می‌کند برای بهینه سازی تگ های تایتل باید وارد تب Page Titles ابزار اسکریمینگ فراگ Screaming Frog شوید و فیلتر را روی Titles Over 70 Characters قرار دهید. عناوینی که بیشتر از ۷۰ کاراکتر دارند، ممکن است در نتایج گوگل به‌صورت ناقص نمایش داده شوند و این می‌تواند باعث کاهش کلیک‌های کاربران روی لینک سایت شما شود. بنابراین، پیشنهاد می‌شود این عناوین را تغییر دهید یا کوتاه کنید.
باز نویسی متاتکراری و پیدا کردن ان با ابزار اسکریمینگ فراگ
بسیاری از وب‌سایت‌ها ممکن است برای تمامی صفحات خود از یک محتوای مشابه در بخش متا استفاده کنند. این اقدام می‌تواند منجر به ایجاد محتوای تکراری شود و احتمالاً وب‌سایت را در معرض جریمه‌های الگوریتم پاندا قرار دهد. برای شناسایی محتوای تکراری در متا، میتوانید به تب Page Titles مراجعه کرده و فیلتر Duplicate را انتخاب کنید. با این کار، صفحاتی که دارای متاهای تکراری هستند، نمایش داده می‌شوند. سپس می‌توانی صفحات تان را مورد بازبینی و بهبود قرار دهید.
