همان طور که گفته شد (Crawl گوگل سرچ کنسول (بخش دوم))، فایل robots.txt یکفایل متنی است که در ریشه سایت قرار که در ریشه سایت قرار می گیرد و توسط آن امکان تعریف برخی قوانین برای ربات های موتور جستجو وجود دارد. در نتیجه این فایل باید به صورت example.com/robots.txt در دسترس باشد. توسط ابزار robots.txt Tester این امکان وجود دارد که علاوه بر رویت فایل robots.txt سایت، بتوانید بررسی کنید که گوگل بات به کدام فایلها یا مسیرها دسترسی دارد یا خیر.
برای این کار آدرس مورد نظر را در فیلد مربوطه نوشته و پس انتخاب User-agent از منوی آبشاری،روی دکمه TEST کلیک کنید. اگر گوگل بات به آدرس مورد نظر شما دسترسی داشته باشد، عبارتALLOWED به رنگ سبز به شما نمایش داده می شود و اگر بر اساس نوشته های robots.txt گوگل بات به آدرس مد نظر شما دسترسی نداشته باشد، عبارت BLOCKED به رنگ قرمز نمایش داده می شود و آن خط از نوشته robots.txt که باعث بلاک شدن گوگل بات شده نیز به رنگ قرمز در می آید تا شما متوجه علت عدم دسترسی گوگل بات به آدرس مورد نظرتان بشوید.
همچنین می توانید به صورت دستی در صفحه robots.txt Tester قوانین مد نظرتان را بنویسید و تست کنید. البته دقت داشته باشید که اعمال تغییرات درrobots.txt به معنای اعمال تغییرات در فایل اصلی که روی سرور قرار دارد نیست و صرفا کاربرد آزمایش و بررسی دارد. با کلیک روی عبارت See live robots.txt می توانید فایل اصلی را مشاهده کنید.
در قسمتSitemaps سرچ کنسول می توانید همه نقشه های طراحی سایت تان را به گوگل ارائه کنید تا گوگل بات بتواند از طریق آن سریع تر و با دقت بالاتر به کراول صفحات سایت بپردازد. اگر نقشه سایت بر طبق دستورالعملهای گوگل وبمستر ایجاد شده باشد می تواند تا حد زیادی به ایندکس شدن صفحات سایت کمک کند ولی اگ به عنوان نمونه تاریخ last modified صفحه را آپدیت نکند، می تواند باعث سردرگمی موتور جستجو شده و در روند ایندکس شدن صفحات تاثیر منفی بگذارد. جهت ارائه نقشه سایت در سرچ کنسول در صفحه Sitemaps ابتدا روی دکمه به رنگ قرمزADD/TEST SITEMAP کلیک کنید، سپس آدرس سایت را در فیلد مربوطه وارد کرده و روی دکمه Test کلیک کنید.
اگر نقشه سایت دارای ایراد اساسی باشد، در این مرحله در صفحه نتیجه تست نقشه سایت به شما پیغامی مبنی بر وجود ارور در نقشه سایت نمایش داده می شود ولی اگر نقشه سایت مشکل ساختاری نداشته باشد، در صفحه نتیجه تست نقشه سایت به شما نشان داده خواهد شد که چند آدرس در نقشه ای که جهت تست به سرچ کنسول ارائه کرده بودید وجود داشت. سپس همین مرحله را تکرار کرده و این بار به جای دکمه Test روی دکمه Submit کلیک کنید تا نقشه سایت شما در صف بررسی قرار بگیرد. پس از بررسی نقشه سایت توسط گوگل، مشابه تصویر زیر به شما اطلاع داده می شود که همواره چند آدرس در نقشه سایت شما موجود است و گوگل چند آدرس را ایندکس کرده است:
همان طور که در تصویر بالا مشاهده می کنید، در ستون Submitted که در هر نقشه سایت چه تعداد از آن URL ها ایندکس شده اند. در صورتیکه نقشه سایتی که Submit کرده اید با ایراد مواجه شود، در ستون Issues می توانید تعداد اخطارها را مشاهده کرده و با کلیک بر روی آن از جزئیات ایراد مطلع شوید.
جهت ثبت نقشه سایت در سرچ کنسول جدید نیز ابتدا وارد صفحه Sitemaps شوید و طبق تصویر زیر، آدرس نقشه سایت مورد نظرتان را وارد کرده و روی دکمه SUBMIT کلیک کنید.
دکمه TESTدر سرچ کنسول جدید وجود ندارد و در هنگام Submit کردن نقشه سایت در صورتیکه ایرادی وجود داشته باشد به شما اطلاع داده می شود. هم در سرچ کنسول جدید و هم در سرچ کنسول قدیمی می توانید همه نقشه های سایتتان را به گوگل ارائه کنید.
گزارش نقشه های سایت ارائه شده در سرچ کنسول جدید به شکل زیر به شما نمایش داده می شوند و شما می توانید با کلیک بر روی هر کدام از جزئیات گزارش مطلع شوید.
سرچ کنسول جدید جزئیات زیادی را در مورد نقشه سایت ارائه می دهد که لازم است که سئو کاران با دقت آنها را بررسی کنند.
به صورت کلی URL Parameter ها پارامترهایی هستند که بعد از علامت سوال در آدرس URL وجود دارند. به عنوان نمونه در آدرس زیر، پارامتر brand یک پارامتر URL است که مقدار آن برابر با sony است. این کار به سئو سایت کمک بسیاری می کند.
example.com/tv?brand=sony
پارامتر های URL کاربردهای مختلفی مانند پارامتر فیلتر، جستجو، مرتب سازی، صفحه بندی و Session ID دارند. موتور جستجوی گوگل می تواند بیشتر پارامترهای URL را تشخیص دهد ولی این امکان نیز در سرچ کنسول وجود دارد که برای درک بهتر گوگل بات از پارامترهای URL بتوانید کاربرد هر پارامتر را به صورت جداگانه برای گوگل بات تعریف کنید.
در صورتیکه پارامترهای URL سایت توسط گوگل بات شناسایی شده باشند، می توانید آنها در صفحه URL Parameters در سرچ کنسول مشاهده کنید و در صورت نیاز آنها را ویرایش کنید. و اگر پارامتر URL دارید که هنوز وسط گوگل بات شناسایی نشده باشد، می توانید آن را به صورت دستی تعریف کنید. البته به این نکته توجه داشته باشید که در صورتیکه هیج پارامتری را تعریف نکنید، گوگل بات توسط هوش مصنوعی در مورد ایندکس کردن و یا ایندکس نکردن آدرسهایی که حاوی آن پارامتر هستند تصمیم می گیرد. ولی اگر تعریف پارامتر به درستی انجام نشود، ممکن است به خارج شدن صفحه از ایندکس گوگل یا de-index شدن صفحه نیز بینجامد. بنابراین هنگامی به تعریف پارامتر URL بپردازید که از نحوه انجام آن اطلاع کافی داشته باشید.
جهت ویرایش پارامترهایی که گوگل بات آنها را شناسایی کرده و یا خودتان قبلا آن را تعریف کرده اید >رویEdit/Reset کلیک کنید.
جهت تعریف پارامتر جدید بر روی دکمه Add parameter کلیک کنید. سپس مانند تصویر زیر، در پنجره ای که باز می شود در فیلد Parameter، نام پارامترURL مد نظرتان را بنویسید.
دقت کنید که این فیلد به حروف کوچک و بزرگ حساس است.
سپس در صورتیکه پارامتر مورد نظر تغییری در صفحه ایجاد نمی کند (مانند Session ID)، از منوی آبشاری گزینه No را انتخاب و اگر پارامتر URL تغییری در صفحه ایجاد می کند (مانند صفحه بندی، فیلتر، مرتب سازی) گزینه Yes را انتخاب نمایید.
اگر گزینه No را انتخاب کرده باشید، روی دکمه save کلیک کنید تا تعریف پارامتر به اتمام برسد ولی اگر گزینه Yes را انتخاب کرده باشید، همانند تصویر زیر باید از منوی آبشاری بعدی، از بین گزینه هایPaginates ،Translates ، Specifies ،Narrows ،Sorts و Other گزینه مناسب را انتخاب کنید.
کاربرد گزینه های منوی آبشاری موجود در تصویر بالا بدین شرح است:
در ادامه باید همانند تصویر زیر برای گوگل بات مشخص کنید که آدرسهایی که با پارامتر تعریف شده وجود دارند را کراول بکند یا خیر. گزینه Let Googlebot decide به صورت پیشفرض انتخاب شده است. اگر در انتخاب گزینه ها اطمینان کافی ندارید، این گزینه را انتخاب کنید که در نتیجه آن، گوگل او در موردکراول یا عدم کراول صفحه تصمیم گیری کند.
اگر می خواهید که گوگل بات همه آدرس های حاوی پارامتر مورد نظر شما را کراول کند، گزینه Every Up و اگر قصد دارید گوگل بات آنها را کراول نکند، گزینهNo URLs را انتخاب نمایید.
اگر قصد دارید که فقط آدرسهایی با پارامتر مورد نظر شما و مقدار مشخص توسط گوگل بات کراول شوند، گزینه Only URLs with value را انتخاب کرده و از منوی آبشاری، مقدار مورد نظرتان را انتخاب کنید. این گزینه در صورتی قابل انتخاب کردن است که دارای پارامتر URL با مقدار مورد نظر شما هستند قبلا توسط گوگل بات شناسایی شده باشند.
پس از تعریف URL Parameter مختلف، در هر لحظه می توانید آنها را مشاهده، ویرایش و یا حذف نمایید.
برای سفارش طراحی سایت شرکتی، طراحی سایت فروشگاهی و نیز اطلاع از قیمت طراحی سایت ما در سئوراز می توانید با کلیک برروی لینک طراحی سایت و تماس با شماره های مندرج در سایت تماس برقرار کرده و از مشاوره های کارشناسان ما نیز بهره مند شوید.
همانطور که گفته شد، از عوامل مهم در سرعت بارگذاری صفحات در گوگل(Page Speed) که برخی از آنها موثرتر از بقیه موارد هستند و برخی نیز با تاثیر گذاری اندک وجود دارند و باعث می شوند صفحه نتیجه آنالیز صفحه توسط ابزار Google PageSpeed Insights شامل دو قسمت Optimization Suggestionsو Optimizations Already Present مواردی که نیاز به بهینه سازی دارند در Optimization Suggestions و مواردی که از قبل بهینه هستند و نیازی به بهینه سازی ندارند،در قسمت Optimizations Already Present نمایش داده شوند.
ابزار PageSpeed Insights برای هر کدام از موارد، که نیاز به بهینه سازی داشته باشند، نمونه هایی را به شما نمایش می دهد که بتوانید موارد بهینه نشده را راحت تر بیایید و آنها را بهینه کنید. در ادامه به توضیح موارد نمایش داده شده در نتیجه آنالیز پرداخته شده است.
قسمت above-the-fold یا همان قسمت از بالای صفحه در هنگامی که هنوز اسکرول انجام نشدهاست، از اهمیت ویژه ای برخوردار است. گوگل توصیه می کند که تلاش کنید تعداد فایلهای CSS و js که در رندر above-the-fold تاخیر ایجاد می کنند بسیار کم و در صورت امکان، وجود نداشته باشند. بنابراین هر چه تعداد این نوع فایلهای CSS و JS بیشتر باشد، نمره Optimization صفحه کاهش پیدا می کند.
ضمنا به دلیل اهمیت ویژه این موضوع، با افزایش تعداد منابع موثر در تاخیر رندر قسمت above-the-fold، نمره Optimization به صورت تصاعدی کاهش می یابد راهکارهای متفاوتی برای بهبود این آیتم وجود دارد که پرکاربردترین آنها، merge کردن یا ادغام همه فایلهای CSS و فایلهای JS به صورت جداگانه و داشتن یک فایل CSS و یک فایل JS است. توجه داشته باشید که ادغام کردن فایلها حتما باید با بررسی کامل انجام پذیرد که ایرادی در قسمت های مختلف صفحه با صفحات ایجاد نکند. بنابراین تلاش کنید که تا جایی که امکان پذیر است از تعداد فایلهای CSS و JS بکاهید.
همان طور که گفته شد، کش سمت کاربر یکی از موارد تاثیر گذار در سرعت بارگذاری صفحه است. اگر کش سمت کاربر را برای همه فایل های استاتیکی که در صفحه مورد نظرتان وجود دارد تعریف کرده باشید، می توانید امتیاز این قسمت را به طور کامل کسب کنید.
اگر آدرسی که در حال بررسی آن هستید به آدرس دیگری ریدایرکت نشود، می توانید امتیاز این تست را کسب کنید. و سئو سایت شما با این طراحی سایت بالا می رود.
همان طور که گفته شد با فشرده کردن اطلاعاتی که بین سرور و کاربر انتقال پیدا می کند می توان تا حد زیادی سایز فایل های انتقال پیدا کرده را کاهش داد و در نتیجه سرعت بارگذاری صفحه را ارتقا داد و تاثیر مثبت روی رنکینگ صفحه گذاشت. در صورتیکه نقل و انتقالات را به نحوی انجام داده باشید که همه فایلهای استاتیک و HTML به صورت فشرده از سرور به انتقال پیدا کند می توانید امتیاز فشرده سازی را کامل کسب کنید.
minify کردن css به معنی حذف space ها و enter های اضافه در CSS است که باعث کاهش سایز قایل Css می شود. اگر فقط enter های اضافه در CSS را حذف نمایید می توانید استان این تست را کسب کنید. ولی به هر حال با حذف space های اضافه نیز می توانید سایز فایل css را باز هم کاهش دهید.
minify کردن جاوااسکرییت به معنی حذف space ها و enter های اضافه در فایل های وز است که باعث کاهش سایز فایل می شود.
minify کردن HTML نیز همانند minify کردن CSS و js به حذف فاصله ها و enter های اضافه در HTML است.
برای سفارش طراحی سایت شرکتی، طراحی سایت فروشگاهی و نیز اطلاع از قیمت طراحی سایت ما در سئوراز می توانید با کلیک برروی لینک طراحی سایت و تماس با شماره های مندرج در سایت تماس برقرار کرده و از مشاوره های کارشناسان ما نیز بهره مند شوید.