www.dntips.ir
مطالب	۳۶۹۴
نویسندگان	۲۷۶
گروه‌های مطالب	۱۰۲۴
نقشه‌های راه	۱۱۹
دوره‌ها	۱۴
اشتراک‌ها	۱۷۹۱۴

عنوان:

‫بهبود SEO در ASP.NET MVC

نویسنده: وحید نصیری
تاریخ: ۱۳۹۱/۱۰/۱۵ ۱۸:۱۵
آدرس: www.dntips.ir

گوگل خلاصه نتایج Indexing یک سایت را توسط ابزاری به نام Google webmaster tools در اختیار علاقمندان قرار می‌دهد. Bing نیز چنین ابزاری را تدارک دیده است.
به آمارهای خطای حاصل از سایت جاری که دقت می‌کردم یک نکته آن جالب بود: «محتوای تکراری»

mydomain.com/Home/Index
mydomain.com/home/index
mydomain.com/Home/index
mydomain.com/home/Index

همانطور که ملاحظه می‌کنید، گوگل به کوچکی و بزرگی حروف بکار رفته در لینک‌ها حساس است. هرچند 4 لینک فوق به یک صفحه اشاره می‌کنند، اما گوگل 4 بار آن‌ها را ایندکس خواهد کرد و نهایتا به صورت یک خطای «محتوای تکراری» در گزارشات SEO آن ظاهر خواهد شد (به همراه کاهش رتبه SEO سایت).

راه حل

برای حل این مساله دو نکته باید درنظر گرفته شود:
الف) هدایت دائمی (Redirect permanent) صفحات قدیمی به صفحاتی جدید، با آدرس lowercase

using System.Globalization;
using System.Web;
using System.Web.Mvc;

namespace WebToolkit
{
    public class ForceWww : ActionFilterAttribute
    {
        public override void OnActionExecuting(ActionExecutingContext filterContext)
        {
            modifyUrlAndRedirectPermanent(filterContext);
            base.OnActionExecuting(filterContext);
        }

        private static void modifyUrlAndRedirectPermanent(ActionExecutingContext filterContext)
        {
            if (canIgnoreRequest(filterContext))
                return;

            var absoluteUrl = HttpUtility.UrlDecode(filterContext.RequestContext.HttpContext.Request.Url.AbsoluteUri.ToString(CultureInfo.InvariantCulture));
            var absoluteUrlToLower = absoluteUrl.ToLowerInvariant();

            absoluteUrlToLower = forceWwwAndLowercase(filterContext, absoluteUrlToLower);
            absoluteUrlToLower = avoidTrailingSlashes(filterContext, absoluteUrlToLower);

            if (!absoluteUrl.Equals(absoluteUrlToLower))
            {
                filterContext.Result = new RedirectResult(absoluteUrlToLower, permanent: true);
            }
        }

        private static string avoidTrailingSlashes(ActionExecutingContext filterContext, string absoluteUrlToLower)
        {
            if (!isRootRequest(filterContext) && absoluteUrlToLower.EndsWith("/"))
                return absoluteUrlToLower.TrimEnd(new[] { '/' });

            return absoluteUrlToLower;
        }

        private static bool isRootRequest(ActionExecutingContext filterContext)
        {
            return filterContext.RequestContext.HttpContext.Request.Url.AbsolutePath == "/";
        }

        private static bool canIgnoreRequest(ActionExecutingContext filterContext)
        {
            return filterContext.IsChildAction || 
                   filterContext.HttpContext.Request.IsAjaxRequest() ||
                   filterContext.RequestContext.HttpContext.Request.Url.AbsoluteUri.Contains("?");
        }

        private static string forceWwwAndLowercase(ActionExecutingContext filterContext, string absoluteUrlToLower)
        {
            if (isLocalRequet(filterContext))
                return absoluteUrlToLower;

            if (absoluteUrlToLower.Contains("www"))
                return absoluteUrlToLower;

            return absoluteUrlToLower.Replace("http://", "http://www.")
                                     .Replace("https://", "https://www.");
        }

        private static bool isLocalRequet(ActionExecutingContext filterContext)
        {
            return filterContext.RequestContext.HttpContext.Request.IsLocal;
        }
    }
}

کلاس فوق، نگارش تکمیل شده ForceWww که پیشتر در این سایت دیده‌اید. توسط آن سه بررسی مختلف بر روی لینک جاری در حال پردازش صورت خواهد گرفت:
- تمام آدرس‌های سایت باید www داشته باشند؛ تا آدرس‌های آن یکنواخت شده و خصوصا مشکلات لاگین و نوشته شدن کوکی‌ها به ازای آدرس‌های مختلف و سر درگمی کاربران کاهش یابد.
- اگر آدرس جاری lowercase نباشد، تبدیل به نمونه lowercase شده و درخواست کننده، به آدرس جدید هدایت می‌شود. این مورد خصوصا جهت موتورهای جستجو برای تصحیح نتایج آن‌ها بسیار مفید است.
- اسلش انتهای لینک‌ها در صورت وجود حذف خواهد شد. این مورد نیز در کاهش تعداد خطاهای «محتوای تکراری» مؤثر است.
- اگر آدرسی، کوئری استرینگ داشته باشد از آن صرفنظر خواهد شد؛ زیرا ممکن است اطلاعات موجود در آن به کوچکی و بزرگی حروف حساس باشند.

ب) کاهش بار سایت توسط تولید خودکار Urlهایی که در بدو امر lowercase هستند

برای پیاده سازی این مطلب می‌توان از پروژه سورس باز «LowercaseRoutesMVC» استفاده کرد. سه فایل cs دارد که می‌توانید به پروژه خود اضافه کنید. پس از آن، هرجایی در پروژه خود routes.MapRoute دارید تبدیل کنید به routes.MapRouteLowercase .
به این ترتیب به صورت خودکار تمام Urlهای تولید شده توسط HTML helpers توکار ASP.NET MVC (و نه Urlهایی که دستی نوشته شده‌اند)، در حین درج در صفحه به صورت lowercase ظاهر خواهند شد (صرفنظر از اینکه نام‌های کنترلرها و یا اکشن متدهای تعریف شده camel case هستند یا خیر). مزیت این مساله کاهش یک مرحله Redirect است که در قسمت الف ذکر شد. در این کتابخانه کمکی نیز از آدرس‌هایی که دارای کوئری استرینگ باشند، صرفنظر می‌شود.

مطالب مشابه

بازخوردهای دورهپیاده سازی دکمه «بیشتر» یا «اسکرول نامحدود» به کمک jQuery در ASP.NET MVC

مطالبنحوه اجباری کردن استفاده از WWW در ASP.NET MVC

مطالبفیلترها در MVC

مطالبهدایت خودکار کاربر به صفحه لاگین در حین اعمال Ajax ایی

مطالبایجاد فیلتر برای هدایت همه‌ی درخواست‌ها به صفحه‌ی «در حال به‌روزرسانی» در برنامه‌های ASP.NET MVC

مطالبASP.NET MVC #15

مطالبمدیریت درخواست‌های شرطی در ASP.NET MVC

نظرات اشتراک‌هافریم‌ورک AMP چیست؟

نظرات مطالببهبود SEO در ASP.NET MVC

نظرات مطالبایجاد فیلتر برای هدایت همه‌ی درخواست‌ها به صفحه‌ی «در حال به‌روزرسانی» در برنامه‌های ASP.NET MVC

نظرات

امیرحسین مرجانی در ۱۳۹۱/۱۰/۱۵ ۲۳:۲۲

سلام
ممنونم ، مطلب مفیدی بود.

اگر ممکنه بیشتر روی بحث SEO مطلب منتشر کنید.
یاسر مرادی در ۱۳۹۱/۱۰/۱۶ ۱۰:۳۲

بهتر نبود برای تشخیص این که Request دارای Query String است یا خیر، قسمت Query String آن را بررسی می‌کردید که مقدار دارد یا خیر ؟
تا این که در کل کوئری دنبال علامت ؟ بگردید ؟
- وحید نصیری در ۱۳۹۱/۱۰/۱۶ ۱۱:۱
  
  - تشخیص وجود کوئری استرینگ در یک Url، حالت دیگری نمی‌تونه داشته باشه.
  - ضمنا یک Url می‌تونه کوئری استرینگی با چندین name-value داشته باشه. ضرورتی به بررسی تمام موارد و کند کردن کار نیست که آیا مقدار دارند همگی یا خیر.
  - جلال در ۱۳۹۱/۱۰/۱۸ ۲:۵۵
    سلام
    
    در تابع forceWwwAndLowerCase بهتره if مربوط به www به این شکل تغییر کنه:
    
    if (absoluteUrlToLower.Contains("http://www.") || absoluteUrlToLower.Contains("https://www.")) return absoluteUrlToLower;
    
    اینطوری اگه توی آدرس، Controller یا Action دارای www باشه، مشکلی پیش نمیاد. البته نکته دیگه درباره آدرس‌های دارای query string این که چرا تا قبل از ? رو به حروف کوچک تبدیل نکنیم؟ دلیل خاصی داره؟
    - وحید نصیری در ۱۳۹۱/۱۰/۱۸ ۸:۴۷
      
      - این یک کار سورس باز هست. مطابق نیاز خودتون تغییرش بدید و استفاده کنید. برای استفاده‌ای که من دارم تنظیمات آن کافی است.
      - در کار من قسمت‌هایی که کوئری استرینگ دارند عمومی نیستند و نیاز به اعتبارسنجی دارند. به همین جهت تبدیل آن‌ها برای بحث SEO اهمیتی نخواهند داشت. خصوصا قسمت کوئری استرینگ آن‌ها نباید تغییری کند چون در رمزگشایی اطلاعات از آن استفاده می‌شود.
توحید عزیزی در ۱۳۹۱/۱۰/۱۶ ۲۲:۳۷

این پاسخ در stackoverflow.com به نقل از اسکات گو هم بد نیست:
http://stackoverflow.com/a/170955/538387
- مهمان در ۱۳۹۱/۱۰/۱۷ ۰:۳۳
  
  راه مناسبی نیست. چون قید (IRouteConstraint) اعمال می‌کنه و سبب می‌شه که خیلی از urlها در سایت پردازش نشن.
وحید نصیری در ۱۳۹۱/۱۰/۲۶ ۱۲:۵۵
تکمیل بحث:
گوگل به تنظیم canonical url هم نیاز دارد. بنابراین تنظیم ذیل به کلاس فوق اضافه شد:
```
filterContext.Controller.ViewBag.CanonicalUrl = absoluteUrlToLower;
```
و بعد در فایل layout برنامه خواهیم داشت:
```
<link rel="canonical" href="@ViewBag.CanonicalUrl"/>
```
وحید نصیری در ۱۳۹۱/۱۲/۰۳ ۰:۲
یک نکته تکمیلی دیگر:
```
<a href="/contactus?name=وحید نصیری" rel="nofollow">ارسال پیام خصوصی</a>
```
اگر در سایت لینک‌هایی دارید که نیاز به اعتبارسنجی و لاگین دارند، این‌ها را با rel=nofollow مشخص کنید تا توسط گوگل ایندکس نشوند و تمام آن‌ها به یک صفحه تکراری (از دیدگاه گوگل) ختم نگردند.
وحید نصیری در ۱۳۹۲/۰۳/۰۱ ۱۴:۷
نکته: پشتیبانی توکار ASP.NET MVC از Lowercase generated URLs :
```
public static void RegisterRoutes(RouteCollection routes)
{
    ...
    routes.LowercaseUrls = true;
    ...
}
```
- vahid در ۱۳۹۲/۱۱/۰۶ ۱۳:۲۷
  
  سلام
  من با دات نت 4.5 نتونستم از این امکان استفاده کنم. در لینک زیر میگه این باگ مال نت 4.5 و در 5 درست شده
  stackoverflow
  آیا راهی هست بشه این باگ رفع کرد (بدون ابزار)
  - وحید نصیری در ۱۳۹۲/۱۱/۰۶ ۱۳:۴۷
    
    من از پروژه سورس باز LowercaseRoutesMVC که در انتهای مطلب معرفی شد، استفاده می‌کنم. ضمنا این تنظیم، بدون تعریف canonical urls ناقص است. یعنی در عمل بر اساس گزارش‌های Google webmaster tools به این نتیجه رسیده‌ام که گوگل، دیتابیس آدرس‌های تکراری را بر اساس تنظیمات canonical urls، به روز و اصلاح می‌کند.
وحید نصیری در ۱۳۹۲/۱۱/۰۶ ۱۴:۱۸
نکته‌ای مهم برای کاهش SEO جماعت کپی پیست کار
اگر محتوای سایت شما عینا در سایت‌های دیگر کپی پیست شده، چگونه می‌توانید به گوگل اعلام کنید که محتوای اصلی کدام است؟ کدام یکی کپی است و کدام یک متعلق به شما است؟ برای این منظور باید ذیل مطالب خودتان تنظیمات مربوط به گوگل پلاس خود را نیز قرار دهید:
```
 <a rel="author" href="https://plus.google.com/your_g_plus_id?rel=author">G+</a>
```
سپس در گوگل پلاس خود اعلام کنید که در این سایت مشارکت دارید (در قسمت Contributor to).

صابر فتح الهی در ۱۳۹۲/۱۱/۱۹ ۰:۲۱

جالبه که من این فیلتر اعمال کردم

<link rel="canonical" href="http://mysite.ir/home/index/5/صفحه-اصلی" />

بعد از فراخوانی سایت بدون www سایت ریدایرکت نمیشه اما وقتی کد خروجی سایت بررسی می‌کنیم می‌بینم مثل بالا قسمت cononical اعمال شده، مشکل ممکنه از کجا باشه؟ در حالی که کد درست اجرا میشه اما ریدایرکت رخ نمی‌ده - این بحث چطور بررسی کنم؟

وحید نصیری در ۱۳۹۲/۱۱/۱۹ ۰:۳۸

- روش دوم اجبار به www با استفاده از ماژول rewrite در IISهای جدید

<system.webServer>
  <rewrite>
    <rules>
      <rule name="Enforce WWW" stopProcessing="true">
           <match url=".*" />
           <conditions>
                  <add input="{CACHE_URL}" pattern="^(.+)://(?!www)(.*)" />
          </conditions>
          <action type="Redirect" url="{C:1}://www.{C:2}" redirectType="Permanent" />
       </rule>      
    </rules>
  </rewrite>
</system.webServer>

- روش دوم تولید Urlهای lower case

<system.webServer>
  <rewrite>
    <rules>
     <rule name="SEO - Lower case" stopProcessing="false">
       <match url="(.*)" ignoreCase="false" />
       <conditions logicalGrouping="MatchAll" trackAllCaptures="false">
  <add input="{HTTP_METHOD}" pattern="GET" />
  <add input="{R:1}" pattern="[A-Z]" ignoreCase="false" />
       </conditions>
       <action type="Rewrite" url="_{ToLower:{R:1}}" />
    </rule>
    </rules>
  </rewrite>
</system.webServer>

ماخذ: IIS Server through the eyes of an SEO
خلاصه آن:

<!-- SEO rules (from: http://www.seomoz.org/blog/what-every-seo-should-know-about-iis#chaining) -->
<!-- SEO | Section 1 | Whitelist -->
<rule name="Whitelist - Resources" stopProcessing="true">
  <match url="^(?:css/|scripts/|images/|install/|config/|umbraco/|umbraco_client/|base/|webresource\.axd|scriptresource\.axd|__browserLink|[^/]*/arterySignalR/.*)" />
  <conditions logicalGrouping="MatchAll" trackAllCaptures="false" />
  <action type="None" />
</rule>
<!-- SEO | Section 2 | Rewrites (chaining) -->
<rule name="SEO - Remove default.aspx" stopProcessing="false">
  <match url="(.*?)/?default\.aspx$" />
  <conditions logicalGrouping="MatchAll" trackAllCaptures="false">
<add input="{HTTP_METHOD}" pattern="GET" />
  </conditions>
  <action type="Rewrite" url="_{R:1}" />
</rule>
<rule name="SEO - Remove trailing slash" stopProcessing="false">
  <match url="(.+)/$" />
  <conditions logicalGrouping="MatchAll" trackAllCaptures="false">
<add input="{HTTP_METHOD}" pattern="GET" />
<add input="{REQUEST_FILENAME}" matchType="IsDirectory" negate="true" />
<add input="{REQUEST_FILENAME}" matchType="IsFile" negate="true" />
  </conditions>
  <action type="Rewrite" url="_{R:1}" />
</rule>
<rule name="SEO - Lower case" stopProcessing="false">
  <match url="(.*)" ignoreCase="false" />
  <conditions logicalGrouping="MatchAll" trackAllCaptures="false">
<add input="{HTTP_METHOD}" pattern="GET" />
<add input="{R:1}" pattern="[A-Z]" ignoreCase="false" />
  </conditions>
  <action type="Rewrite" url="_{ToLower:{R:1}}" />
</rule>
<!-- SEO | Section 3 | Redirecting -->
<rule name="SEO - HTTP canonical redirect" stopProcessing="true">
  <match url="^(_*)(.*)" />
  <conditions logicalGrouping="MatchAll" trackAllCaptures="true">
<add input="{HTTP_HOST}" pattern="^www\.(.*)" />
<add input="{HTTP_METHOD}" pattern="GET" />
<add input="{SERVER_PORT}" pattern="80" />
  </conditions>
  <action type="Redirect" url="http://{C:1}/{R:2}" />
</rule>
<rule name="SEO - HTTPS canonical redirect" stopProcessing="true">
  <match url="^(_*)(.*)" />
  <conditions logicalGrouping="MatchAll" trackAllCaptures="true">
<add input="{HTTP_HOST}" pattern="^www\.(.*)" />
<add input="{HTTP_METHOD}" pattern="GET" />
<add input="{SERVER_PORT}" pattern="443" />
  </conditions>
  <action type="Redirect" url="http://{C:1}/{R:2}" />
</rule>
<rule name="SEO - Non-canonical redirect" stopProcessing="true">
  <match url="^(_+)(.*)" />
  <conditions logicalGrouping="MatchAll" trackAllCaptures="false">
<add input="{HTTP_METHOD}" pattern="GET" />
  </conditions>
  <action type="Redirect" url="{R:2}" />
</rule>
<!-- // SEO rules -->

صابر فتح الهی در ۱۳۹۲/۱۲/۰۳ ۲۳:۱۸
سلام

روش دوم تولید Urlهای lower case

در پاسخ شما قسمت تبدیل آدرس به حروف کوچک
```
<action type="Rewrite" url="_{ToLower:{R:1}}" />
```
این روش در تبدیلات مطابق نیاز من درست کار نکرد. به فرض مثال در روش بالا اگر آدرسی مانند www.mysite.com/Home داشته باشیم تبدیل به آدرسی مانند www.mysite.com/_home خواهد شد. یک _ اضافه دارد.
وحید نصیری در ۱۳۹۲/۱۲/۰۴ ۰:۲

این دستورات چون تعداد زیادی دارند، برای اعمال یکباره آن‌ها، یک _ را به ابتدای مسیر اضافه می‌کند. در آخر کار این _‌ها را در تمام موارد تطابق یافته، حذف کرده و یک redirect را انجام می‌دهد. (این توضیحات در متن اصلی آن هست)

وحید نصیری در ۱۳۹۲/۱۱/۲۹ ۱۳:۱۶

یک نکته‌ی تکمیلی در مورد محتوای تکراری
به گزارش‌های گوگل در مورد سایت جاری که نگاه می‌کردم، تمام لینک‌های به صفحات جستجوی سایت را مثلا https://www.dntips.ir/search?term=seo تکراری گزارش کرده بود (تعداد زیادی بودند). چون عنوان قبلی صفحه جستجو، فقط «جستجو» بود (یک عنوان همیشه ثابت). بعد از اینکه عنوان را تبدیل کردم به «جستجو + عبارت وارد شده»، گزارش موارد تکراری آن برطرف شد.
وحید نصیری در ۱۳۹۳/۰۵/۲۴ ۲۳:۲۵
اصلاحیه!
امروز در حین گوگل گردی به این آدرس رسیدم (توسط گوگل ایندکس شده بود):
http://www.ww.w.thissite.info
یعنی وجود www در ابتدای آدرس کافی نیست. باید اصل Host دقیقا بررسی شود و در صورت عدم تطابق، redirect دائمی صورت گیرد.
فیلتر نهایی اصلاح شده: ForceWww.cs
نحوه استفاده:
```
filters.Add(new ForceWww("https://www.dntips.ir/"));
```
- میثم مجیدی در ۱۳۹۳/۱۰/۲۸ ۱۸:۳۵
  
  سلام. من وقتی از این کلاس ForceWww استفاده میکنم بعد از پابلیش خطای "This webpage has a redirect loop" رو میده. میشه لطفاً راهنمایی کنید اگر نکته خاصی وجود داره
  - وحید نصیری در ۱۳۹۳/۱۰/۲۸ ۱۹:۵
    
    - از این فیلتر در حال حاضر در همین سایت جاری استفاده می‌شود. (بنابراین مشکلی ندارد)
    - قسمت new RedirectResult آن‌را در سایت خودتان لاگ کنید، تا مشخص شود چندبار و به چه علتی اجرا می‌شود. همچنین بررسی کنید آیا جای دیگری در برنامه Redirect دیگری تنظیم شده یا خیر.
وحید نصیری در ۱۳۹۵/۰۲/۲۹ ۱۳:۵۵
ممنوع کردن ورود session id در آدرس

سایت‌های ASP.NET به یک چنین آدرس‌هایی پاسخ مثبت می‌دهند:
```
http://yourserver/folder/(session ID here)/
```
داخل پرانتز session id ذکر شده‌است و برای حالت cookie less است. حتی اگر استفاده‌ی از کوکی را اجباری کرده باشید، باز هم می‌توان آدرس فوق را درخواست داد و کار می‌کند (البته بدون تاثیر امنیتی است و پردازش نمی‌شود) ولی می‌تواند سبب بروز مشکل «وجود آدرس‌هایی با محتوای تکراری» در سایت شود.
برای ممنوع کردن یک چنین آدرس‌هایی می‌توان تنظیم ذیل را اضافه کرد:
<rewrite> <rules> <rule name="Remove Session ID From URL" patternSyntax="ECMAScript" stopProcessing="true"> <match url=".*" /> <conditions> <add input="{CACHE_URL}" pattern="^(.+):\/\/(.+)\/\((.*)\)\/(.+)" /> </conditions> <action type="Redirect" url="https://www.dntips.ir/" redirectType="Permanent" /> </rule> </rules> </rewrite>