डुप्लीकेट यूआरएल, कैननिकल नहीं चुना गया: ऐसे ठीक करें

संक्षेप में जवाब: “ऐसा डुप्लीकेट यूआरएल जो उपयोगकर्ता के कैननिकल यूआरएल चुने बिना मौजूद है” (अंग्रेज़ी में Duplicate without user-selected canonical) का मतलब है कि Google को एक जैसे या लगभग एक जैसे कॉन्टेंट वाले कई यूआरएल मिले, उनमें से किसी ने नहीं बताया कि मुख्य वर्शन कौन-सा है, इसलिए Google ने खुद एक चुन लिया और इस यूआरएल को खोज नतीजों से बाहर रखा। अक्सर इसमें कोई दिक्कत नहीं होती। आपको तभी कुछ करना है जब Google ने गलत यूआरएल चुना हो या पेज असल में डुप्लीकेट न हो। आम तौर पर समाधान है: पसंदीदा पेज पर खुद की ओर इशारा करने वाला rel="canonical" टैग, डुप्लीकेट पेजों पर कैननिकल टैग या 301 रीडायरेक्ट, और ऐसे इंटरनल लिंक व साइटमैप जो सिर्फ़ पसंदीदा यूआरएल इस्तेमाल करें।

इस डुप्लीकेट यूआरएल स्टेटस का क्या मतलब है

यह स्टेटस Google Search Console की पेज को इंडेक्स करने से जुड़ी रिपोर्ट में दिखता है। Google के सहायता केंद्र के मुताबिक, यह पेज किसी दूसरे पेज का डुप्लीकेट है, लेकिन यह कोई पसंदीदा कैननिकल पेज नहीं बताता। Google ने किसी दूसरे यूआरएल को कैननिकल (मुख्य वर्शन) चुन लिया है और यह पेज Search में नहीं दिखेगा।

असली बात “उपयोगकर्ता के कैननिकल यूआरएल चुने बिना” में है। आपने (उपयोगकर्ता ने) कभी कोई कैननिकल यूआरएल नहीं बताया, इसलिए Google को खुद फ़ैसला करना पड़ा। Google के दस्तावेज़ साफ़ कहते हैं: यह कोई गड़बड़ी नहीं, बल्कि सामान्य व्यवहार है, क्योंकि Google डुप्लीकेट पेज नहीं दिखाता।

ठीक करें या नज़रअंदाज़ करें?

एक सवाल से शुरुआत करें: क्या Google का चुना हुआ यूआरएल वही है जो आप लोगों को दिखाना चाहते हैं?

• हां, Google ने सही चुना। इसे वैसे ही रहने दें। डुप्लीकेट इंडेक्स से बाहर है, ठीक जैसा आप चाहते हैं। कैननिकल टैग जोड़ना फिर भी अच्छी आदत है, पर कुछ टूटा नहीं है।
• नहीं, Google ने गलत चुना। जैसे ट्रैकिंग पैरामीटर वाला वर्शन या http:// वाला वर्शन चुन लिया। नीचे दिए गए चरणों से ठीक करें।
• पेज डुप्लीकेट नहीं है। जैसे दो प्रॉडक्ट पेज जिनमें सिर्फ़ रंग का नाम अलग है। Google की सलाह के मुताबिक कॉन्टेंट को सचमुच अलग बनाएं या दोनों पेजों को मिला दें।

Google का सहायता केंद्र यह भी याद दिलाता है कि ज़्यादातर साइटों के कुछ पेज इंडेक्स नहीं होते और डुप्लीकेट यूआरएल को इंडेक्स होना ही नहीं चाहिए। इस स्टेटस वाले कुछ यूआरएल होना सामान्य है। लेकिन साइट में बदलाव के बाद अचानक बढ़ोतरी दिखे तो जांच ज़रूर करें।

डुप्लीकेट यूआरएल की आम वजहें

लगभग हमेशा एक ही पेज एक से ज़्यादा पतों से खुल जाता है:

• प्रोटोकॉल और होस्ट के अंतर: http:// और https://, या www.example.com और example.com, जो एक ही पेज दिखाते हैं।
• यूआरएल पैरामीटर: सॉर्टिंग और फ़िल्टर (?sort=price, ?color=green), सेशन आईडी या ट्रैकिंग टैग जैसे ?utm_source= और ?gclid=।
• आखिरी स्लैश और फ़ाइल नाम: /prices, /prices/ और /prices/index.html जिनमें एक ही कॉन्टेंट हो।
• बड़े और छोटे अक्षर: /Blog/Post और /blog/post ऐसे सर्वर पर जो दोनों को एक ही पेज मानता है।
• प्रिंट या AMP वर्शन जिनमें मुख्य पेज की ओर इशारा करने वाला कैननिकल टैग न हो।
• लगभग एक जैसे टेम्पलेट: शहरों के पेज, टैग पेज या प्रॉडक्ट वैरिएंट जिनका टेक्स्ट लगभग एक जैसा हो।

चरण-दर-चरण कैसे ठीक करें

1. पता करें कि Google ने कौन-सा यूआरएल चुना

Search Console में पेज को इंडेक्स करने से जुड़ी रिपोर्ट खोलें, “ऐसा डुप्लीकेट यूआरएल जो उपयोगकर्ता के कैननिकल यूआरएल चुने बिना मौजूद है” पर क्लिक करें और यूआरएल जांचने वाले टूल से किसी एक उदाहरण यूआरएल की जांच करें। इंडेक्सिंग की जानकारी में Google का चुना गया कैननिकल यूआरएल फ़ील्ड दिखेगा। इसकी तुलना उस यूआरएल से करें जिसे आप रैंक कराना चाहते हैं। प्रभावित यूआरएल को पैटर्न के हिसाब से ग्रुप करें (पैरामीटर, www, आखिरी स्लैश), क्योंकि टेम्पलेट में एक बदलाव अक्सर पूरा ग्रुप ठीक कर देता है।

2. हर पेज के लिए एक पसंदीदा यूआरएल चुनें

वह अकेला वर्शन तय करें जो आप नतीजों में देखना चाहते हैं, जैसे https://example.com/dresses/green-dresses: HTTPS, एक होस्ट, आखिरी स्लैश का एक तरीका और कोई पैरामीटर नहीं। यह नियम लिख लें ताकि आपकी पूरी टीम एक ही तरह लिंक करे।

3. पसंदीदा पेज पर खुद की ओर इशारा करने वाला कैननिकल टैग जोड़ें

Google सलाह देता है कि कैननिकल पेज पर भी rel="canonical" लिंक हो (सेल्फ़-रेफ़रेंसिंग कैननिकल)। इसे <head> में रखें और पूरा यूआरएल इस्तेमाल करें:

<head>
  <title>Green dresses</title>
  <link rel="canonical" href="https://example.com/dresses/green-dresses" />
</head>

ज़्यादातर CMS और SEO प्लगइन इसे अपने-आप जोड़ सकते हैं। फिर पब्लिश हुआ HTML जांचें: Google कैननिकल लिंक तभी मानता है जब वह <head> में हो। आप हमारे मुफ़्त कैननिकल टैग चेकर से कुछ सेकंड में यह जांच सकते हैं।

4. डुप्लीकेट पेजों को पसंदीदा यूआरएल की ओर मोड़ें

जिन डुप्लीकेट को खुला रहना है (फ़िल्टर किए गए व्यू, ट्रैकिंग यूआरएल, प्रिंट पेज), उन पर वही कैननिकल टैग लगाएं जो पसंदीदा यूआरएल की ओर इशारा करे। जो डुप्लीकेट होने ही नहीं चाहिए (HTTP, www या पुराने यूआरएल), उनके लिए स्थायी 301 रीडायरेक्ट इस्तेमाल करें। Google रीडायरेक्ट को इस बात का मज़बूत संकेत बताता है कि मंज़िल वाला पेज ही कैननिकल होना चाहिए। Apache में HTTPS और बिना www वाले होस्ट पर रीडायरेक्ट कुछ ऐसा दिख सकता है:

RewriteEngine On
RewriteCond %{HTTPS} off [OR]
RewriteCond %{HTTP_HOST} ^www\. [NC]
RewriteRule ^ https://example.com%{REQUEST_URI} [L,R=301]

लागू करने के बाद कुछ पुराने पते रीडायरेक्ट चेकर से आज़माएं, ताकि पक्का हो जाए कि हर पता बिना चेन या लूप के, एक ही 301 कदम में आखिरी यूआरएल तक पहुंचता है।

PDF जैसी गैर-HTML फ़ाइलों के लिए आप कैननिकल को HTTP हेडर में भेज सकते हैं:

HTTP/1.1 200 OK
Link: <https://example.com/downloads/guide.pdf>; rel="canonical"

5. बाकी सभी संकेतों को एक जैसा बनाएं

कैननिकल टैग तब सबसे अच्छा काम करते हैं जब बाकी साइट भी यही बात कहे:

• इंटरनल लिंक: हमेशा पसंदीदा यूआरएल पर लिंक करें, मेन्यू, ब्रेडक्रंब और बटन में भी।
• साइटमैप: सिर्फ़ कैननिकल यूआरएल शामिल करें। Google साइटमैप में होने को कमज़ोर संकेत मानता है, लेकिन पैरामीटर वाले यूआरएल से भरा साइटमैप आपके ख़िलाफ़ जाता है। इसे साइटमैप चेकर से जांचें।
• hreflang: अगर आपके पास दूसरी भाषाओं के वर्शन हैं, तो हर वर्शन का कैननिकल उसी भाषा में होना चाहिए, अंग्रेज़ी पेज की ओर नहीं।
• HTTPS: Google कैननिकल के लिए HTTPS पेजों को प्राथमिकता देता है, जब तक कोई टकराव न हो, जैसे अमान्य सर्टिफ़िकेट या वापस HTTP पर रीडायरेक्ट।

6. अगर पेज अनोखा है, तो यह दिखाएं

अगर चिह्नित यूआरएल खोज में अपनी अलग जगह का हकदार है, तो उसे ऐसा कॉन्टेंट दें जो उस पेज से साफ़ तौर पर अलग हो जिसके साथ Google ने उसे ग्रुप किया: अपना टाइटल, हेडिंग, ब्यौरा, इमेज और टेक्स्ट। नहीं तो दोनों पेजों को मिला दें और कमज़ोर पेज को रीडायरेक्ट कर दें।

7. सुधार की पुष्टि करें और समय दें

पेज को इंडेक्स करने से जुड़ी रिपोर्ट पर लौटें और समस्या ठीक होने की पुष्टि करें पर क्लिक करें। Google के मुताबिक पुष्टि में आम तौर पर करीब दो हफ़्ते लगते हैं, कभी-कभी इससे काफ़ी ज़्यादा। हर यूआरएल के लिए इंडेक्सिंग का अनुरोध करने की ज़रूरत नहीं है: Google प्रभावित पेजों को क्रॉल करते समय फिर से जांच लेगा।

इन गलतियों से बचें

ये बातें सीधे Google के कैननिकल से जुड़े दिशा-निर्देशों से ली गई हैं:

• डुप्लीकेट संभालने के लिए robots.txt का इस्तेमाल न करें। ब्लॉक किए गए यूआरएल फिर भी इंडेक्स हो सकते हैं, बस बिना कॉन्टेंट के।
• एक ही साइट के अंदर कैननिकल चुनने के लिए noindex का इस्तेमाल न करें। इससे पेज Search से पूरी तरह हट जाता है।
• इस काम के लिए यूआरएल हटाने वाला टूल इस्तेमाल न करें। यह यूआरएल के सभी वर्शन छिपा देता है।
• एक-दूसरे से उलट संकेत न भेजें, जैसे साइटमैप में एक यूआरएल और कैननिकल टैग में दूसरा।
• यूआरएल के फ़्रैगमेंट (#section) को कैननिकल न बनाएं और रिलेटिव कैननिकल पाथ से बचें।
• JavaScript को मूल HTML में पहले से मौजूद कैननिकल टैग बदलने न दें।

Page Behavior के साथ अपने पेज मुफ़्त में जांचें

डुप्लीकेट यूआरएल शायद ही कभी अकेले आते हैं: अक्सर उनके साथ गायब कैननिकल टैग, रीडायरेक्ट चेन, भूले हुए noindex टैग और बिखरे साइटमैप भी होते हैं। Page Behavior का ऑडिट बताता है कि कैननिकल टैग गायब है या नहीं, और टाइटल, मेटा टैग, हेडिंग, लिंक, इमेज और स्पीड भी जांचता है, हर सुधार को आसान शब्दों में समझाते हुए। अगर आपको लगता है कि कोई पेज गलती से ब्लॉक हो गया है, तो noindex चेकर कुछ सेकंड में जवाब दे देता है।

पहले एक नज़र डालना चाहते हैं? किसी भी पेज का मुफ़्त SEO ऑडिट चलाएं, बिना अकाउंट के।

अपना मुफ़्त Page Behavior अकाउंट बनाएं ताकि अपने पेजों का ऑडिट कर सकें और दोबारा ऑडिट शेड्यूल कर सकें। न क्रेडिट कार्ड, न ट्रायल, न कोई छिपी शर्त।

अक्सर पूछे जाने वाले सवाल

क्या यह स्टेटस SEO के लिए बुरा है?

अपने-आप में नहीं। इसका मतलब है कि Google पेज का एक वर्शन इंडेक्स में रखता है और कॉपी को बाहर छोड़ देता है, और ऐसा ही होना चाहिए। यह तभी नुकसान करता है जब Google गलत वर्शन रख ले या उस पेज को कॉपी मान ले जिसे आप रैंक कराना चाहते हैं।

यह Google ने उपयोगकर्ता से अलग कैननिकल यूआरएल चुना है वाले स्टेटस से कैसे अलग है?

“उपयोगकर्ता के कैननिकल यूआरएल चुने बिना” वाले स्टेटस में आपने कभी कैननिकल नहीं बताया और Google ने खुद एक चुन लिया। “डुप्लीकेट यूआरएल, Google ने उपयोगकर्ता से अलग कैननिकल यूआरएल चुना है” में आपने बताया था, लेकिन Google ने तय किया कि कोई दूसरा यूआरएल बेहतर है। दूसरे मामले का आम तौर पर मतलब होता है कि आपका बताया कैननिकल इस पेज से काफ़ी मिलता-जुलता नहीं है।

कैननिकल टैग या 301 रीडायरेक्ट?

जब डुप्लीकेट यूआरएल की विज़िटर को ज़रूरत न हो (पुराने यूआरएल, HTTP, www वर्शन) तो 301 रीडायरेक्ट इस्तेमाल करें। जब डुप्लीकेट को उपलब्ध रहना हो, जैसे फ़िल्टर किया गया या ट्रैकिंग वाला वर्शन, तो कैननिकल टैग इस्तेमाल करें। दोनों मज़बूत संकेत हैं और एक जैसे इंटरनल लिंक व साफ़ साइटमैप के साथ सबसे अच्छा काम करते हैं।

क्या Google हमेशा मेरा कैननिकल टैग मानता है?

नहीं। Google rel="canonical" को आदेश नहीं, बल्कि एक मज़बूत संकेत मानता है। वह इसे रीडायरेक्ट, साइटमैप, इंटरनल लिंक, HTTPS और कॉन्टेंट की समानता से मिलाता है। जितने ज़्यादा संकेत मेल खाते हैं, उतनी ही संभावना है कि Google आपका पसंदीदा यूआरएल चुने।

यह स्टेटस हटने में कितना समय लगता है?

Google को प्रभावित यूआरएल फिर से क्रॉल करने होते हैं। जब आप Search Console में पुष्टि शुरू करते हैं, तो Google के मुताबिक इसमें आम तौर पर करीब दो हफ़्ते, कभी-कभी ज़्यादा, लगते हैं।

स्रोत: Search Console सहायता, पेज को इंडेक्स करने से जुड़ी रिपोर्ट; Google Search Central, कैननिकल यूआरएल कैसे तय करें।