সংক্ষিপ্ত উত্তর: «Crawled - currently not indexed» (ক্রল হয়েছে, এখনো ইনডেক্স হয়নি) মানে Googlebot পেজটি ভিজিট করেছে, কিন্তু Google অন্তত আপাতত সেটিকে তার ইনডেক্সে যোগ না করার সিদ্ধান্ত নিয়েছে। এটি কোনো শাস্তি বা কারিগরি ত্রুটি নয়। Google-এর মতে, পেজটি ভবিষ্যতে ইনডেক্স হতেও পারে, না-ও হতে পারে, এবং URL-টি ক্রলের জন্য আবার জমা দেওয়ার দরকার নেই। শুধু গুরুত্বপূর্ণ পেজগুলো ঠিক করুন: নিশ্চিত করুন পেজটি 200 কোড দেয় এবং এতে noindex নেই, কনটেন্টকে স্পষ্টভাবে কাজের এবং আপনার অন্য পেজগুলো থেকে আলাদা করুন, সাইটের শক্তিশালী পেজ থেকে লিংক দিন, সাইটম্যাপে যোগ করুন এবং Google-কে সময় দিন।
এই স্ট্যাটাসের মানে কী
এই স্ট্যাটাস Google Search Console-এর Page indexing (পেজ ইনডেক্সিং) রিপোর্টে, পেজ কেন ইনডেক্স হয়নি তার কারণের টেবিলে দেখা যায়। বাংলাভাষী ব্যবহারকারীদের জন্য Search Console-এর ইন্টারফেস সাধারণত ইংরেজিতে দেখায়, তাই আমরা নামগুলো স্ক্রিনে যেমন দেখেন তেমনই লিখছি। এটি আপনাকে দুটি কথা বলে:
- Crawled (ক্রল হয়েছে): Google URL-টি খুঁজে পেয়েছে এবং পেজটি সংগ্রহ করেছে। সমস্যা অ্যাক্সেসের নয়।
- Currently not indexed (এখনো ইনডেক্স হয়নি): পেজটি দেখার পর Google সেটি ইনডেক্সে না রাখার সিদ্ধান্ত নিয়েছে, তাই এটি সার্চ ফলাফলে দেখা যেতে পারে না।
Google প্রতিটি ক্রল করা পেজ ইনডেক্স করার প্রতিশ্রুতি দেয় না। তার ডকুমেন্টেশনে স্পষ্ট বলা আছে যে সব পেজ ইনডেক্সে ঢুকবে এমন কোনো নিশ্চয়তা নেই, আর ক্রলের অনুরোধ করলেও পেজটি সঙ্গে সঙ্গে, বা আদৌ, অন্তর্ভুক্ত হবে এমন গ্যারান্টি নেই। Google আরও বলে যে তার সিস্টেম উচ্চমানের ও কাজের কনটেন্ট দ্রুত অন্তর্ভুক্ত করাকে অগ্রাধিকার দেয়। এই বাক্যটিই সমস্যার সমাধানের সেরা সূত্র।
এটা কি আপনার সাইটের জন্য সমস্যা?
বেশিরভাগ ক্ষেত্রে না। Google-এর সহায়তা কেন্দ্র মনে করিয়ে দেয় যে বেশিরভাগ সাইটের অন্তত কয়েকটি পেজ ইনডেক্স হয় না, এবং লক্ষ্য হলো আপনার গুরুত্বপূর্ণ পেজগুলো ইনডেক্স করানো, প্রতিটি URL নয়। উদাহরণ URL-এর তালিকা খুলুন এবং দুই ভাগে ভাগ করুন:
- যে পেজ সার্চে দরকার নেই: সাইটের ভেতরের সার্চ ফলাফল, দুর্বল ট্যাগ বা আর্কাইভ পেজ, ফিড, পুরনো ক্যাম্পেইন পেজ, প্রায় খালি প্রোফাইল পেজ। এগুলো ইনডেক্সের বাইরে থাকলে সমস্যা নেই। আপনি এগুলো উপেক্ষা করতে, একত্র করতে বা ইচ্ছাকৃতভাবে বাদ দিতে
noindexযোগ করতে পারেন। - যে পেজ সার্চে দরকার: প্রোডাক্ট, সার্ভিস, লোকেশন ও ক্যাটাগরি পেজ, গাইড এবং ব্লগ পোস্ট। এগুলো ঠিক করা লাভজনক; আপনার ব্যবসার জন্য সবচেয়ে গুরুত্বপূর্ণগুলো দিয়ে শুরু করুন।
ছোট সাইটের জন্য টিপ: Google জানায়, আপনার সাইটে 500-এর কম পেজ থাকলে হয়তো এই রিপোর্টের দরকারই নেই। site:example.com/your-page দিয়ে একটি দ্রুত সার্চ বা URL Inspection টুল দেখিয়ে দেবে কোনো গুরুত্বপূর্ণ পেজ ইনডেক্সে আছে কি না।
Google কেন পেজ ক্রল করে কিন্তু ইনডেক্স করে না
Google প্রতিটি URL-এর সঠিক কারণ জানায় না। বাস্তবে এই কারণগুলো বারবার দেখা যায়:
- দুর্বল বা কম মূল্যের কনটেন্ট: ছোট পেজ, যা আপনার সাইটে বা অন্য কোথাও আগে থেকে থাকা তথ্যের সঙ্গে খুব সামান্যই যোগ করে।
- প্রায় ডুপ্লিকেট পেজ: এমন টেমপ্লেট যেখানে শুধু শহরের নাম, রং বা প্রোডাক্ট কোড বদলায়।
- দুর্বল ইন্টারনাল লিংক: পেজে শুধু সাইটম্যাপ বা একটি লুকানো লিংক দিয়ে পৌঁছানো যায়, তাই এটি গুরুত্বহীন মনে হয়।
- খালি দেখানো পেজ: «কোনো ফলাফল নেই» পেজ, তথ্য ছাড়া স্টক শেষ হওয়া প্রোডাক্ট, অথবা এমন কনটেন্ট যা শুধু JavaScript চলার পর দেখা যায় এবং Google-এর জন্য ঠিকমতো রেন্ডার হয় না।
- নতুন পেজ বা নতুন সাইট: Google জানায়, নতুন কনটেন্ট ইনডেক্স হতে কয়েক দিন লাগতে পারে। কিছু পেজ পরের ক্রলের পর নিজে থেকেই স্ট্যাটাস বদলায়।
ধাপে ধাপে সমাধান
1. আগে বর্তমান স্ট্যাটাস দেখুন
রিপোর্ট আপনার সাইটের আসল অবস্থার চেয়ে পিছিয়ে থাকতে পারে। URL-টি URL Inspection টুলে পেস্ট করুন এবং শেষ ক্রলের তারিখ দেখুন। পেজ যদি আগেই ইনডেক্সে থাকে, কাজ শেষ। না থাকলে Test live URL এবং তারপর View tested page-এ ক্লিক করে Google যে HTML ও স্ক্রিনশট পেয়েছে তা দেখুন। আপনার মূল কনটেন্ট সেখানে না থাকলে আগে রেন্ডারিং ঠিক করুন।
2. প্রতিটি পেজের জন্য কী করবেন ঠিক করুন
প্রতিটি প্রভাবিত URL-এর জন্য একটি কাজ বেছে নিন: উন্নত করুন (পেজটি র্যাংক পাওয়ার যোগ্য), আরও শক্তিশালী পেজের সঙ্গে একত্র করুন এবং পুরনো URL 301 দিয়ে রিডাইরেক্ট করুন, অথবা বাইরে রাখুন (noindex বা মুছে ফেলা)। অপ্রয়োজনীয় পেজ পরিষ্কার করলে গুরুত্বপূর্ণ পেজগুলো বেশি চোখে পড়ে।
3. কারিগরি বাধা বাদ দিন
«Crawled» মানে Google পেজে পৌঁছাতে পারে, তবুও মৌলিক বিষয়গুলো যাচাই করুন। পেজটিকে 200 স্ট্যাটাস কোড দিতে হবে, নিজের দিকে নির্দেশ করা canonical ট্যাগ থাকতে হবে, এবং HTML বা HTTP হেডারে কোথাও noindex থাকা চলবে না:
<!-- In the HTML <head> -->
<meta name="robots" content="noindex">
# In the HTTP response headers
X-Robots-Tag: noindexআমাদের ফ্রি noindex চেকার দিয়ে পেজ যাচাই করুন এবং কয়েক সেকেন্ডে দুটোই দেখুন। স্টেজিং সাইট থেকে ভুলে থেকে যাওয়া noindex SEO-তে সবচেয়ে সহজ জয়গুলোর একটি।
4. কনটেন্টকে ইনডেক্সের যোগ্য করুন
এই স্ট্যাটাসের জন্য এটাই সবচেয়ে গুরুত্বপূর্ণ ধাপ। Google-এ সার্চ করা একজন মানুষের চোখে পেজটি পড়ুন এবং নিজেকে জিজ্ঞেস করুন:
- এটি কি নির্দিষ্ট তথ্য, উদাহরণ বা ধাপসহ সার্চকারীর প্রশ্নের পুরো উত্তর দেয়?
- এটি কি আপনার অন্য পেজগুলো থেকে আলাদা, নাকি নতুন শিরোনামে একই লেখা আবার বলে?
- এর কি স্পষ্ট টাইটেল, বর্ণনামূলক H1 এবং যৌক্তিক H2 অংশ আছে?
- একজন ভিজিটর কি এটিকে বিশ্বাস করবেন? দেখান কে লিখেছেন, কবে আপডেট হয়েছে এবং তথ্য কোথা থেকে এসেছে।
লক্ষ্য শব্দ বাড়ানো নয়। একটি প্রশ্নের ভালো উত্তর দেওয়া 600 শব্দের কেন্দ্রীভূত পেজ, অপ্রয়োজনীয় কথায় ভরা 2,000 শব্দের পেজের চেয়ে ভালো। প্রায় ডুপ্লিকেট টেমপ্লেটে সত্যিই আলাদা তথ্য যোগ করুন (স্থানীয় তথ্য, স্পেসিফিকেশন, ছবি, সাধারণ প্রশ্ন) অথবা সব ভ্যারিয়েন্ট একটি পেজে একত্র করুন।
5. যে পেজগুলোকে Google আগে থেকেই মূল্য দেয় সেখান থেকে লিংক দিন
ইন্টারনাল লিংক Google-কে পেজ খুঁজে পেতে এবং এর গুরুত্ব বুঝতে সাহায্য করে। প্রাসঙ্গিক ও ইনডেক্স হওয়া কোনো পেজ (হোম পেজ, ক্যাটাগরি পেজ বা জনপ্রিয় গাইড) থেকে গন্তব্য বোঝায় এমন লিংক টেক্সট দিয়ে লেখার ভেতরে লিংক যোগ করুন। ইন্টারনাল লিংক চেকার দিয়ে দেখুন একটি পেজে কতগুলো লিংক আছে এবং খুব কম লিংক থাকা পেজগুলো খুঁজে বের করুন।
6. সাইটম্যাপ পরিষ্কার রাখুন
শুধু এমন canonical ও ইনডেক্সযোগ্য URL রাখুন যেগুলো 200 দেয়, এবং lastmod সঠিক রাখুন যাতে কনটেন্ট সত্যিই বদলালে তবেই এটি বদলায়:
<url>
<loc>https://example.com/guides/green-dresses</loc>
<lastmod>2026-11-03</lastmod>
</url>রিডাইরেক্ট, 404 ত্রুটি এবং প্যারামিটারযুক্ত URL-এ ভরা সাইটম্যাপ পরস্পরবিরোধী সংকেত পাঠায়। আপনার সাইটম্যাপ সাইটম্যাপ চেকার দিয়ে যাচাই করুন।
7. একবার ইনডেক্সিংয়ের অনুরোধ করুন, তারপর ধৈর্য ধরুন
সত্যিকারের উন্নতির পর সবচেয়ে গুরুত্বপূর্ণ পেজগুলোর জন্য URL Inspection টুলে Request indexing ব্যবহার করুন। Google জানায়, আলাদা আলাদা অনুরোধের একটি কোটা আছে এবং একই URL-এর জন্য বারবার অনুরোধ করলে ক্রল দ্রুত হয় না। অনেক URL-এর জন্য সাইটম্যাপ জমা দিন। ক্রল হতে কয়েক দিন থেকে কয়েক সপ্তাহ লাগতে পারে।
Crawled আর Discovered-এর পার্থক্য
দুটি স্ট্যাটাস শুনতে একরকম হলেও ভিন্ন সমস্যার দিকে ইঙ্গিত করে। Crawled - currently not indexed মানে Google পেজটি সংগ্রহ করেছে এবং ইনডেক্স না করার সিদ্ধান্ত নিয়েছে; সাধারণত বিষয়টি কনটেন্ট ও তার মূল্য নিয়ে। Discovered - currently not indexed (আবিষ্কৃত, এখনো ইনডেক্স হয়নি) মানে Google URL-টির কথা জানে কিন্তু এখনো ক্রল করেনি। Google ব্যাখ্যা করে, সাধারণত সে URL-টি ক্রল করতে চেয়েছিল কিন্তু আশঙ্কা করেছিল এতে সাইটের ওপর অতিরিক্ত চাপ পড়বে, তাই ক্রল পিছিয়ে দেওয়া হয়েছে। আবিষ্কৃত পেজের সাধারণত দ্রুত সার্ভার, কম মূল্যের URL কমানো এবং শক্তিশালী ইন্টারনাল লিংক দরকার হয়।
যে ভুলগুলো এড়াবেন
- পেজে কোনো পরিবর্তন না করে বারবার Request indexing-এ ক্লিক করা।
- কম মূল্যের পেজ
robots.txt-এ ব্লক করা। এতে ক্রল বন্ধ হয়, ইনডেক্সিং নয়, এবং যেকোনোnoindexট্যাগ Google-এর কাছ থেকে লুকিয়ে যায়। - পেজ লম্বা করতে সাধারণ বা স্বয়ংক্রিয়ভাবে তৈরি লেখা দিয়ে ভরানো।
- প্রতিটি কিওয়ার্ড বা শহরের জন্য প্রায় একই রকম অনেক পেজ তৈরি করা।
- 100% URL ইনডেক্স হবে বলে আশা করা। যে পেজগুলো ভিজিটর ও গ্রাহক আনে সেগুলোর দিকে মনোযোগ দিন।
Page Behavior দিয়ে আপনার পেজের ফ্রি অডিট করুন
Google যে পেজগুলো এড়িয়ে যায়, সেগুলোতে প্রায়ই ঠিক করা যায় এমন অন-পেজ সমস্যা থাকে: দুর্বল টাইটেল, মেটা ডেসক্রিপশন না থাকা, এলোমেলো হেডিং কাঠামো, কম লেখা, কম ইন্টারনাল লিংক, ধীর লোডিং বা ভুলে যাওয়া noindex। Page Behavior-এর অডিট এগুলো সব যাচাই করে এবং প্রতিটি সমাধান সহজ ভাষায় ব্যাখ্যা করে, সবচেয়ে বড় সমস্যা দিয়ে শুরু করে।
যে পেজটি সবচেয়ে বেশি ইনডেক্স করাতে চান সেটি দিয়ে শুরু করুন: ফ্রি SEO অডিট চালান, কোনো অ্যাকাউন্ট লাগবে না।
আপনার ফ্রি Page Behavior অ্যাকাউন্ট তৈরি করুন অডিট সংরক্ষণ করতে এবং নিয়মিত পুনঃঅডিট নির্ধারণ করতে, যা অবনতি সময়মতো ধরে ফেলবে। কোনো ক্রেডিট কার্ড নয়, কোনো ট্রায়াল নয়, কোনো লুকানো শর্ত নয়।
সাধারণ প্রশ্ন
এই স্ট্যাটাস কি Google-এর শাস্তি?
না। এটি ম্যানুয়াল অ্যাকশন বা ত্রুটি কোনোটাই নয়। Google পেজটি ক্রল করেছে এবং আপাতত ইনডেক্স না করার সিদ্ধান্ত নিয়েছে। ম্যানুয়াল অ্যাকশন Search Console-এর আলাদা একটি রিপোর্টে দেখা যায়।
ঠিক করার পর পেজ ইনডেক্স হতে কত সময় লাগে?
নির্দিষ্ট কোনো সময় নেই। Google বলে, অনুরোধের পর ক্রল হতে কয়েক দিন থেকে কয়েক সপ্তাহ লাগতে পারে, এবং অনুরোধ ইনডেক্সিংয়ের নিশ্চয়তা দেয় না। পেজ উন্নত করুন, একবার অনুরোধ করুন এবং পরে URL Inspection টুলে আবার দেখুন।
ক্রল হওয়া কিন্তু ইনডেক্স না হওয়া পেজ কি মুছে ফেলা উচিত?
শুধু তখনই, যদি সেগুলো ভিজিটরদের কোনো কাজে না আসে। পেজে কাজের কনটেন্ট থাকলে সেটি উন্নত করুন বা একত্র করুন। সত্যিই অকেজো হলে মুছে ফেলা (বা noindex যোগ করা) আপনার সাইটকে র্যাংক পাওয়ার যোগ্য পেজগুলোর দিকে মনোযোগ দিতে সাহায্য করে।
ইনডেক্স হওয়া পেজ কি আবার এই স্ট্যাটাসে যেতে পারে?
হ্যাঁ। ইনডেক্সিং স্থায়ী নয়। Google সময়ের সঙ্গে পেজগুলো আবার ক্রল করে এবং পুনর্মূল্যায়নের সময় কোনো পেজ ইনডেক্স থেকে সরিয়ে দিতে পারে। গুরুত্বপূর্ণ পেজগুলো হালনাগাদ, কাজের এবং ভালোভাবে লিংক করা রাখাই সেরা সুরক্ষা।
Search Console-এ সমাধান যাচাই করা কি জরুরি?
করতে পারেন, তবে বাধ্যতামূলক নয়। Google আপনার পেজগুলো আবার ক্রল করার সময় রিপোর্ট আপডেট করে। যাচাই মূলত একসঙ্গে অনেক URL-এর অগ্রগতি ট্র্যাক করতে সাহায্য করে।
সূত্র (ইংরেজিতে): Search Console Help, Page indexing report; Google Search Central, Ask Google to recrawl your URLs।
