পুরো ওয়েবসাইটের স্ক্যান ও নমুনা
ক্রল নির্ধারণ করুন, পরীক্ষার পরিধি বুঝুন এবং ফলাফল অনুযায়ী উৎস পৃষ্ঠা ঠিক করুন।
পরিধি নির্ধারণ করুন#
ড্যাশবোর্ডে পুরো ওয়েবসাইটের কাজের স্থান খুলুন, শুরুর ওয়েবসাইটের ঠিকানা দিন এবং পৃষ্ঠার সীমা বেছে নিন। শুরুর URL হিসেবে সাধারণ HTML পৃষ্ঠা ব্যবহার করুন। প্রধান অংশগুলো যুক্ত করায় মূল পৃষ্ঠা প্রায়ই উপযোগী, তবে অন্য কেন্দ্রীয় পৃষ্ঠাও আপনার পরীক্ষার জন্য মানানসই হতে পারে।
ক্রল অভ্যন্তরীণ লিংক ও সমর্থিত সাইটম্যাপ এন্ট্রি দিয়ে শুরুর একই অরিজিনের পৃষ্ঠা খুঁজে পায়। ওই পৃষ্ঠায় পাওয়া বাইরের গন্তব্য পরীক্ষা করে, কিন্তু বাইরের ওয়েবসাইটকে অতিরিক্ত উৎস সাইট হিসেবে ক্রল করে না। উপফোল্ডার থেকে শুরু করলে শুধু সেই উপফোল্ডারে কঠোর সীমা তৈরি হয় না।
- পুরো ওয়েবসাইট স্ক্যান করুন নির্বাচন করুন অথবা ড্যাশবোর্ডে পুরো ওয়েবসাইটের দৃশ্য খুলুন।
- শুরুর HTTP বা HTTPS পৃষ্ঠা দিন।
- উপযুক্ত পৃষ্ঠার সীমা বেছে নিন।
- robots.txt মেনে চলুন ও অনুরোধের সেটিংস দেখুন।
- স্ক্যান শুরু করুন এবং পৃষ্ঠা খোঁজা ও গন্তব্য পরীক্ষা শেষ হতে দিন।
- ফলাফলের বিভাগের সঙ্গে পরীক্ষার পরিধি দেখুন।
পৃষ্ঠার সীমা ও অগ্রগতি বুঝুন#
পৃষ্ঠার সীমা একটি ক্রলে প্রক্রিয়াকৃত HTML পৃষ্ঠার সংখ্যা সীমিত করে, লিংকের সংখ্যা নয়। একটি উৎস পৃষ্ঠায় অনেক গন্তব্য থাকতে পারে। সশুল্ক পরিকল্পনায় প্রতিটি স্ক্যানে সর্বোচ্চ 10,000 পৃষ্ঠা ও অসংখ্যবার স্ক্যান সমর্থিত; প্রাথমিক পছন্দ 1,000 পৃষ্ঠা।
অগ্রগতিতে পৃষ্ঠা খোঁজা ও গন্তব্য পরীক্ষা থাকে। সীমায় পৌঁছালে ওয়েবসাইটের কিছু অংশ অনাবিষ্কৃত থাকতে পারে। ড্যাশবোর্ড খোলা রাখুন এবং প্রয়োজনে বাতিল করতে থামানোর নিয়ন্ত্রণ ব্যবহার করুন। আপনার নির্ধারিত পরিধি পরীক্ষা হয়েছে বলার আগে সম্পন্ন পরীক্ষা পর্যালোচনা করুন।
robots.txt মেনে চলুন#
robots.txt মেনে চলুন স্বাভাবিকভাবে চালু থাকে। নিষিদ্ধ উৎস পৃষ্ঠা এড়িয়ে যাওয়া হয় এবং নিষিদ্ধ শুরুর পৃষ্ঠায় স্ক্যান শুরু হয় না। বাদ দেওয়া পৃষ্ঠা সফলভাবে পরীক্ষা হয়নি।
নিজের ওয়েবসাইটে সেটিংস বদলানোর আগে নিয়ম দেখুন। প্রশাসনের অংশ ইচ্ছাকৃতভাবে বাদ থাকতে পারে। আপনার নিয়ন্ত্রণে নেই এমন ওয়েবসাইটে সুরক্ষা চালু রাখুন। ব্রাউজারের পরীক্ষা Googlebot ঠিক কী ক্রল বা সূচিভুক্ত করতে পারে তা বলে না।
বিনামূল্যের নমুনা#
বিনামূল্যের নমুনা সর্বোচ্চ 25টি পৃষ্ঠা ক্রল করে এবং প্রাথমিক দৃশ্যে প্রথম 10টি লিংকের ফলাফল রাখে। শুধু সর্বশেষ নমুনা প্রতিবেদন নমুনার ইতিহাস এন্ট্রি হিসেবে থাকে। নতুন নমুনা ওই এন্ট্রির জায়গা নেয়।
ওয়েবসাইটের কাঠামোতেও সীমিত নমুনা দেখা যায়। লাইসেন্স সক্রিয় করলে পুরোনো নমুনায় বাদ পড়া ফলাফল তৈরি হয় না। নির্বাচিত সীমার মধ্যে পূর্ণ ফলাফলের জন্য নতুন সশুল্ক ক্রল চালান।
সম্পাদনার আগে পরীক্ষার পরিধি দেখুন#
পরীক্ষা করা পৃষ্ঠার সঙ্গে যে অংশ দেখতে চেয়েছিলেন তার তুলনা করুন। robots-এর নিয়ম, সীমা, খোলা যায় না এমন পৃষ্ঠা বা JavaScript দিয়ে তৈরি নেভিগেশনের কারণে পরীক্ষা অসম্পূর্ণ হতে পারে। পুরো ওয়েবসাইটের ক্রল প্রতিটি ব্রাউজারের ক্রিয়া ঘটিয়ে দেখার বদলে আনা HTML পড়ে।
রেফারেন্স খুঁজতে উৎস পৃষ্ঠা ও লিংকের লেখা ব্যবহার করুন। একসঙ্গে ব্যবহৃত উপাদানে টেমপ্লেটের পুনরাবৃত্ত সমস্যা ঠিক করে তুলনাযোগ্য সেটিংস দিয়ে আবার চালান। সংশ্লিষ্ট লিংক ও পরীক্ষার পরিধি যাচাই করা হলেই কম মোট ত্রুটি উপযোগী তথ্য দেয়।