প্রতিটি সাইটের পৃষ্ঠাগুলি নিয়মিত অনুসন্ধান রোবট দ্বারা ক্রল করা হয়, যা সাইটের তথ্য প্রক্রিয়া করে যাতে এটি অনুসন্ধান ইঞ্জিনগুলির ব্যবহারকারীদের অনুরোধে উপলব্ধ। অনুসন্ধান ইঞ্জিনগুলি থেকে দর্শনার্থীদের দর্শন সাইট ট্র্যাফিকের উপর ইতিবাচক প্রভাব ফেলে এবং সংস্থানটির বিকাশকে উদ্দীপিত করে। তবে, যদি সাইটে পৃষ্ঠাগুলি থাকে, যে তথ্যের উপর ইন্টারনেট দর্শকের উদ্দেশ্যে নয় (উদাহরণস্বরূপ, ব্যবহারকারীদের ব্যক্তিগত পৃষ্ঠাগুলি বা নিবন্ধকরণ পৃষ্ঠা), তবে অনুসন্ধান ইঞ্জিনগুলি থেকে এই জাতীয় পৃষ্ঠাগুলিতে রূপান্তর প্রয়োজন হয় না এবং এটি ইনডেক্সিং থেকে এই তথ্য নিষিদ্ধ করা ভাল।
প্রয়োজনীয়
- - আপনার নিজস্ব ওয়েবসাইট আছে
- - পৃষ্ঠাগুলির লিঙ্কগুলি জানতে, যার সূচীকরণ নিষিদ্ধ করা উচিত।
- - এইচটিএমএল এর কমপক্ষে প্রাথমিক জ্ঞান থাকতে হবে
নির্দেশনা
ধাপ 1
সাইটের নির্দিষ্ট পৃষ্ঠাগুলি সূচীকরণ থেকে অনুসন্ধানের রোবটকে রোধ করতে আপনার যদি রোবট.টিএসটিএইচ ফাইলটি ইতিমধ্যে আপনার সাইটে থাকে তবে এই ফাইলটি তৈরি করতে হবে।
ধাপ ২
যদি robots.txt ফাইলটি ইতিমধ্যে সাইটে আপলোড করা হয়েছে এবং রিসোর্স কন্ট্রোল প্যানেল থেকে সরাসরি এই ফাইলটি সম্পাদনা করা সম্ভব হয়, তবে সম্পাদনা করার জন্য ওয়েব পরিষেবাদির মাধ্যমে robots.txt খুলুন।
ধাপ 3
যদি কন্ট্রোল প্যানেল থেকে সরাসরি পছন্দসই ফাইলটিতে পরিবর্তন করার কোনও উপায় না থাকে তবে এই ফাইলটির লিঙ্কটিতে ক্লিক করে একটি ব্রাউজারে robots.txt খুলুন। পৃষ্ঠাগুলি থেকে সমস্ত ডেটা অনুলিপি করুন যা এটিকে নোটপ্যাডের শীটটিতে পেস্ট করে।
পদক্ষেপ 4
সাইটে যদি রোবটসটিটিএসটি না থাকে, তবে নতুন নথিতে "নোটপ্যাড" প্রোগ্রামটি খুলুন, যার প্রয়োজনীয় কোডটি আপনাকে প্রবেশ করতে হবে।
পদক্ষেপ 5
পাঠ্য নথির ফাঁকা শীটে, প্রথম প্রয়োজনীয় লাইনটি লিখুন:
ব্যবহারিক দূত: *
পদক্ষেপ 6
তারপরে এন্টার কী টিপে পরবর্তী লাইনে যান এবং নীচের কোডটি টাইপ করুন:
অস্বীকার করুন: / সূচক / পৃষ্ঠা3ডিজালো: কোনও সূচী নির্দেশ করে না এবং / সূচক / পৃষ্ঠা 3 একটি পৃষ্ঠার লিঙ্ক যা সূচকের প্রয়োজন হয় না। লিঙ্ক / সূচক / পৃষ্ঠা 3 এর পরিবর্তে, আপনার সাইটের পৃষ্ঠায় একটি লিঙ্ক প্রবেশ করান যা আপনি রোবট দ্বারা প্রক্রিয়াজাতকরণের জন্য ব্লক করতে চান।
পদক্ষেপ 7
নোট করুন যে লিঙ্কের শুরুতে ডোমেনের নামটি নিজেই অনুপস্থিত; কোনও সাইট ক্রল করার সময়, একটি অনুসন্ধান রোবট স্বয়ংক্রিয়ভাবে এই জাতীয় লিঙ্কগুলিতে একটি ডোমেন নাম tsোকায়। অতএব, এইভাবে প্রয়োজনীয় পৃষ্ঠাগুলিতে লিঙ্কগুলি লিখুন।
পদক্ষেপ 8
বাতিল করার পরে: আপনি কেবল কোনও নির্দিষ্ট পৃষ্ঠার লিঙ্কটিই রাখতে পারবেন না, তবে সাইটের কোনও বিভাগ বা ডিরেক্টরিতে একটি লিঙ্ক রাখতে পারেন। একইভাবে, আপনি সাইটের কাঙ্ক্ষিত অংশের সূচি নিষিদ্ধ করতে পারেন।
পদক্ষেপ 9
যদি উত্সের বিভিন্ন বিভাগের রোবট দ্বারা প্রক্রিয়াজাতকরণ নিষিদ্ধ করার প্রয়োজন হয়, তবে প্রতিটি বিভাগ বা পৃষ্ঠায় একটি নতুন লাইনে একটি লিঙ্ক লিখুন, যার শুরুতে অস্বীকৃতি: এন্ট্রি রাখতে ভুলবেন না।
পদক্ষেপ 10
Robots.txt পরিবর্তন সম্পূর্ণ করতে, নিয়ন্ত্রণ প্যানেলে ফাইলটি সম্পাদনা করার সময় "সংরক্ষণ করুন" বোতামটি ক্লিক করুন, বা রোবটস.টিএসটিএস্ট নামে এনট্রি সহ একটি পাঠ্য নথি সংরক্ষণ করুন এবং এই ফাইলটি সাইটে আপলোড করুন।
