কীভাবে কোনও আপডেটেড বা নতুন রোবটস.টি.এস.টি ফাইল পুনরায় জমা করবেন

রোবট txt

আমাদের সংস্থা হ্যান্ডলগুলি জৈব অনুসন্ধান পরামর্শ শিল্পে বেশ কয়েকটি সাস বিক্রেতার জন্য for আমরা সম্প্রতি যে ক্লায়েন্টের সাথে কাজ শুরু করেছি সে একটি মোটামুটি মান অনুশীলন করেছিল, একটি সাবডোমেইনে তাদের অ্যাপ্লিকেশন রেখে এবং তাদের ব্রোশিওর সাইটটি মূল ডোমেনে নিয়ে যায়। এটি একটি স্ট্যান্ডার্ড অনুশীলন যেহেতু এটি আপনার প্রযোজনা দল এবং আপনার বিপণন দলকে অন্যের উপর নির্ভরতা ছাড়াই প্রয়োজন অনুসারে আপডেট করতে সক্ষম করে।

তাদের জৈব অনুসন্ধান স্বাস্থ্য বিশ্লেষণের প্রথম পদক্ষেপ হিসাবে, আমরা ওয়েবমাস্টারগুলিতে ব্রোশিওর এবং অ্যাপ্লিকেশন ডোমেন উভয়ই নিবন্ধভুক্ত করেছি। আমরা তখনই একটি তাত্ক্ষণিক সমস্যা চিহ্নিত করেছি identified অ্যাপ্লিকেশন পৃষ্ঠাগুলির সমস্ত অনুসন্ধান ইঞ্জিন দ্বারা সূচিবদ্ধ হতে বাধা দেওয়া হয়েছিল। আমরা ওয়েবমাস্টারগুলিতে তাদের রোবটস.টেক্সট এন্ট্রি নেভিগেট করেছি এবং তাত্ক্ষণিকভাবে সমস্যাটি শনাক্ত করেছি।

স্থানান্তরের প্রস্তুতি নেওয়ার সময়, তাদের বিকাশকারী দলটি অ্যাপ্লিকেশন সাবডোমেনটিকে অনুসন্ধানের দ্বারা সূচীকরণ করতে চায়নি, তাই তারা অনুসন্ধান ইঞ্জিনগুলিতে অ্যাক্সেসকে অস্বীকার করেছিল। Robots.txt ফাইলটি এমন একটি ফাইল যা আপনার সাইটের মূলের মধ্যে পাওয়া যায় - yourdomain.com/robots.txt - এটি সার্চ ইঞ্জিনকে তাদের সাইট ক্রল করা উচিত কিনা তা জানতে দেয়। আপনি পুরো সাইট বা নির্দিষ্ট পাথগুলিতে ইনডেক্সিংকে অনুমতি দেওয়ার বা অনুমতি দিতে নিয়ম লিখতে পারেন। আপনি নিজের সাইটম্যাপ ফাইলটি নির্দিষ্ট করতে একটি লাইনও যুক্ত করতে পারেন।

The Olymp Trade প্লার্টফর্মে ৩ টি উপায়ে প্রবেশ করা যায়। প্রথমত রয়েছে ওয়েব ভার্শন যাতে আপনি প্রধান ওয়েবসাইটের মাধ্যমে প্রবেশ করতে পারবেন। দ্বিতয়ত রয়েছে, উইন্ডোজ এবং ম্যাক উভয়ের জন্যেই ডেস্কটপ অ্যাপলিকেশন। এই অ্যাপটিতে রয়েছে অতিরিক্ত কিছু ফিচার যা আপনি ওয়েব ভার্শনে পাবেন না। এরপরে রয়েছে Olymp Trade এর এন্ড্রয়েড এবং অ্যাপল মোবাইল অ্যাপ। robots.txt ফাইলের নিম্নলিখিত প্রবেশপথ ছিল যা সাইটটিকে ক্রল হওয়া এবং অনুসন্ধানের ফলাফলের র‌্যাঙ্কিংয়ে সূচিবদ্ধ হতে বাধা দিয়েছে:

ব্যবহারকারী এজেন্ট: * নিষিদ্ধ: /

এটি নিম্নলিখিত হিসাবে লেখা উচিত ছিল:

ব্যবহারকারী-এজেন্ট: * অনুমতি দিন: /

পরেরটি সাইট ক্রল করে এমন কোনও সার্চ ইঞ্জিনকে অনুমতি দেয় যে তারা সাইটের মধ্যে যে কোনও ডিরেক্টরি বা ফাইল অ্যাক্সেস করতে পারে।

দুর্দান্ত ... তাই এখন যে robots.txt এর ফাইল নিখুঁত তবে গুগল কীভাবে জানে এবং তারা কখন আবার সাইটটি পরীক্ষা করবে? ঠিক আছে, আপনি সম্পূর্ণরূপে গুগলকে অনুরোধ করতে পারেন যে গুগল আপনার রোবটস টেক্সটটি পরীক্ষা করে, তবে এটি খুব স্বজ্ঞাত নয়।

নেভিগেট করুন গুগল অনুসন্ধান কনসোল অনুসন্ধান কনসোল থেকে ক্রল> robots.txt পরীক্ষক। আপনি পরীক্ষকের মধ্যে সর্বাধিক সরে যাওয়া রোবট.টেক্সট ফাইলের সামগ্রীগুলি দেখতে পাবেন। আপনি যদি আপনার রোবট.টিএসটিএল ফাইলটি পুনরায় জমা দিতে চান তবে জমা দিন ক্লিক করুন এবং কয়েকটি পপআপ একটি বিকল্প আসবে।

পুনরায় জমা দিন robots.txt

চূড়ান্ত বিকল্প হল গুগল আপডেট করতে বলুন। সেই বিকল্পের পাশের নীল জমা দিন বোতামটি ক্লিক করুন এবং তারপরে আবার নেভিগেট করুন ক্রল> robots.txt পরীক্ষক পৃষ্ঠাটি পুনরায় লোড করার জন্য মেনু বিকল্প। আপনাকে এখন ডেট স্ট্যাম্পের সাথে আপডেট করা রোবটস.টেক্সট ফাইল দেখতে হবে যা দেখায় যে এটি আবার ক্রল হয়েছিল was

আপনি যদি কোনও আপডেট হওয়া সংস্করণ না দেখেন তবে আপনি জমা দিতে এবং নির্বাচন করতে ক্লিক করতে পারেন আপলোড করা সংস্করণ দেখুন আপনার আসল রোবটস.টি.এস.টি. ফাইলে নেভিগেট করতে। অনেক সিস্টেম এই ফাইলটিকে ক্যাশে করবে। আসলে, আইআইএস তাদের ব্যবহারকারী ইন্টারফেসের মাধ্যমে প্রবেশ করা বিধিগুলির ভিত্তিতে এই ফাইলটি গতিশীলভাবে উত্পন্ন করে। আপনাকে সম্ভবত নতুন নিয়ম আপডেট করতে হবে এবং একটি নতুন রোবটস.টিএসটিএস ফাইল প্রকাশ করতে ক্যাশে রিফ্রেশ করতে হবে।

রোবট-টেক্সট-পরীক্ষক

আপনি কি মনে করেন?

এই সাইট স্প্যাম কমাতে Akismet ব্যবহার করে। আপনার ডেটা প্রক্রিয়া করা হয় তা জানুন.