সার্চ ইঞ্জিন কি এবং কিভাবে সার্চ ইঞ্জিন কাজ করে?

সাধারণত অনলাইন হতে তথ্য সংগ্রহ করার জন্য প্রত্যেকটি সার্চ ইঞ্জিনের এক ধরনের সফটওয়ার থাকে। এই সফটওয়ারকে সার্চ ইঞ্জিনের ভাষায় ওয়েব ক্রলার বা রোবট বা বট বলা হয়। একটি ওয়েব ক্রলার বা বট এর প্রধান কাজ হচ্ছে অনলাইনে যত ওয়েবসাইট আছে সেগুলোতে ঘুরে ঘুরে বাড়ানো এবং বিভিন্ন ওয়েবসাইট/ব্লগ হতে তথ্য সংগ্রহ করে নিয়ে সার্চ ইঞ্জিনের তথ্য ভান্ডারে মজুদ রাখা। যখন কেউ কোন তথ্য খুঁজে পাওয়ার জন্য সার্চ ইঞ্জিনে সার্চ করে, তখন সার্চ ইঞ্জিন তার ডাটাবেজ চেক করে এবং সার্চ ইঞ্জিনের ডাটাবেজ থেকে আমাদের সামনে ফলাফল প্রদর্শন করে।

আসলে সার্চ ইঞ্জিনের ভাষায় এ সব বিষয় ব্যাখ্যা করলে, আমার মত যারা আছেন, তারা এসব বিষয় সহজে বুঝতে পারবেন না। সেই জন্য সার্চ ইঞ্জিনের ভাষায় বিশ্লেষণ না করে সকলের বুঝার সুবিধার্তে বিষয়টি সহজভাবে উপস্থাপন করার চেষ্টা করছি। যেমন-

এগুলো পড়তে পারেন-

• SEO কি: সার্চ ইঞ্জিন অপটিমাইজেশন কি এবং কিভাবে SEO শিখবেন?
• ইউটিউব এসইও: কিভাবে ইউটিউব ভিডিও এসইও করে ভিডিও এর ভিউ বাড়াবেন?
• কিওয়ার্ড রিসার্চ কি? কিওয়ার্ড রিসার্চ কিভাবে করতে হয়?
• Backlinks তৈরি: Backlink কি এবং কিভাবে Backlinks পাওয়া যায়?
• BlogSpot এসইও : BlogSpot ব্লগের কয়েকটি গুরুত্বপূর্ণ SEO টিপস!

আপনার হাতের নাগালের ডেস্কটপ বা ল্যাপটপ বা মোবাইলের হার্ড ডিস্কে যখন কোন ফাইল বা গান রাখেন তখন খুব সহজে এটি পেয়ে যান, কিন্তু ইন্টারনেট হতে যে তথ্যগুলো আপনি দেখতে পান সেগুলোত আপনার কম্পিউটার বা মোবাইলের হার্ড ডিস্কে থাকে না। তাহলে প্রশ্ন হচ্ছে সেগুলো কোথা থেকে কিভাবে আসে? নিচে আমি আপনাকে একটি উদাহরনের মাধ্যমে বিষয়টি পরিষ্কার করছি।

উদাহরণঃ ধরুন আপনার কম্পিউটারের হার্ড ডিস্কটি কম্পিউটারের সাথে সংযুক্ত না রেখে অন্য কোথাও রেখে দিলেন। তাহলে আপনার ঐ হার্ড ডিস্কের ফাইল বা গানগুলো কিভাবে দেখবেন? এই কাজটি করার জন্য প্রয়োজন হবে আপনার ঐ হার্ড ডিস্কটি বিশেষ প্রযুক্তির মাধ্যমে অর্থাৎ নেটওয়ার্ক সার্ভার তৈরি করে ইন্টারনেটের সাথে কানেক্ট করা।

কেবল তখনই আপনি হার্ড ডিস্কটি আপনার কম্পিউটারের সাথে সংযুক্ত না করেও ঐ ফাইলগুলো দেখতে পাবেন। ঠিক তেমনি প্রত্যেকটি সার্চ ইঞ্জিনের এ ধরণের বিশাল বিশাল হার্ড ডিস্কের সমন্বয়ে তৈরি করা সার্ভার রয়েছে। যেগুলোতে প্রত্যেকটি সার্চ ইঞ্জিন ইন্টারনেটের সকল তথ্য তাদের ঐ হার্ড ডিস্কে মজুদ করে রাখে এবং সেখান থেকেই সাবার সামনে সার্চ কোয়ারী অনুযায়ী তথ্য প্রদান করে। এখন আপনার মনে হয়ত আরেকটি প্রশ্ন জাগবে যে, কিভাবে সার্চ ইঞ্জিন এসব তথ্য সংগ্রহ করে?

কিভাবে সার্চ ইঞ্জিন তথ্য সংগ্রহ করে?

আপনাদের মধ্যে যারা আমার মত কম্পিউটার ও ইন্টারনেট সম্পর্কে কম বুঝেন, তারা নরমালি ভেবে থাকেন যে, যখন গুগলে কোন কিছু লিখে সার্চ করা হয় তখন গুগল তাদের তৈরি করা তথ্য হতে আপনাকে বিভিন্ন তথ্য দেখায়। আসলে গুগল আমাদেরকে যেসব তথ্য দেখায় সেটির একটিও তাদের তৈরি নয়। আপনি হয়ত এ কথাটি শুনার পর অবাক হচ্ছেন! এখানে অবাক হওয়ার কিছুই নেই। এ বিষয়টি আমি আপনাদেরকে আরো সহজভাবে বুঝানোর চেষ্টা করছি।

বর্তমানে এমন কিছু নেই যেটি গুগলে সার্চ করলে পাওয়া যাবে না। একটি পিপড়া থেকে শুরু করে মহাকাশ গবেষনার মত কঠিন ও জঠিল বিষয়ে গুগলে সার্চ দিলে গুগল আপনাকে মুহুর্তে তথ্য দিয়ে দেবে। মোট কথা গুগলের কাছে নেই বলতে কোনকিছু নেই।

এগুলো পড়তে পারেন-

• কিভাবে একটি ব্লগ/ওয়েবসাইট গুগল সার্চ ইঞ্জিনে সাবমিট করতে হয়?
• অফ পেজ এসইও: কমপ্লিট গাইডলাইন!
• কিভাবে ব্লগে Google Analytics যুক্ত করতে হয়?

এখন আপনি ভেবে দেখুন, একটি কোম্পানির পক্ষে এত তথ্য তৈরি করা সম্ভব কি না? আপনি বিষয়টি ভালোভাবে চিন্তা করলে অবশ্যই বুঝতে পারবেন। একটি কোম্পানি যত বড় হক না কেন, এত তথ্য তৈরি করা কোন কোম্পানির পক্ষে কোন দিন সম্ভব হবে না। এখানে আপনার মনে আরো খটকা তৈরি হচ্ছে। তাহলে গুগল কিভাবে আমাদেরকে এতসব তথ্য দেখায়।

আপনি এটা নিশ্চয় জানেন যে, অনলাইনে বর্তমানে কোটি কোটি ওয়েবসাইট ও ব্লগ রয়েছে। প্রতিদিন লক্ষ লক্ষ নতুন ওয়েবসাইট বাড়ছে। এ মহাবিশ্বে যত মানুষ রয়েছে, তারাই এসব ব্লগ ও ওয়েবসাইট তৈরি করছে। প্রত্যেকটি ওয়েবসাইটের মালিক তার জ্ঞান ও অভীজ্ঞতা নিজ নিজ ওয়েবসাইটে লিখছে। আমার ব্লগটিও কোটি কোটি ওয়েবসাইটের মধ্যে একটি।

এখানে সার্চ ইঞ্জিন বা গুগল সার্চ ইঞ্জিন যেটা করছে সেটা হচ্ছে যে, এক ধরনের ওয়েব সফটওয়ার বা ক্রলার বা বট এর সাহায্যে পুরো বিশ্বের কোটি কোটি ওয়েবসাইটের তথ্য তাদের তথ্য ভান্ডারে বা ওয়েব সার্ভারে জমা করে নিচ্ছে। পরবর্তীতে আপনি আমি যখন গুগল সার্চ ইঞ্জিনে বা অন্য কোন সার্চ ইঞ্জিনে কোন কিছু লিখে সার্চ করে তখন সার্চ ইঞ্জিন তাদের তথ্য ভান্ডারে মজুদ রাখা তথ্য হতে যেটি সবচাইতে ভালো সেটি আমাদের সামনে ধারাবাকিভাবে শো করে।

তখন গুগল সার্চ ইঞ্জিন হতে সেই ওয়েবসাইটের লিংকে ক্লিক করে আমাদের প্রয়োজনীয় তথ্য দেখে নেই। আসলে গুগলে প্রদর্শিত সেই ওয়েবসাইটগুলোর মালিক গুগল নয়। গুগল এখানে পরের ঘাড়ে চড়ে নিজের ব্যবসা চালিয়ে যাচ্ছে। এটাকে এক ধরনের জ্ঞানের খেলা বলতে পারেন।

সার্চ ইঞ্জিনের তথ্য সংগ্রহ করার ধাপসমূহ

সাধারণত একটি সার্চ ইঞ্জিন তথ্য সংগ্রহ করার কাজটি তিনটি ধাপে করে থাকে। যেমন- ক্রলিং, ইনডেক্সিং ও ফলাফল প্রদান।

ক্রলিং

প্রথম ধাপে সার্চ ইঞ্জিন তার ক্রলার বা বট-কে বিশ্বের প্রতিটি ওয়েবসাইটে তথ্য সংগ্রহ করার জন্য পাঠায়। দ্বিতীয় ধাপে ওয়েব ক্রলার বা বট প্রত্যেকটি ওয়েবসাইটের কনটেন্ট বা পোস্ট crawl করে। একটি ওয়েবসাইটের পোস্টের ভীতরে যত ধরনের লেখা, ইমেজ ও ভিডিও থাকে সেগুলো ক্রল করার মাধ্যমে তথ্য ভান্ডারে ইনডেক্স হয়।

প্রত্যেকটি সার্চ ইঞ্জিনের এক ধরনের Web Crawlers সফটওয়ার রয়েছে। সার্চ ইঞ্জিনের ভাষায় এগুলিকে “রোবট বা বট” বলা হয়ে থাকে। এই Web Crawlers ইন্টারনেটের যত ওয়েবসাইট রয়েছে সেগুলির প্রত্যেকটি লিংক প্রতিনিয়তই ভিজিট করে। প্রতিবার একটি সাইট ভিজিট করার সময় ঐ সাইটের নতুন লিংকগুলো সংগ্রহ করে এবং Dead Link সার্ভার হতে মুছে দেয়। এভাবে প্রতিটি সাইট প্রতিনিয়তই Crawl হতে থাকে এবং নিত্য নতুন তথ্য তাদের সার্চ ইঞ্জিনের সার্ভারে মজুদ হতে থাকে।

ইনডেক্সিং

যেকোনো সার্চ ইঞ্জিনের ক্রলার বা রোবট ক্রল করার মাধ্যমে পেজকে ইনডেক্স করে নেয়। ইনডেক্স বিষয়টি বুঝানোর জন্য ছোট্ট একটি উদাহরণ দিচ্ছি। ধরুন- আপনার একটি মোবাইলের দোকান আছে। আপনার দোকানে শুধুমাত্র এক ধরনের মোবাইল না রেখে বিভিন্ন কোম্পানির মোবাইল বিক্রি করেন (যেমন- সামসং, শায়মি, অপ্প ইত্যাদি)। এ ক্ষেত্রে আপনি সব ধরনের ফোন একসাথে এলামেলো করে না রেখে ফোনের কোয়ালিটি ও কোম্পানি অনুসারে আলাদা আলাদা সাজিয়ে রাখবেন। তাহলে কাস্টমারের চাহিদা অনুসারে সহজে যেকোন মোবাইল কাস্টমারদের দেখাতে পারবেন।

ঠিক একইবাবে এই পুরো বিশ্বে যত ওয়েবসাইট বা ব্লগ রয়েছে প্রত্যেকটা ওয়েবসাইটের মালিক আলাদা আলাদা বিষয়ে লিখে থাকেন। এখানে সার্চ ইঞ্জিন বট সবগুলো ওয়েবসাইটের বিষয় অনুসারে তাদের তথ্য ভান্ডারে আলাদা আলাদা সাজিয়ে রাখে। তারপর কোন ব্লগ তাদের তথ্য ভান্ডারের সবার উপরে রাখবে সেটা ওয়েবসাইটের মানের উপর নির্ভর করে। মূলত সার্চ ইঞ্জিনের এই প্রক্রিয়াটিকে ইনডেক্সিং বলা হয়। ইনডেক্সিং এর ভীতরে অনেকগুলো বিষয় থাকে। যেগুলো এখনে বর্ণনা করে শেষ করা যাবে না।

ফলাফল প্রদান

আমরা যখন কোন কিওয়ার্ড লিখে গুগল সার্চ ইঞ্জিনে বা অন্য কোন সার্চ ইঞ্জিনে সার্চ করি তখন সার্চ ইঞ্জিন বট তার ডাটাবেস থেকে ইনডেক্স করা লক্ষ লক্ষ পোস্ট থেকে রিলেভেন্ট রেজাল্ট আলগোরিদমের রেঙ্কিং ফ্যাক্টর বিবেচনা করে রেজাল্ট দেখায়। এই তিনটি প্রসেস মেনটেইন করার জন্য গুগলের হাজার হাজার কর্মী রয়েছে।

একটি সার্চ ইঞ্জিনে স্পাইডার, রোবট এবং অন্যান্য প্রোগ্রাম ব্যবহৃত হয় । এসব প্রোগ্রাম ওয়েবসাইট থেকে তথ্য সংরক্ষন করে এবং হাইপারলিঙ্ক ট্রেস করে। অন্যদিকে সার্চ রোবট বিভিন্ন সাইট থেকে ডকুমেন্ট এবং তথ্য খুঁজে বের করে এবং তা সার্চ ইঞ্জিন এর ডাটাবেজে সংরক্ষিত রাখে। যখন কেউ কোন তথ্য খুঁজে পাওয়ার জন্য সার্চ ইঞ্জিন এ সার্চ করে, তখন সার্চ ইঞ্জিন ডাটাবেজ চেক করে এবং সার্চ ইঞ্জিন ডাটাবেজ থেকে ফলাফল প্রদর্শন করে।

ভিডিও টিউটরিয়াল দেখুন