مقدمه :
اغلب مردم زمانیکه از مراکز جستجو در اینترنت سخن می گویند ، منظور آنها مراکز جستجوی وب است . قبل از مطرح شدن وب (مشهورترین بخش اینترنت) ، از مراکز جستجوی اطلاعات برای کمک به کاربران برای یافتن اطلاعات استفاده می گردید. برنامه هایی نظیر: "گافر" و "آرچی" از فایل های ذخیره شده بر روی سرویس دهنده های متصل به اینترنت ، یک ایندکس ایجاد می کردند . بدین ترتیب جستجو و دسترسی به اطلاعات و مستندات مورد نظر در اسرع وقت انجام می گردید . در اواخر سال 1980 اکثر کاربران مستلزم دارابودن دانش کافی در رابطه با استفاده از این دو برنامه بودند. امروزه اکثر کاربران اینترنت دامنه جستجوی خود را محدود به وب نموده اند.
امروزه بر روی اینترنت و مهمترین سرویس آن (وب) صدها میلیون صفحه حاوی اطلاعات وجود دارد کاربران اینترنت با آگاهی از آدرس یک سایت ، قادر به اتصال به سایت مورد نظر و استفاده از منابع اطلاعاتی موجود بر روی سایت خواهند بود . ما با دریائی از اطلاعات مواجه هستیم ، در صورتیکه قصد یافتن اطلاعاتی خاص را داشته باشیم ، از چه امکاناتی در این زمینه می توان استفاده کرد؟ برای جستجو و یافتن اطلاعات مورد نیاز از مراکز جستجوی اطلاعات در اینترنت استفاده می گردد . به مراکز فوق موتورهای جستجوگر یا سرچ انجین نیز می گویند.
طرز کار موتورهای جستجوگر:
وقتی جستجویی در یک موتور جستجوگر انجام و نتایج جستجو ارایه می شود، کاربران در واقع نتیجه کار بخش های متفاوت موتور جستجوگر را می بینند . موتور جستجوگر قبلا پایگاه داده اش را آماده کرده است و این گونه نیست که درست در همان لحظه جستجو، تمام وب را بگردد. بسیاری از خود می پرسند که چگونه امکان دارد گوگل در کمتر از یک ثانیه تمام سایتهای وب را بگردد و میلیون ها صفحه را در نتایج جستجوی خود ارایه کند؟
نه گوگل و نه هیچ موتور جستجوگر دیگری توانایی انجام این کار را ندارند.
همه آنها در زمان پاسخ گویی به کاربران ، تنها در پایگاه داده ای که در اختیار دارند به جستجو می پردازند و نه در وب!
موتور جستجوگر به کمک بخش های متفاوت خود ، اطلاعات مورد نیاز را قبلا" جمع آوری ، تجزیه و تحلیل می کند و آنرا در پایگاه داده اش ذخیره می نماید و به هنگام جستجوی کاربر تنها در همین پایگاه داده می گردد.
اطلاعات پایگاه داده ی موتورهای جستجو به روش های گوناگونی تامین می شود با توجه به نوع جمع آوری اطلاعات، خدمات جستجویی که در وب ارایه می شود به دو گروه اصلی زیر تقسیم می شود :
- فهرست یا دایرکتوری
- موتور جستجوگر یا سرچ انجین
تفاوت اصلی و گروه اشاره شده در این است که اطلاعات پایگاه داده ی گروه اول را انسانها جمع آوری می کنند حال آنکه اینکار برای گروه دوم توسط نرم افزارها انجام می شود.
الف) فهرست یا دایرکتوری :
دایرکتوری ها همان طور که از نامشان پیداست اطلاعات را در گروه های مختلف دسته بندی می کنند. تفاوت اصلی دایرکتوری با یک موتور جستجوگر در این است که دایرکتوری بصورت دستی و توسط انسان ایجاد می شود . دارندگان سایت ها به دایرکتوری مراجعه می کنند، گروه مناسب برای سایت خود را در آن بر می گزینند و سایت خود را به آن گروه معرفی می کنند.
پس از آنکه اطلاعات سایت ها به گروه های مختلف ارسال شد، ویراستاران دایرکتوری آن اطلاعات را بررسی می کنند و در صورتی که گروه درخواست شده،با زمینه فعالیت سایت معرفی شده یکی باشد و همچنین سایر قوانین دایرکتوری نیز رعایت شده باشد، سایت را در گروه یاد شده می پذیرند.
در صورتی که کاربران استفاده درستی از گروه های دایرکتوری بنمایند می توانند اطلاعات مفیدی را به کمک آنها کسب کنند.
دایرکتوری از وجود یک سایت مطلع نمی گردد مگر زمانی که آن سایت به دایرکتوری معرفی شود. یکی از ایراداتی که به دایرکتوری ها وارد می شود این است که سایت های مرده زیادی در خود دارند.
به عبارت دیگر یک سایت بعد از آنکه در یکی از گروه های آن قرار گرفته، دیگر به فعالیت خود ادامه نداده است اما با این حال هنوز هم دایرکتوری آن را به عنوان یک سایت فعال به کاربران معرفی می کند. البته دایرکتوری های حرفه ای با استخدام و یراستاران خبره تلاش بسیاری برای رفع این نقص و نواقص مشابه می نمایند . امکان دارد دایرکتوری ها برای بررسی این مورد از اسپایدر ها هم کمک بگیرند. اسپایدر نرم افزاری است که کار جمع آوری اطلاعات مورد نیاز یک موتور جستجوگر را بر عهده دارد.دراین مورد خاص، کار اسپایدر این است که بررسی کندکه آیاسایت هایی که قبلا درگروه ها قرار گرفته اند، هنوز هم فعال می باشند؟در مواردی هم امکان داردکه اسپایدر ها تغییر زمینه فعالیت سایت هاو یا فعال بودن پیوندهای درون صفحات سایت ها را بررسی کنند.
قرار گرفتن در پایگاه داده ی دایرکتورهای عمده، نقش مهمی در کسب رتبه های بالا در موتورهای جستجوگر(نوع دوم) دارد. دایرکتوری های عمده عبارتند از :
Yahoo, Look Smart , Dmoz
بعضی از ارایه دهندگان خدمات جستجو در واقع تلفیقی از هر دو گروه می باشند به عنوان مثال یاهو هم اسپایدر دارد و هم ویراستار، گوگل نیزاز فهرست دیموز در بخش فهرست خودکمک گرفته است.
ب) موتور جستجوگر :
در حالت کلی زمانی که صحبت از موتور جستجوگر می شود، مقصود، این نوع آن است.
بخش های مجزای یک موتور جستجوگر عبارتند از:
-عنکبوت یا اسپایدر
-خزنده یا کراولر
-بایگانی کننده یا ایندکسر
-پایگاه داده یا دیتابیس
-سیستم رتبه بندی یا رنکر
1- اسپایدر (عنکبوت)
قبل از اینکه یک مرکز جستجو قادر به ارائه آدرس و محل فایل مورد نظر باشد ، می بایست فایل مورد نظر پیدا شود . بمنظور یافتن اطلاعات مربوط به صدها میلیون صفحه وب موجود ، مراکز جستجو می بایست از یک نرم افزار خاص با نام اسپایدر برای یافتن اطلاعات مورد نیاز یک موتور جستجوگر استفاده کنند . اسپایدر به صفحات مختلف سر می زند محتوای آنها را می خواند اطلاعات مورد نیاز را جمع آوری می کند و آنرا در اختیار سایر بخش های موتور جستجوگر قرار می دهد.
کار اسپایدر بسیار شبیه کاربران وب است. همانطور که کاربران صفحات مختلف را بازدیذ می کنند اسپایدر هم درست اینکار را انجام می دهد با این تفاوت که اسپایدر کدهای اچ تی ام ال صفحات را می بیند اما کاربران نتیجه ی حاصل از کنار هم قرار گرفتن این کدها را.
نحوه حرکت اسپایدر در وب به چه صورت است ؟ نقاط شروع ، لیستی از سرویس دهندگان با ترافیک و اطلاعات بالا و صفحات وب متداول است . اسپایدر از یک سایت رایج عملیات خود را آغاز و پس از جمع آوری کلمات موجود در صفحات وب ، هر یک از لینک های موجود در صفحات را برای ادامه حرکت خود انتخاب خواهد کرد . بدین ترتیب سیستم مبتنی بر اسپایدر بسرعت حرکت خود در طول وب را آغاز خواهد کرد.
2- کراولر (خزنده)
خزنده نرم افزاری است که به عنوان یک فرمانده برای اسپایدر عمل می کند. آن مشخص می کند که
اسپایدر کدام صفحات را مورد بازدید قرار دهد. در واقع کراولر تصمیم می گیرد که کدام یک از لینک های صفحه ای که اسپایدر در حال حاضر در آن قرار دارد ، دنبال شود. ممکن است همه ی آنها را دنبال کند، بعضی ها را دنبال کند و یا هیچ کدام را دنبال نکند.
فهرست مطالب
مقدمه.................................................................................................4
طرز کار موتورهای جستجوگر...................................................................4
الف) فهرست یا دایرکتوری.......................................................................5
ب) موتور جستجوگر..............................................................................6
ابر جستجوگر.........................................................................................8
موتورهای جستجوگر رتبه به ازای پول.....................................................8
- فواید موتورهای جستجوگر رتبه به ازای پول..............................................10
موتور جستجوگر خاص..........................................................................10
معرفی چند موتور جستجوگر................................................................10
جوایزی که گوگل از ابتدا تاکنون برنده شده است..................................13
تصاویر علامات تجاری موتورهای جستجوگر...........................................19
فهرست منابع....................................................................................20
شامل 18 صفحه word
دانلود تحقیق موتورهای جستجوگر