درخواست های ارتباط
جستجو
    لیست دوستان من
    صندوق پیام
    همه را دیدم
    • در حال دریافت لیست پیام ها
    صندوق پیام
    رویدادها
    همه را دیدم
    • در حال دریافت لیست رویدادها
    همه رویدادهای من
    اطلاعات دوره آموزشی
    اطلاعات مطلب
      مدرس/نویسنده
      hamideh smi
      امتیاز: 33817
      رتبه:36
      0
      264
      8
      220
      دانشجوی کارشناسی مهندسی کامپیوتر _ IT پروفایل کاربر
      دوره های مرتبط

      ویدیوهای پیشنهادی

      آموزش الفبای سـئو :: اسپایدر یا (Crawlers) در سئو چیست؟ - قسمت هفتم

      تاریخ 13 ماه قبل
      نظرات 0
      بازدیدها 91
      اسپایدر وب چیست؟

      به نام خدا ، سلام خدمت کاربران ITPRO ای.با یک مطلب بسیار مهم در سئو در گروه مطلب «اصول و الفبای سئو(SEO)» با شما همراه هستم. در این مقاله قصد داریم که شما را با یک اصطلاح کاربردی و یک مفهوم جدید و در عین حال مهم در الفبای سئو آشنا کنیم. حتما شما هم تا به حال لغتی به نام خزنده ها یا اسپایدرهای موتورهای جستجو را شنیده اید.زمانیکه شما تصمیم می گیرید که به عنوان یک متخصص سئو وارد بازار کار شوید و در واقع در این حوزه و حیطه فعالیت کنید باید به خوبی اصطلاحات سئو را بدانید و با نحوه ی کار و عملکرد موتورهای جستجو نیز آشنا باشید از این رو مبحث خزنده های موتورهای جستجو اهمیت دارد.در ادامه با ITPRO همراه باشید.

      اسپایدر یـا (Crawlers) چیست؟


      واژه ی انگلیسی اسپایدر (Spider) در زبان فارسی به معنی عنکبوت است و البته به دلیل ماهیت رفتاری جانور عنکبوت به آن خزنده (Crawlers) نیز می گویند. اما شاید این سوال برای شما هم پیش بیاید که اصلا عنکبوت چه ربطی به موتورهای جستجو دارد؟ خب در اینجا باید این طور بگویم که در واقع موتورهای جستجو دارای خزنده ها یا همان عنکبوت هستند (به این نکته توجه کنید که عنکبوت یا خزنده های موتور جستجو یکی هستند و هیچ تفاوتی با هم ندارند) و بدون این عنکبوت ها در واقع هیچ کاری از دست موتورهای جستجو ساخته نیست.نمیدانم که فیلم سینمایی مرد عنکبوتی را دیده اید یا نه؟!! اما باید بگم که اسپایدرهای موتورهای جستجو نیز عملکردی درست شبیه به مرد عنکبوتی دارند. در داستان این فیلم ، مرد عنکبوتی کسی بود که با نخ یا تارهایی که ایجاد می کرد به برج ها و ساختمان ها متصل می شد و یکی پس از دیگری آنها را پشت سر می گذاشت. حتی اگر این فیلم را هم ندیده باشید قطعا در دنیای واقعی عنکبوت را دیده اید که چطور تار ایجاد می کند و به وسیله ی این تار خود ساخته حرکت می کند.
      عملکرد عنکبوت های وب نیز به همین ترتیب است آنها بوسیله ی لینک هایی که در صفحات مختلف وب ایجاد شده است از یک صفحه به صفحه ی دیگر متصل میشوند و یکی پس از دیگری از همه ی صفحات وب دیدن می کنند در نهایت آنها را در یک پایگاه داده فهرست می کنند تا زمانیکه کاربر کلمه یا عبارتی را در موتور جستجو سرچ کرد از میان همان پایگاه داده حرکت کنند و صفحات را چیدمان کنند و نتایج را نمایش دهند.در واقع گاهی اوقات این سوال برای برخی از افراد پیش میاید که : یعنی همان موقع که ما یک کلمه را جستجو می کنیم موتور جستجو میلیون ها صفحه را میبیند و نمایش می دهد؟ باید بگویم خیر، در واقع شاید این تعداد صفحات میلیون ها باشد وتعدادشان بسیار باشد ولی عنکبوت ها قبلا مطالبی را که در دنیای اینترنت منتشر شده است دیده اند و آنها را در پایگاه داده خود جمع آوری کرده اند و این خزنده ها بر اساس سیاست های خاصی این کار را انجام می دهند و یکی از دلایل آن هم این است که محتوای تکراری را مجددا دانلود نکنند.

      اگر بخواهیم یک تعریف جامع و کامل از اسپایدرهای وب داشته باشیم باید این طور بگوییم که : نرم افزاری است که با تار انداختن از یک صفحه وب به صفحات دیگر (خزیدن) محتوا ها را بررسی و ایندکس می کند. به لینک هایی که به خزنده ها کمک می کند تا راحت تر صفحات مرتبط با موضوع و با کیفیت را پیدا کنند Feed گفته میشود.
      که واژه ی انگلیسی Feed در زبان ما به معنی غذا دادن ، غذا خوردن و یا تغذیه کردن است بنابراین متوجه می شویم که اسپایدرها از لینک ها تغذیه می کنند به همین خاطر است گفته می شود عملیات لینک سازی در صفحات وبسایت را به درستی انجام دهید تا این خزنده های وب نیز به خوبی تفذیه شوند. به خزنده های موتورهای جستجو اسپایدرهای وب ، ربات ها ، فهرست کننده اتوماتیک ، ربات وب ، عنکبوت وب و... نیز می گویند.اگر این عنکبوت ها نباشند در واقع موتور جستجو و نتایجی هم نخواهد بود.بنابراین آنها به اعتبارسنجی کدهای HTML و Hyperlink ها کمک می کنند.

      ساختار کاری عنکبوت های وب


      همان طور که گفته شد اسپایدرها بر اساس یک سری سیاست های کاری خاصی عمل می کنند که به توضیح مختصری از آنها می پردازیم :
      • Selection Policy : همان طور که از معنی فارسی این واژه پیداست یعنی سیاست در گزینش ، اسپایدرهای وب در گام اول مشخص می کنند که ابتدا باید چه صفحاتی را Index کنند تا پایگاه داده شان تشکیل شود.
      • Re - Visit Policy : یعنی بررسی مجدد ، بعد از اینکه صفحات وب دیده و فهرست شد اسپایدرها مشخص می کنند که در چه تایم ها و زمان هایی باید مجددا صفحات را بررسی کنند.
      • Politness Policy : در این مرحله معمولا اسپایدرها به گونه ای می خزند و صفحات را بررسی می کنند که وبسایت Overload نداشته باشد.(و البته اسپایدرها به این موضوع دقت دارند که صفحه ای را به صورت تکراری دانلود نکنند)
      • Parallization Policy : در این مرحله مشخص می کنند که چگونه پخش شوند تا هماهنگی با یکدیگر داشته باشند و این هم باز به اهمیت این موضوع که صفحات وب تکراری ایندکس نشوند اشاره دارد.
      به تصویر زیر دقت کنید تا بیشتر با نحوه ی کار یک اسپایدار موتورجستجو آشنا شوید :

      اسپایدرهای موتورجستجو

      نحوه ی کار در سه مرحله صورت می گیرد : 1.خزیدن 2.ایندکسر 3.نرم افزار موتور جستجو
      مرحله 1 : خزیدن
      • ابتدا هر مطلبی که توسط شخصی در اینترنت منتشر و تولید می شود توسط موتورهای جستجو بررسی می شود و اسپایدرهای وب شروع به حرکت و خزیدن می کنند.
      مرحله 2 : ایندکسر
      • اطلاعاتی را جمع آوری می کنند و آنها را در پایگاه داده خود ذخیره می نمایند.
      مرحله 3 : نرم افزار موتور جستجو
      • کاربر کلمه ای را سرچ می کند.
      • خزنده ها در پایگاه داده خود سرچ می کنند تا بهترین نتایج را بدست آورند.
      • نتایج را رتبه بندی کرده و برای کاربر نمایش می دهند.

      امیدوارم که پس از خواندن این مقاله به خوبی با مفهوم اسپایدرها و یا خزنده های وب آشنا شده باشید و به چگونگی عملکرد آنها در دنیای وب پی برده باشید.درنهایت اگر مطالعه این مقاله برای شما مفید واقع شد حتما آنرا با دیگران هم به اشتراک بگذارید تا استفاده کنند.ITPRO باشید.




      نویسنده: hamideh-smi7
      منبع : انجمن تخصصی فناوری اطلاعات ایران
      هرگونه نشر و کپی برداری از مطلب تنها با ذکر منبع و نام نویسنده مجاز است.
      برچسب ها
      ردیفعنوان
      1آموزش الفبای سـئو :: انکرتکست یـا (Anchor Text) در سئو چیست؟-قسمت اول
      2آموزش الفبای سـئو :: تگ Alt یا (Image Alt Text) در سئو چیست؟-قسمت دوم
      3آموزش الفبای سـئو :: بک لینک یا (Link Building) در سئو چیست؟-قسمت سوم
      4آموزش الفبای سـئو :: بانس ریت یا (Bounce Rate) در سئو چیست؟-قسمت چهارم
      5آموزش الفبای سـئو :: نرخ تبدیل یا (Conversion Rate Optimization) در سئو چیست؟-قسمت پنجم
      6آموزش الفبای سـئو :: پیوند عمیق یا (DeepLinking) در سئو چیست؟-قسمت ششم
      7آموزش الفبای سـئو :: اسپایدر یا (Crawlers) در سئو چیست؟ - قسمت هفتم
      8آموزش الفبای سـئو :: تبلیغات کلیکی یـا (PPC) در سئو چیست؟-قسمت هشتم
      9آموزش الفبای سـئو :: وب دایرکتوری یا (Web Directory) در سئو چیست؟-قسمت نهم
      10آموزش الفبای سـئو :: محتوای تکراری یا (Duplicate Content) در سئو چیست؟- قسمت دهم
      11آموزش الفبای سـئو :: خوراک وب یا (RSS Feed) در سئو چیست؟-قسمت یازدهم
      12آموزش الفبای سـئو :: صفحات ورود یا (DoorWay Page) در سئو چیست؟-قسمت دوازدهم
      13آموزش الفبای سـئو :: فایل اچ تی اکسس یا (.Htaccess) در سئو چیست؟-قسمت سیزدهم
      14آموزش الفبای سـئو :: تگ تیتر یا (Heading Tag) در سئو چیست؟-قسمت چهاردهم
      15آموزش الفبای سـئو :: Visits ، Views و Hits در سئو چیست؟- قسمت پانزدهم
      16آموزش الفبای سـئو :: Inbound Links یا Outbound Links در سئو چیست؟-قسمت شانزدهم
      17آموزش الفبای سـئو :: دیده شدن یا (Impression) در سئو چیست؟-قسمت هفدهم
      18آموزش الفبای سـئو :: ارتباط معنایی پنهان یا (LSI Keyword) در سئو چیست؟-قسمت هجدهم
      19آموزش الفبای سـئو :: متا تگ توضیحات یا (Meta Description Tag) در سئو چیست؟-قسمت نوزدهم
      20آموزش الفبای سـئو :: بازاریابی گوشه یا (Niche Marketing) در سئو چیست؟-قسمت بیستم
      21آموزش الفبای سـئو :: سئوی منفی یا (Negative SEO) در سئو چیست؟-قسمت بیست و یکم
      22آموزش الفبای سـئو :: سئو ارگانیک یا (Organic Serp) در سئو چیست؟-قسمت بیست و دوم
      23آموزش الفبای سـئو :: مجازات گوگل یا (Google Penalties) در سئو چیست؟-قسمت بیست و سوم
      24آموزش الفبای سـئو :: پیج رنک یا (Page Rank) در سئو چیست؟-قسمت بیست و چهارم
      25آموزش الفبای سـئو :: نرخ بازگشت سرمایه یا (ROI) در سئو چیست؟-قسمت بیست و پنجم
      26آموزش الفبای سـئو :: ریدایرکت 301 یا (Redirect 301) در سئو چیست؟-قسمت بیست و ششم
      27آموزش الفبای سـئو :: نقشه سایت یا (SiteMap) در سئو چیست؟-قسمت بیست و هفتم
      28آموزش الفبای سـئو :: اهمیت کیفیت بر کمیت یا (Quailty Over Quantity) در سئو چیست؟-قسمت بیست و هشتم
      29آموزش الفبای سـئو :: رتبه اعتماد یا (Trust Rank) در سئو چیست؟-قسمت بیست و نهم
      30آموزش الفبای سـئو :: فایل متنی (Robots.TXT) در سئو چیست؟-قسمت سی ام
      31آموزش الفبای سـئو :: کاربردپذیری یا (Usability) در سئو چیست؟-قسمت سی و یکم
      32آموزش الفبای سـئو :: داده های نشانه گذاری شده یا (Rich Snippet) در سئو چیست؟-قسمت سی و دوم
      33آموزش الفبای سـئو :: جعبه شن یا (Google Sand Box) در سئو چیست؟-قسمت سی و سوم
      34آموزش الفبای سـئو :: حافظه نهان یا (Cache) در سئو چیست؟-قسمت سی و چهارم
      35آموزش الفبای سـئو :: رتبه الکسا یا (Alexa Rank) در سئو چیست؟-قسمت سی و پنجم
      36آموزش الفبای سـئو :: ترافیک بازگشتی یا (Referral Traffic) در سئو چیست؟-قسمت سی و ششم
      37آموزش الفبای سـئو :: سرقت پهنای باند یا (Hotlinking) در سئو چیست؟-قسمت سی و هفتم
      38آموزش الفبای سـئو :: کلوکینگ یا (Cloaking) در سئو چیست؟-قسمت سی و هشتم
      39آموزش الفبای سـئو :: Splash page ، Reciprocal link، Bait and Switch و... در سئو چیست؟-قسمت سی و نهم
      40آموزش الفبای سـئو :: سئو کلاه سیاه (BlackHat SEO) و سئو کلاه سفید (WhiteHat SEO) چیست؟-قسمت چهـلم و پـایـانی
      دورهمجموعه کل دوره
      مطالب مرتبط

      در حال دریافت اطلاعات

      نظرات
      هیچ نظری ارسال نشده است

        برای ارسال نظر ابتدا به سایت وارد شوید

        arrow
        دوره های وب سایت توسینسو

        با دوره های وب سایت توسینسو به همراه برترین اساتید ایران دانش خود را به روز کنید و در کنار آموزش آنلاین پشتیبانی اساتید را هم داشته باشید

        شبکه و زیر ساخت، مجازی سازی، امنیت اطلاعات، برنامه نویسی، گرافیک، اینترنت اشیاء، طراحی وب و صدا ها دوره آموزشی دیگر

        تا 150،000 تومان شارژ هدیه

        همین امروز شروع کنید