توزیع موثر اسناد برای ایجاد توازن بار بین سرورها با استفاده از شمارش رخداد کلمات در سابقه پرس وجوها

هدف اصلی موتورهای جستجو، یافتن مرتبط ترین نتایج نسبت به پرس وجوی کاربر در سریع ترین زمان ممکن است. صفحات خزش شده توسط موتور جستجو بین سرورهای متعددی توزیع می شوند تا در هنگام جستجو بتوان از قدرت بازیابی و پردازش موازی آنها برای تولید سریع تر پاسخ استفاده نمود. با توجه به تعداد بسیار زیاد صفحات وب، موتورهای جستجو سیاست های مختلفی را برای توزیع مناسب اسناد بین سرورها انتخاب می کنند. در این مقاله، روش جدیدی برای توزیع اسناد پیشنهاد می شود که هدف آن ایجاد توازن بار کاری بین سرورها برای کاهش زمان پاسخ گویی موتور جستجو می باشد. ایده اصلی، استفاده از پرس وجوهای قبلی کاربران است بدین ترتیب که به هر کلمه از کلمات موجود در سابقه پرس وجو بر حسب تعداد رخداد روزانه آن، وزنی نسبت داده می شود. سپس هر سند با توجه به مجموع وزن کلمات داخل آن، وزن دهی می شود که این وزن ارتباط مستقیمی با احتمال انتخاب آن سند به عنوان پاسخ یک پرس وجو دارد. در نهایت، اسناد به نحوی بین سرورها توزیع می شوند که وزن اسناد داخل هر یک از سرورها برابر باشد. نتایج ارزیابی با استفاده از داده واقعی نشان می دهند که روش پیشنهادی قادر است توازن بار سرورها را مخصوصا در زمان اوج ورود پرس وجوها بیش از 20% نسبت به روش های گذشته بهبود بخشد.