شکوه 12 ربات میزبانی phpBB و

ربات خزنده نوع خوب
(همیشه خود را شناسایی) IP محدوده توزیع، بین المللی اطاعت robots.txt را بله اطاعت خزیدن تاخیر بله داده در Majestic.com خدمت

شکوه یک موتور جستجو متخصص مستقر در بریتانیا توسط صدها هزار نفر از کسب و کار در 13 زبان و بیش از 60 کشور که برای رنگ کردن یک نقشه از مستقل اینترنت از مصرف کننده بر اساس موتورهای جستجو است. قدرت نیز با شکوه دیگر فن آوری های مشروع که برای کمک به درک پارچه مستمر در حال تغییر از وب است.

شکوه phpBB و 12 ربات میزبانی MJ12Bot از

صاحبان وب سایت می توانید اطلاعات مربوط به وب سایت خود را به صورت رایگان و با تایید وب سایت خود را در یک حساب کاربری رایگان در majestic.com یا از طریق کنسول جستجو گوگل از طریق یک تایید فایل متنی خالی یا تایید متا تگ ها را ببینید.

MJ12Bot نیست در حال حاضر محتوای وب کش و یا اطلاعات شخصی. در عوض آن نقشه ها روابط لینک بین وب سایت های برای ساخت یک موتور جستجو است. این اطلاعات در دسترس به فن آوری و عموم مردم، هم با جستجو برای یک کلمه کلیدی یا یک وب سایت در با شکوه است. اطلاعات بیشتر در مورد پروژه جامعه پشت خزنده در Majestic12.co.uk هستند.

ما عنکبوت وب برای هدف از ساخت یک موتور جستجو با یک دانلود سریع و کارآمد خزنده توزیع شده است که افراد با ارتباطات باند پهن را قادر به کمک به کمک به، چه ما امیدواریم که، تبدیل به بزرگترین موتور جستجو در جهان است. تولید یک موتور جستجو متن کامل در شکوه-12 در حال حاضر در مرحله تحقیق، در بخشی از تجاری سازی تحقیقات با شکوه در تامین می شود.

داده ها (در حال حاضر تنها یک گراف وب پیوندها) است به بزرگترین شاخص لینک دهنده عمومی موتور جستجو است که ما به عنوان یک ابزار اختصاصی به نام سایت اکسپلورر حفظ اضافه خزید. در مورد لینک دهنده خود را از شاخص لینک دهنده گسترده یادگیری - همه مدیران سایت می توانید داده های کامل و رایگان در لینک دهنده با تایید مالکیت سایت خود دریافت کنند.

برخی از ISP ها و فایروال ها به خوبی پیکربندی ممکن است MJ12Bot از خزنده وب سایت خود را متوقف کند. این است که معمولا به این دلیل که ISP یا فایروال را درک نمی کنند که در انجام این کار، آنها در حال مسدود کردن بازدید کنندگان واقعی برای وب سایت خود را در تاریخ بعد. برخی نیز این کار را انجام برای به حداقل رساندن پهنای باند. در این موارد، برخی از ISP ها می توانید بلوک برای تمام کاربران خود را هنگامی که هدف از ربات درک را حذف کنید. اگر ISP شما خواهد ربات ما اجازه نمی دهد، توصیه می کنیم که شما در نظر حرکت ها ی مربوطه.

ما یک حافظه بلند و می خواهید به اطمینان حاصل شود که خطاهای موقت، وب سایت پایین صفحه و یا دیگر تغییرات موقت به سایت های تغییرات جبران ناپذیر به مشخصات سایت خود را ایجاد نمی کند زمانی که نباید. همچنین اگر هنوز هم وجود دارد در پیوند به این صفحات آنها ادامه خواهد داد یافت می شود و به دنبال. گوگل یک بیانیه منتشر شده از آنجایی که آنها نیز این سوال را پرسید، دلیل خود را است البته همان ما و پاسخ آنها را می توان در اینجا یافت: گوگل 404 سیاست.

میزبانی

این یک سوء تفاهم مشترک از (شاید ضعیف نام) ویژگی nofollow است. گوگل، نگارش = nofollow به 'ویژگی در سال 2005 معرفی بیان کرد که لینک تا مشخص شده می پیج رنک هدف را تحت تاثیر قرار نمی، آن را نشانی از خزنده از مراجعه به صفحه هدف را متوقف کند، این می شود به خصوص آشکار اگر صفحه مورد نظر دارای چند لینک به آن، برخی از ممکن است این ویژگی را دارند، برخی از آنها ممکن نیست. اگر شما مایل به متوقف رباتها از خزنده صفحه پس از آن فایل robots.txt استفاده شود به رد کردن صفحه مورد نظر.

اطلاعات بیشتر در مورد نگارش = nofollow به اینجا می توان یافت: ویکیپدیا NOFOLLOW

MJ12bot پایبند به استاندارد robots.txt را. اگر می خواهید ربات برای جلوگیری از وب سایت که از خزش و سپس متن زیر به robots.txt خود را اضافه کنید:

کاربر عامل: MJ12bot
قائل نشدن: /

لطفا ربات ما از طریق IP در htaccess تغییر نام دهید مسدود نکنید - ما هر بلوک IP پشت سر هم استفاده کنید که ما یک جامعه مبتنی بر خزنده توزیع شده است. لطفا همیشه مطمئن شوید که ربات در واقع می تواند بازیابی فایل robots.txt خود را. اگر آن را نمی تواند آن را فرض کنیم که آن را خوب است به خزیدن سایت خود را.

اگر شما دلیلی برای باور MJ12bot بود دستورات robots.txt خود را اطاعت نمی کند، پس از آن لطفا به ما از طریق ایمیل: bot@majestic12.co.uk. لطفا آدرس به وب سایت خود را ارائه و مدخل ورود به سیستم نشان دادن ربات تلاش برای بازیابی صفحاتی که قرار نبود به.

خزنده در حال حاضر زیر پشتیبانی می پسوند های غیر معمول برای robots.txt را:

  • خزیدن تاخیر تا 20 ثانیه (مقادیر بالاتر خواهد شد را به حداکثر گرد ربات ما را پشتیبانی)
  • تغییرمسیر (در همان سایت) هنگامی که در تلاش برای واکشی robots.txt را
  • الگوی ساده تطبیق در قائل نشدن دستورات سازگار با خصوصیات از کلمات یاهو
  • اجازه دستورات می توانید قائل نشدن باطل اگر آنها مشخص تر (در طول طولانی تر) هستند
  • شکست برخی به بهانه robots.txt را مانند 403 به عنوان بخشنامه پتو عدم اجازه درمان

ما مشتاق به دیدن هر گزارش تخلفات احتمالی از robots.txt توسط MJ12bot هستند.

تعدادی از مثبت کاذب مطرح وجود دارد - این می تواند یک چک لیست زمانی مفید است که استفاده از پیکربندی یک وب سرور:

  1. سایت فعال تغییر مسیر هنگام درخواست فایل robots.txt - MJ12Bot زیر ریدایرکت، اما تنها در دامنه همان. ایده آل این است برای robots.txt برای در "/robots.txt" در دسترس باشد که در استاندارد مشخص شده است.
  2. حوزه های مختلف در حال اجرا در همان سرور است. سرورهای مدرن مانند Apache می توانید دسترسی به تعدادی از دامنه به یک فایل ورود به سیستم - این می تواند سردرگمی زمانی که تلاش کنید تا ببینید چه وب سرور که در آن نقطه دیده شد شود. شما ممکن است مایل به در نظر اضافه کردن اطلاعات دامنه به ورود به سیستم دسترسی، یا سیاهههای مربوط به دسترسی تقسیم در هر دامنه اساس
  3. robots.txt را خارج از سنکرون با کپی توسعه. ما شکایت های که MJ12Bot robots.txt را نافرمانی کردند تا به حال - تنها برای پیدا کردن که توسعه دهنده در برابر یک سرور توسعه، که با نسخه زنده بود در همگام سازی نمی آزمایش شد

شما به راحتی می تواند کاهش سرعت ربات با اضافه کردن زیر به فایل robots.txt شما:

کاربر-عامل: MJ12bot
خزیدن-تاخیر: 5

خزیدن تاخیر باید یک عدد صحیح باشد و آن را به معنای تعدادی از ثانیه صبر کنید بین درخواست. MJ12bot خواهد یک تا 20 ثانیه تاخیر بین درخواست به سایت شما - توجه داشته باشید با این حال که در حالی که بعید است، آن است که هنوز هم ممکن است سایت شما ممکن است از MJ12bots های متعدد در همان زمان خزید شده است. ساخت بالا خزیدن تاخیر باید تاثیر را در سایت خود به حداقل برساند. این پارامتر خزیدن تاخیر نیز فعال اگر آن را برای * از کلمات مورد استفاده قرار گرفت بود.

اگر ربات ما تشخیص دهد که شما خزیدن-تاخیر برای هر ربات دیگر استفاده می شود سپس آن را به طور خودکار کندتر خزیدن حتی اگر MJ12bot به طور خاص بود پرسید به انجام این کار.

کنونی نسخه سری v1.4.x عامل MJ12bot عبارتند از:

  • v1.4.7 (کنونی - ژانویه 2017)
  • v1.4.6 (در حال جایگزین شدن با 1.4.7 - ژوئن 2016)
  • v1.4.5 (ناموجود - ژوئن 2016)
  • v1.4.4 (از رده خارج مه 2014)
این ویدئو را تماشا کن!

مقالات مرتبط

هرزنامه میزبانی ثبت نام phpBB وبرای انجمن ها ClassiPress من با استفاده از نرم افزار رایگان به نام phpBB و. تا چند هفته پیش، من هر گونه مشکلی با انجمن اسپم نیست اما در حال حاضر به نظر می رسد رباتها به من در. PHPBB صفر نمی آیند ...
یافتن ربات کلیپ برد چند منظوره میزبانی وردپرسآیا شما می خواهید برای بهینه سازی فایل robots.txt وردپرس خود را؟ هنوز مطمئن شوید که چرا و چگونه فایل robots.txt برای خود را در جستجوگرها مهم است؟ ما باید شما را تحت پوشش. در این مقاله، ما شما را چگونه به نشان می دهد ...
انجمن PHPBB میزبانی اسکریپت برای فارغ التحصیلیاین یک برنامه پی اچ پی و انجمن که در آن ساعات مانند تاریخ و زمان کمک کرده است، تعداد کل موضوعات و کمک و پیام ها در این اسکریپت در دسترس است. کاربران باید نام کاربری را، ...
کلمات کلیدی جستجوگرها میزبانی دروپالSEO مخفف کلمات "بهینه سازی موتورهای جستجو" یا "جستجو بهینه ساز موتور." تصمیم گیری برای استخدام جستجوگرها یک تصمیم بزرگ که به طور بالقوه می تواند به بهبود سایت شما و صرفه جویی در وقت است، اما شما همچنین می توانید ...
چگونه برای تنظیم زمان در phpBB میزبانیبه طور پیش فرض، phpBB و 3.0 قرار است به استفاده انگلیسی بریتانیایی. شما نمیتوانید بسته های زبان های مختلف آپلود و تنظیم زبان پیش فرض از درون کنترل پنل مدیریت خود را. این اگر سایت شما به شما کمک خواهد ...