استاندارد ساخت ربات

اگر دوست ندارید آلکسا اطلاعات سایت شما را منتشر کند باید از Standard for Robot Exclusion یا SRE استفاده نمایید الکسا با رباتهای خود شمارنده قدرتمندی دارد اطلاعات متوسطی از سایت شما نمایش می دهد شاید خیلی ها وجه امتیاز وب سایت خودشان در الکسا می بینند Martijn Koster ابداع کننده این روش برای کنترل رباتهای جستجوگر می…