صفحهٔ اصلی گشت‌و‌گذار راهنما
ورود
vdd
/
nitter
mirrorاز https://github.com/zedeus/nitter
1
0
انشعاب 0
پرونده‌ها مشکلات 0 ویکی
فهرست منبع

Add Crawl-delay to robots.txt

Zed 3 سال پیش
والد
b5dee25b37
کامیت
6c4c691fe7
1فایلهای تغییر یافته به همراه1 افزوده شده و 0 حذف شده
مشاهده تقسیم شده نمایش آمار تفاوت ها
  1. 1 0
      public/robots.txt

+ 1 - 0
public/robots.txt
مشاهده فایل 

@@ -1,4 +1,5 @@
 
 User-agent: *
 
 Disallow: /
 
+Crawl-delay: 1
 
 User-agent: Twitterbot
 
 Disallow: