Trang chủ Khám phá Trợ giúp
Đăng nhập
vdd
/
nitter
mirror of https://github.com/zedeus/nitter
1
0
Fork 0
Các tập tin Các vấn đề 0 Wiki
Browse Source

Add Crawl-delay to robots.txt

Zed 3 năm trước cách đây
mục cha
b5dee25b37
commit
6c4c691fe7
1 tập tin đã thay đổi với 1 bổ sung và 0 xóa
Split View Hiển thị tình trạng sai khác
  1. 1 0
      public/robots.txt

+ 1 - 0
public/robots.txt
Xem Tập Tin 

@@ -1,4 +1,5 @@
 
 User-agent: *
 
 Disallow: /
 
+Crawl-delay: 1
 
 User-agent: Twitterbot
 
 Disallow: