홈 탐색 도움말
로그인
vdd
/
nitter
의 미러 https://github.com/zedeus/nitter
1
0
포크 0
파일 이슈 0 위키
소스 검색

Add Crawl-delay to robots.txt

Zed 3 년 전
부모
b5dee25b37
커밋
6c4c691fe7
1개의 변경된 파일과 1개의 추가작업 그리고 0개의 파일을 삭제
분할 보기 변경상태 보기
  1. 1 0
      public/robots.txt

+ 1 - 0
public/robots.txt
파일 보기 

@@ -1,4 +1,5 @@
 
 User-agent: *
 
 Disallow: /
 
+Crawl-delay: 1
 
 User-agent: Twitterbot
 
 Disallow: