Trang chủ Khám phá Trợ giúp
Đăng ký Đăng nhập
efren
/
testing-proxy
1
0
Fork 0
Các tập tin Các vấn đề 0 Yêu cầu kéo về 0 Wiki
Tree: de93a8a123
Branches Tags
testing-proxy
/
static
/
robots.txt

robots.txt 63 B
Lịch sử Raw

123 
  1. # allow crawling everything by default
    2. 

  2. User-agent: *
    3. 

  3. Disallow:
    4.