Etusivu Tutki Apua
Kirjaudu sisään
lovecoding
/
VIP33
10
0
Fork 0
Tiedostot Ongelmat 0 Pull-pyynnöt 0 Wiki
Puu: d90883a8e2
Haarat Tagit
VIP33
/
Web
/
robots.txt

robots.txt 78 B
Historia Raaka

12345 
  1. # www.robotstxt.org/
    2. 

  2. 

  3. # Allow crawling of all content
    4. 

  4. User-agent: *
    5. 

  5. Disallow:
    6.