Scribd Logo
Fazer o upload

Bem-vindo(a) ao Scribd!

  • Robots

    Enviado por

    danchristiano
    11 visualizações1 página

    Título original

    robots.txt

    Direitos autorais

    © © All Rights Reserved

    Formatos disponíveis

    TXT, PDF, TXT ou leia online no Scribd

    Você considera este documento útil?

    Este conteúdo é inapropriado?

    Denunciar este documento

    Direitos autorais:

    © All Rights Reserved
    Baixe no formato TXT, PDF, TXT ou leia online no Scribd
    Sinalizar o conteúdo como inadequado
    11 visualizações1 página

    Robots

    Enviado por

    danchristiano

    Direitos autorais:

    © All Rights Reserved
    Baixe no formato TXT, PDF, TXT ou leia online no Scribd
    Sinalizar o conteúdo como inadequado
    de 1

    # www.robotstxt.

    org/

    # Allow crawling of all content


    User-agent: *
    Disallow:

    Você também pode gostar