Sirve el robots.txt

Hola gente, He dado de alta mi web y ya les vengo contando por aca y molestando un poco jejejeje, pero como todo nuevo necesito info.
No tengo este archivo en mi servidor, para que sirve?? si puse un archivo sitemap pero bueno consulto porque todavia no aparezco en google.
Por otro lado sigo los consejos de jorgens y me estoy dando de alta en directorio.
Gracias

El archivo robots.txt puede servirte para impedir que algunos buscadores indexen determinadas páginas de tu web. Por ejemplo, si tienes una sección privada o unas páginas de prueba que aún no te interesa que google indexe, lo indicas en ese archivo y los robots no la leeran.

Sirve para mas cosas, claro. :wink:

Gracias Jorgens!!! entonces si no lo tengo y no me interesa que los buscadores NO indexen algo particular esta todo bien?
Saludos,

entonces si no lo tengo y no me interesa que los buscadores NO indexen algo particular esta todo bien?
Saludos,

si, mas que todo se utiliza para ordenar a google bot que no indexe una determinada página.

Gracias Amigo!!!