Síla vebu , není vyplněno robots.txt a sitemap. Jak to doplnit?

Vytvořit ty soubory a nahrát je na FTP.
robots.txt by ti možná stačil s obsahem

User-Agent: *
Allow: /

říká, že všichni roboti mohou všude. Víc o robots.txt je tady
robots-txt.html

sitemap.xml si vygeneruješ zase třeba tady, stáhneš a vložíš na FTP.
www.xml-sitemaps.com

Ja se prifarim k dotazu. Zkusil jsem ten sitemap a funguje to jen do max 500 stranek. Da se nekde vytvorit sitemap s neomezenym poctem stranek? Potrebuju jich vic. Myslim neco free a co si to vytvori samo automaticky jako na tom odkazu.

To netuším. Nikdy jsem jich tolik, aby se mi to nevešlo neměl.

Google ma nejakej nástroj, netestoval jsem ho, ale snad ti to pomůže.

http://code.google.com/p/googlesitemapgenerator/

Jinak pravidla pro sitemap jsou taky na Googlu přístupná:

www.google.com/support/webmasters/bin/answer.py?answer=156184&hl=cs