Generuj reguły robots.txt zezwalające wszystkim, blokujące wszystkich lub własne, z opcjonalną linią sitemapy.