robots.txt i sitemapa - jak to powinno byc Opcje

[robert1974]

witam.
Pewnie problemy sa oczywiste, ale w googlach szukam i nie wiem jak to powinno byc.

na domenie mojadomena.com mam 4 strony strona1,2,3,4 w kazdej plik index.php i katalog /pics ze zdjeciami ktore strona wyswietla.

Czyli wchodzac na strone podaje sie :
http://mojadomena.com/strona1/
http://mojadomena.com/strona2/
http://mojadomena.com/strona3/
http://mojadomena.com/strona4/

Strony 1,2,3 sa gotowe i chcialbym by google je zaczal widziec i indexowac. strona4 chcialbym by byla niewidoczna dla Agentow.

Storzylem plik robots.txt w ktorym pisze tak:

User-agent: *
Disallow: /mojadomena.com/strona4/
Allow: /mojadomena.com/strona1/
Allow: /mojadomena.com/strona2/
Allow: /mojadomena.com/strona3/

Pytanie1: nie wiem czy to Allow jest konieczne, moze tylko Disallow dla strony4 by wystarczylo, a moze wlasnie przez to Allow robie jakis problem?


chce stworzyc sitemape, uzywam do tego narzedzia: https://www.xml-sitemaps.com/ (choc inne co probowalem robia to samo) i zawsze dostaje cos takiego:

<?xml version="1.0" encoding="UTF-8"?>
<urlset
xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://www.sitemaps.org/schemas/sitemap/0.9
http://www.sitemaps.org/schemas/sitemap/0....p.xsd">
<!-- created with Free Online Sitemap Generator www.xml-sitemaps.com -->

<url>
<loc>http://mojadomena.com/</loc> <-- tu jest poprawna domena oczywiscie
<lastmod>2014-12-27T09:02:17+00:00</lastmod>
<changefreq>daily</changefreq>
</url>
</urlset>


Pytanie2: wyobrazam sobie ze w takiej sitemapie powinnienem miec wszystkie podkatalogie i katalogii strony a nie tylko taka jedna linijke. I ze jakies narzedzie stworzy mi taka strukture, a ja z niej usune tylko strone4 z podkatalogami strony4.

Co ja robie zle, lub rozumuje zle?

dziekuje za pomoc.

Ten post edytował robert1974 20.01.2015, 22:33:37