robots.txt i sitemapa - jak to powinno byc Opcje

[robert1974]

witam.
Pewnie problemy sa oczywiste, ale w googlach szukam i nie wiem jak to powinno byc.

na domenie mojadomena.com mam 4 strony strona1,2,3,4 w kazdej plik index.php i katalog /pics ze zdjeciami ktore strona wyswietla.

Czyli wchodzac na strone podaje sie :
http://mojadomena.com/strona1/
http://mojadomena.com/strona2/
http://mojadomena.com/strona3/
http://mojadomena.com/strona4/

Strony 1,2,3 sa gotowe i chcialbym by google je zaczal widziec i indexowac. strona4 chcialbym by byla niewidoczna dla Agentow.

Storzylem plik robots.txt w ktorym pisze tak:

User-agent: *
Disallow: /mojadomena.com/strona4/
Allow: /mojadomena.com/strona1/
Allow: /mojadomena.com/strona2/
Allow: /mojadomena.com/strona3/

Pytanie1: nie wiem czy to Allow jest konieczne, moze tylko Disallow dla strony4 by wystarczylo, a moze wlasnie przez to Allow robie jakis problem?


chce stworzyc sitemape, uzywam do tego narzedzia: https://www.xml-sitemaps.com/ (choc inne co probowalem robia to samo) i zawsze dostaje cos takiego:

<?xml version="1.0" encoding="UTF-8"?>
<urlset
xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://www.sitemaps.org/schemas/sitemap/0.9
http://www.sitemaps.org/schemas/sitemap/0....p.xsd">
<!-- created with Free Online Sitemap Generator www.xml-sitemaps.com -->

<url>
<loc>http://mojadomena.com/</loc> <-- tu jest poprawna domena oczywiscie
<lastmod>2014-12-27T09:02:17+00:00</lastmod>
<changefreq>daily</changefreq>
</url>
</urlset>


Pytanie2: wyobrazam sobie ze w takiej sitemapie powinnienem miec wszystkie podkatalogie i katalogii strony a nie tylko taka jedna linijke. I ze jakies narzedzie stworzy mi taka strukture, a ja z niej usune tylko strone4 z podkatalogami strony4.

Co ja robie zle, lub rozumuje zle?

dziekuje za pomoc.

Ten post edytował robert1974 20.01.2015, 22:33:37

[trueblue]

Pytanie2: wyobrazam sobie ze w takiej sitemapie powinnienem miec wszystkie podkatalogie i katalogii strony a nie tylko taka jedna linijke. I ze jakies narzedzie stworzy mi taka strukture, a ja z niej usune tylko strone4 z podkatalogami strony4.

Wygeneruj sobie mapę skryptem php, albo statyczny plik, albo dynamiczny.
W robots.txt podaj adresy do map, można kilka.
Link w mapie może zawierać również lokalizację związanego z nim zdjęcia.

[robert1974]

Wygeneruj sobie mapę skryptem php, albo statyczny plik, albo dynamiczny.
W robots.txt podaj adresy do map, można kilka.
Link w mapie może zawierać również lokalizację związanego z nim zdjęcia.

jakims konkretnym skryptem php?
obecny sitemap wygenerowany www.xml-sitemaps.com zawiera po prostu link do strony glownej i 3 podstron. Zakladam (?) ze to co wewnatrz tych podstron to sobie juz google sam zaindeksuje, nie musze mu mowic gdzie sie znajduja obrazki czy fimy i jaka maja nazwe.

probuje doczytac co to znaczy statyczny albo dynamiczny.
linki mam zdefiniowane statyczne, jesli to o to chodzi. Nie zmieniaja sie.

w robots.txt dodalem wlasnie sitemap, dzieki.