Soggetto a restrizioni da robots.txt

[Ares]

Dagli strumenti per webmaster di google trovo questa dicitura:

Codice: Seleziona tutto

Soggetto a restrizioni da robots.txt: 232

Gli url contenenti sono di questo tipo:

Codice: Seleziona tutto

http://www.musicainfinita.altervista.org/ucp.php?i=163
URL limitato da robots.txt	12/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=7&sk=t&sd=d&sr=topics&search_id=active_topics&start=600
URL limitato da robots.txt	12/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=54&start=70
URL limitato da robots.txt	12/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=64&start=100
URL limitato da robots.txt	12/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=54&start=680
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=54&start=60
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=2&start=570
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=2&start=70
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=2&start=50
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=54&start=50
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=2&start=60
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=64&start=120
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=64&start=90
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=64&start=110
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=62&start=200
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=62&start=190
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=62&start=180
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=62&start=170
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=7&sk=t&sd=d&sr=topics&search_id=active_topics&start=3000
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=7&sk=t&sd=d&sr=topics&search_id=active_topics&start=3075
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=0&sk=t&sd=d&sr=posts&author_id=54&start=690
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=7&sk=t&sd=d&sr=topics&search_id=active_topics&start=3050
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=7&sk=t&sd=d&sr=topics&search_id=active_topics&start=2975
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=7&sk=t&sd=d&sr=topics&search_id=active_topics&start=2925
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=7&sk=t&sd=d&sr=topics&search_id=active_topics&start=3025
URL limitato da robots.txt	11/gen/2012
http://www.musicainfinita.altervista.org/search.php?st=7&sk=t&sd=d&sr=topics&search_id=active_topics&start=2950

Mi chiedevo se questo è normale, sono le ottimizzazioni della Seo, giusto?
Questo è il mio robots:

Codice: Seleziona tutto

User-agent: *
Disallow: /index.php?
Disallow: /posting.php
Disallow: /search.php?
Disallow: /ucp.php
Disallow: /mcp.php
Disallow: /post
Disallow: /member
Disallow: /memberlist.php
Disallow: /faq.php

Grazie, Ares

[Tiger]

Praticamente,se non erro,poi qualcuno mi corregggera',allo stato attuale stai impedendo ai Robots/spider di visionare i seguenti file/info:

Codice: Seleziona tutto

/index.php?
 /posting.php
 /search.php?
 /ucp.php
 /mcp.php
 /post
 /member
 /memberlist.php
 /faq.php

Fossi in te(pareri personali,consiglio)
/posting.php//post li abiliterei (User-agent /posting.php//post)

[Ares]

Si, è il robots che ho trovato nella cartella Contrib della mod Seo. Non penso stia bloccando niente di fondamentale, pero' non vorrei sbagliarmi dato che il numero di restrinzioni sale di giorno in giorno.

[Haku]

Avevo fatto una domanda del genere anche io da qualche parte, ma il file a quanto pare è giusto...se è quello del SEO, così deve rimanere.

In caso, aspettiamo che qualcuno ci possa dare ulteriori info dato che anche io stesso non ho capito bene il funzionamento o se il file in questione è corretto.

[Angolo]

A me sembra che in quel robots.txt manchino elementi fondamentali, come viewtopic e viewforum. C'è un file robots.txt nativo della SEO e a quello, non si deve togliere nulla, semmai, aggiungere. Posto che si utilizzi Zero duplicati.

[Ares]

Tu si che hai buon occhio! Le avevo eliminate io, perche' tempo fa avevo letto nel supporto di quella mod che era meglio non utilizzare quel robot immediatamente, ma prima far reindirizzare i vecchi viwetopic a zero duplicati.
Credo che rimettero quello originale

[Angolo]

Ovviamente, è corretto quanto hai letto.. ma dopo 1-2 mesi, è il caso di inserire il robots.txt originale. Posto, si ribadisce, Zero duplicati.

[Ares]

Sono precisamente passati un mese e mezzo, credo sia ora. In questo modo saliranno i soggetti a restrinzione da robots, e posso totalmente ignorarlo allora.

[Haku]

Il file, se non ricordo male, deve essere inserito fuori dalla cartella forum?

[Ares]

Nella root.