Consulta sitemap.xml y robots.txt  

Hola,

He instalado JCrawler siguiendo uno de vuestros video-tutoriales y tengo algunas dudas al respecto.

Si ejecuto el proceso de JCrawler con la opción "Modify robots.txt
file in joomla root, which contains the sitemap location. robots.txt must be writetable" seleccionada, obtengo el siguiente error:

Fatal error: Cannot pass parameter 2 by reference in /home/mydoctor/public_html/maqueta/administrator/components/com_jcrawler/admin.jcrawler.php on line 189

robots.txt tiene permiso 644 (verificado por cPanel).

Si en cambio, ejecuto el proceso JCrawler sin esa casilla marcada funciona correctamente, pero posteriormente si edito el fichero robots.txt no veo ningún tipo de cambio. Este es el contenido de robots.txt:

# If the Joomla site is installed within a folder such as at
# e.g. www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. www.example.com/robots.txt
# AND the joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
#  http://www.robotstxt.org/orig.html 
#
# For syntax checking, see:
#  http://www.sxw.org.uk/computing/robots/check.html 

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/

La siguiente duda al respecto es sobre el fichero sitemap.xml, ¿dentro de este fichero debería ver todo el árbol de contenidos del sitio?, ya que una vez editado solo encuentro la URL del raíz y el raíz de idioma Ingles.


	
		
		    http://mydoctor-cp46.webjoomla.es/maqueta/ 
		   2012-01-27T08:03:24Z
		   weekly
		   1.0
		
		
		    http://mydoctor-cp46.webjoomla.es/maqueta/index.php/en/ 
		   2012-01-27T08:03:24Z
		   weekly
		   0.66
		
	

Muchas gracias por vuestra ayuda.