Utilizando las herramientas de webmaster de google seguimos teniendo problemas con el sitemap generado por el plugin XML Sitemap Generator. La advertencia en la que se dice que la URL de un sitemap presenta un tiempo de repuesta muy alto

Algunas de las URL que aparecen en este sitemap presentan un tiempo de respuesta prolongado. Ello puede indicar que existe un problema relacionado con el servidor o con el contenido de la pagina

Haciendo pruebas con la herramienta de velocidad de carga aparece dentro de los valores normales en relacion a las otras paginas

Apesar de estos datos Google insiste en diagnosticar que es un problema del servidor y recomienda seguir las indicaciones de esra guia

https://developers.google.com/speed/docs/insights/Server