Bueno dentro de lo que te comentan, debes revisar la carga de los scripts. También te recomiendo usar el WP-Cache o algún plugin similar, ordenar tus archivos de imagen, js, css y así vas reduciendo la carga.

También puedes probar con las opciones de los servicios de amazon cloud services.

Saludos!

Carlos Varela

wordpress.cl