Grandes scripts desde PHP. Como optimizar

Miguel
29 de Noviembre del 2005
Hola a todos,

Tengo un script en mi web que consulta los feed disponibles en 1400 blogs diferentes, los parsea, para cada uno de los articulos del feed comprueba que no exista ya en la BBDD, y en caso positivo lo añade.

Mi problema es que este script tarda muchisimo en ejecutarse como Cron Job en el servidor.

Alguien sabe alguna forma mas eficiente de hacer este tipo de procesos.

Me han comentado que agilizaría el proceso lo siguiente:
- Grabar los INSERTS a un fichero de texto, y lanzar todos juntos al final del proceso.
- Utilizar PERL en vez de PHP.

Espero sus respuestas.
Muchisimas gracias.
Un saludo.