2012/2/13 Jhonatan Sneider Salguero Villa sney2...@gmail.com:
hola, que pena la insistencia, luego de buscar métodos para identificar
fugas de memoria e intentado lo siguiente:
* usando el modulo gc ver si el numero de objetos referenciados
aumenta, pero este
se mantiene estable.
* luego de experimentar con otras paginas, puede que sea por el
javascript contenido en la pagina:
* con poco javascript (menos de 100 lineas) el aumento en memoria
es apenas notable (2MB) con 100 peticiones.
* con mucho javascript el aumento es de unos 20MB con apenas 30
peticiones.
por el momento no he encontrado referencias a problemas similares (o
puede ser mi habilidad de búsqueda)
si tienen alguno recurso que pueda ser de ayuda les agradecería mucho.
No se si tendrá que ver, pero veo que para procesar cada archivo creas
un nuevo crawler y con el un nuevo webview. Sería mejor si mantuvieras
referencia a un solo crawler y un solo webview.
Saludos
--
Linux Registered User # 386081
A menudo unas pocas horas de Prueba y error podrán ahorrarte minutos
de leer manuales.
___
Python-es mailing list
Python-es@python.org
http://mail.python.org/mailman/listinfo/python-es
FAQ: http://python-es-faq.wikidot.com/
