2012/2/13 Jhonatan Sneider Salguero Villa <sney2...@gmail.com>:
> hola, que pena la insistencia, luego de buscar métodos para identificar
> fugas de memoria e intentado lo siguiente:
>
> * usando el modulo gc ver si el numero de objetos referenciados
> aumenta, pero este
> se mantiene estable.
>
> * luego de experimentar con otras paginas, puede que sea por el
> javascript contenido en la pagina:
>
>     * con poco javascript (menos de 100 lineas) el aumento en memoria
> es apenas notable (2MB) con 100 peticiones.
>     * con mucho javascript el aumento es de unos 20MB con apenas 30 
> peticiones.
>
> por el momento no he encontrado referencias a problemas similares (o
> puede ser mi habilidad de búsqueda)
>
> si tienen alguno recurso que pueda ser de ayuda les agradecería mucho.

No se si tendrá que ver, pero veo que para procesar cada archivo creas
un nuevo crawler y con el un nuevo webview. Sería mejor si mantuvieras
referencia a un solo crawler y un solo webview.

Saludos
-- 
Linux Registered User # 386081
A menudo unas pocas horas de "Prueba y error" podrán ahorrarte minutos
de leer manuales.
_______________________________________________
Python-es mailing list
Python-es@python.org
http://mail.python.org/mailman/listinfo/python-es
FAQ: http://python-es-faq.wikidot.com/

Responder a