Vi aggiorno sulle mie avventure con asyncio/aiohttp.
Sono riuscito a capire come funziona e ho scritto uno scraper che funziona
bene (8000 pagine scrapate in meno di un'ora).

Il codice è qui:
https://bitbucket.org/lormayna/football_scraper/src/8473064d6c85e72b3e51d4ff20c65aad0c69a541/match_scraper_db.py?at=default&fileviewer=file-view-default

Ogni commento è ben accetto, il codice fa schifo, non ci sono commenti nè
docstring.

P.S.
Sono dovuto passare a MySQL perchè SQLite si incavolava con il multithread.
Anche qui ogni suggerimento è ben accetto.

-- 
LORENZO MAINARDI
http://blog.mainardi.me
_______________________________________________
Python mailing list
Python@lists.python.it
https://lists.python.it/mailman/listinfo/python

Rispondere a