Парсер тредов Двача

Построено на базе api2ch.

Скорость работы: 3Gb за 1 час работы

Работать можно как с Jupyter так и из консоли

Запуск

git clone https://github.com/mr8bit/dvach_parse.git

cd dvach_parse && virtualenv venv && source venv/bin/activate

pip install -r requirements.txt

Пример запуска из консоли:

Запустит парсер по всем доскам и тредам

python main.py --save_dir='./boards'

Запустит парсер по доскам b,hw

python main.py --board=b,hw --save_dir='./boards'