Cross-Cleaner: стриминг JSON частями вместо загрузки всей базы очистки в память

habrahabr.ru · world
Full story

Cross-Cleaner has already done much of the work to reduce memory use. That work was not at the parsing level but at the level of data representation. The headline describes the approach as streaming JSON in parts instead of loading the entire cleaning database into memory.

Cross-Cleaner уже проделал большую часть работы по снижению памяти — но не на уровне парсинга, а на уровне представления данных : Читать далее

Read full article → Compare