Cross-Cleaner: стриминг JSON частями вместо загрузки всей базы очистки в память
Full story
Cross-Cleaner has already done much of the work to reduce memory use. That work was not at the parsing level but at the level of data representation. The headline describes the approach as streaming JSON in parts instead of loading the entire cleaning database into memory.
Cross-Cleaner уже проделал большую часть работы по снижению памяти — но не на уровне парсинга, а на уровне представления данных : Читать далее