Эволюция архитектур систем статистики

Эволюция архитектур систем статистики
В последние годы продолжается быстрый рост производительности процессоров и оперативной памяти. Вместе с тем производительность и скорость работы жестких дисков практически не возрастает. С этим связаны изменения в подходах к построению систем, работающих с высокой нагрузкой.
Местом хранения данных становится не жесткий диск, а оперативная память – её объемы позволяют, при эффективном хранении, размещать там достаточное количество данных. Например статистика LiveInternet хранит всю информацию за текущий день, а это более 230 млн просмотренных страниц.
Пример старой архитектуры – TopMail (бывший TopList), где в оперативной памяти хранятся только последние просмотры.
Разделение задачи статистики на онлайновую статистику(которая генерируется по мере работы) и анализ логов – обработку «сырых» данных по запросу пользователя.