Разработчик LanolStream оптимизировал сбор данных о русскоязычных стримах
Максим, разработчик сервиса LanolStream, значительно сократил объём данных при мониторинге русскоязычных стримов с Twitch и VK Видео Live, внедрив систему агрегации, которая позволила уменьшить количество строк в базе данных с миллионов до 2 млн за четыре недели.
Разработчик Максим, создатель инструментов для стримеров LanolStream, столкнулся с проблемой избыточного объёма данных при анализе русскоязычных трансляций на платформах Twitch и VK Видео Live. Ежедневный мониторинг, осуществляемый каждые 10 минут для 7 200 каналов, генерировал более миллиона строк данных в сутки, что приводило к быстрому росту базы.


Комментарии (0)
Без регистрации. Комментарии проверяются автоматически перед публикацией.
Пока нет комментариев. Будьте первым!