описанная задача напоминает теорему про сферического коня в вакууме. И да, по моему, идет подмена понятия, что такое кэш. Речь то идет про что то вроде "храним старых данных что бы проверять что то"
но, если абстрагироваться, то
если надо тупо чекать имя юзверя, обрабатывали или нет раньше - то и 10 000 есть смысл хранить в памяти. Да, сколько угодно можно хранить в памяти, пока она не кончится. Только надо понимать, что это будет хранится только пока скрипт работает. Стопнулся скрипт - очистилась память.
Если надо что то независимое, то, есть смысл посмотреть на что то вроде Redis. У меня есть реализация фильтра дублей, 1 млрд ID'шек на 40 символов каждая весит 68 Гб. Проверка на дубли идет со скоростью, что то около 5 тыс проверок в секунду....
Читать полностью…
чат гпт говорит что если хранить кеш в оперативной памяти и проверять есть ли кто-то из 50 юзеров в кеше будет быстрее
Читать полностью…
на самом деле пофиг как главное чтоб оно работало и давало перфоманс
Читать полностью…
Я б не назвал хранение результата функции громким словом кеширование
Читать полностью…
то есть кеширование будет иметь смысл?
Читать полностью…
невалидных из 50 юзеров где то 95% то есть большая часть не подходит
Читать полностью…
есть скрапер, каждый запрос на категорию я паршу json ответ с которого получаю масив в 50 юзеров
Читать полностью…
подскажите как понять будет кеширование полезным? уже есть готовый парсер но скорость не очень, я думаю стоит ли делать кеш функцию которая будет неподходящие результаты сохранять, чтоб в дальнейшем не тратить время на проверку юзеров
Читать полностью…
если б оно одноразово было... а тут надо сервис замутить
Читать полностью…
бегло просмотрел, где-то на 70% того что нужно там точно нашел
Читать полностью…
А, ты вообще не собираешься питон юзать 😁
Читать полностью…
точно, я чето не обратил внимание что он есть, извиняюсь
Читать полностью…
Что работает, то и используй
Читать полностью…
а что насчет вот базовых таких моментов, которые в соо? (или это коммерческая тайна?)
Читать полностью…
1045