9404
Чат русскоязычного сообщества PostgreSQL, здесь мы обсуждаем технические вопросы, для поиска работы и предложения вакансий есть группа https://t.me/pgsqljobs For English discussion visit https://t.me/pg_sql
Чтобы она ложылась периодически — этого мало!
(Если нет stp — сеть ляжэт сразу, если есть — чо ей будет...)
Сеть отваливается. Судя по тому, что близко по времени несколько долгоиграющих соединений (и бейзбакап и просто реплика) — это дажэ не таймауты, это какая-то фигня со стэйтом (NAT, вероятно.) в середине передёргивается.
Читать полностью…
поднять таймауты wal_receive/sender_timeout на мастере и реплике, чтобы не падало в ошибку. Или копать, почему таймаут срабатывает
Читать полностью…
Добрый день
pg_basebackup прерывается
pg_basebackup: error: could not receive data from WAL stream: server closed the connection unexpectedly
This probably means the server terminated abnormally
before or while processing the request.
pg_basebackup: error: background process terminated unexpectedly
2026-07-16 04:55:08 MSK pg_basebackup 3367 postgres@[н/д] from [local] [vxid:37/0 txid:0] [streaming 1CE4/E0A586F8] СООБЩЕНИЕ: завершение процесса передачи журнала из-за тайм-аута репликации
2026-07-16 04:55:08 MSK pg_basebackup 3367 postgres@[н/д] from [local] [vxid:37/0 txid:0] [streaming 1CE4/E0A586F8] ОПЕРАТОР: START_REPLICATION SLOT "pg_basebackup_3367" 1CE4/D0000000 TIMELINE 1
2026-07-16 04:55:21 MSK Set10 17183 postgres@set from 10.4.11.28 [vxid:2026-07-16 04:55:45 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] СООБЩЕНИЕ: не удалось послать данные клиенту: Обрыв канала
2026-07-16 04:55:45 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] ОПЕРАТОР: BASE_BACKUP ( LABEL 'pg_basebackup base backup', PROGRESS, WAIT 0, TABLESPACE_MAP, MANIFEST 'yes', TARGET 'client')
2026-07-16 04:55:47 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] ВАЖНО: подключение к клиенту потеряно
2026-07-16 04:55:47 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] ОПЕРАТОР: BASE_BACKUP ( LABEL 'pg_basebackup base backup', PROGRESS, WAIT 0, TABLESPACE_MAP, MANIFEST 'yes', TARGET 'client')
2026-07-16 04:55:47 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] СООБЩЕНИЕ: временный файл: путь "base/pgsql_tmp/pgsql_tmp1175.0", размер 983040
Быстрее будет ID. Только что от него толку, если на каждую станцию разных ID десятки если не сотни? Зачем плодить группы из-за того, что на станции закрылась или открылась пропарка вагонов или дефектоскопия колёсных пар?
Читать полностью…
Не понятно при чём тут километры. И где источник? С какого года они опередили РФ?
Читать полностью…
Если прибавить к США Канаду и Мексику, тогда они РФ обгонят. Но если к РФ прибавить только Казахстан, то отрыв в пользу РФ опять станет существенным.
Читать полностью…
Штаты потому и штаты, что они все - разные государства, а задержки в доинтернетную эпоху были достаточные, чтобы их учитывать в модели. Решение лежит в осмыслении предметной области.
Читать полностью…
У них оборот вагонов, какой ржд и не снился даже в лучшие времена, и проверенные временем модели данных. Еще с тех времен, когда доступ к мейнфреймам стоил больших денег.
Читать полностью…
Бедные американские железнодорожники. Как же они справляются то?
Читать полностью…
Абстрактный вопрос. Смотря по каким операциям и с какими фильтрами будет выборка.
У меня есть витрина, которая еле успевает посчитаться с вечера пятницы до утра понедельника. Но там и прогнозирование на нескольких математических моделях с кроссвалидацией и поиск оптимумов в Gurobi.
Ну и агрегируйте по этому атрибуту. В чём проблема?
Читать полностью…
Вчерашнее. Добрый одмин соединил два тупых коммутатора двумя патчкордами. Сеть периодически ложилась. Обнаружили случайно, заметил частые переподключения к базе.
Иногда Postgres ни при чем, согласен.
Спасибо, попробую, напишу о результате через какое-то время
Читать полностью…
ключевое - "завершение процесса передачи журнала из-за тайм-аута репликации", те wal_sender_timeout срубает стрим пока basebackup долго копирует данные и не шлёт keepalive вовремя.
задери на сервере wal_sender_timeout (напр 0 или 3600s) и на клиенте используй -r/отдельный слот, либо --wal-method=fetch вместо stream чтобы вообще убрать параллельный wal-стрим. на медленном/загруженном диске это обычная причина.
Так сложно все. Там же не понятно даже, что и как устроено. Тысячи таблиц в PostgreSQL, Clickhouse для исторических данных, но аналитика на оперативном PostgreSQL, куда через fdw тянутся данные из клика, при том, что через месяц все может поменяться (почему не наоборот, я так и не понял). Там еще и kafka. Тут черт ногу сломит, и, наверное, каждый по-своему, прав.
Читать полностью…
Километры тут явно не при чём. Тонны тоже. Электрофикация тем более. Важны тонно-километры.
Читать полностью…
РФ VS США
90 тыс. км VS 230 тыс. км
1.2 млрд тонн VS ~1.5 млрд тонн
51% электрификации VS 3% электрификации
А с какого года они умудрились обогнать РЖД. А то я вижу совсем иное https://statbase.ru/datasets/air-rail-and-water-transportation/railways-goods/
США на третьем месте после Китая и России.
У них нет движения по Монголии или Афганистану. А Мексика больше развита, чем даже Казахстан. Так что очень сомневаюсь, что у них бывают задержки в получении информации даже в дни, не то что в месяцы.
Читать полностью…
А что у них? Они граничат всего с двумя странам, и обе эти страны во многом им подконтрольны
Читать полностью…
А подготовка данных для этой витрины может и несколько часов длится, если для расчёта дельты приходится забираться на полгода назад из-за изменений в темпоральных таблицах относительно предыдущего расчёта. Тут как повезет. Дельта может быть и только за последнюю неделю, а может быть и за полгода
Читать полностью…
Хотя о чем это я...всегда можно прикостылить асинхронную очередь расчетов...
Читать полностью…
Ну..это пока. Корабли приходят и уходят а грузчики остаются.
Читать полностью…
Мне настолько тупое руководство пока не попадалось. А если попадётся, то это будет повод выбить дополнительные ресуры )))
Читать полностью…
Среди атрибутов станции есть участок, отделение, дорога, страна. Группируйте или фильтруйте по ним, если надо.
Читать полностью…