pgsql | Unsorted

Telegram-канал pgsql - pgsql – PostgreSQL

9404

Чат русскоязычного сообщества PostgreSQL, здесь мы обсуждаем технические вопросы, для поиска работы и предложения вакансий есть группа https://t.me/pgsqljobs For English discussion visit https://t.me/pg_sql

Subscribe to a channel

pgsql – PostgreSQL

Чтобы она ложылась периодически — этого мало!
(Если нет stp — сеть ляжэт сразу, если есть — чо ей будет...)

Читать полностью…

pgsql – PostgreSQL

Сеть отваливается. Судя по тому, что близко по времени несколько долгоиграющих соединений (и бейзбакап и просто реплика) — это дажэ не таймауты, это какая-то фигня со стэйтом (NAT, вероятно.) в середине передёргивается.

Читать полностью…

pgsql – PostgreSQL

поднять таймауты wal_receive/sender_timeout на мастере и реплике, чтобы не падало в ошибку. Или копать, почему таймаут срабатывает

Читать полностью…

pgsql – PostgreSQL

Добрый день

pg_basebackup прерывается

pg_basebackup: error: could not receive data from WAL stream: server closed the connection unexpectedly
This probably means the server terminated abnormally
before or while processing the request.
pg_basebackup: error: background process terminated unexpectedly


В логе постгресса вот такие строки
2026-07-16 04:55:08 MSK pg_basebackup 3367 postgres@[н/д] from [local] [vxid:37/0 txid:0] [streaming 1CE4/E0A586F8] СООБЩЕНИЕ:  завершение процесса передачи журнала из-за тайм-аута репликации
2026-07-16 04:55:08 MSK pg_basebackup 3367 postgres@[н/д] from [local] [vxid:37/0 txid:0] [streaming 1CE4/E0A586F8] ОПЕРАТОР: START_REPLICATION SLOT "pg_basebackup_3367" 1CE4/D0000000 TIMELINE 1
2026-07-16 04:55:21 MSK Set10 17183 postgres@set from 10.4.11.28 [vxid:2026-07-16 04:55:45 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] СООБЩЕНИЕ: не удалось послать данные клиенту: Обрыв канала
2026-07-16 04:55:45 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] ОПЕРАТОР: BASE_BACKUP ( LABEL 'pg_basebackup base backup', PROGRESS, WAIT 0, TABLESPACE_MAP, MANIFEST 'yes', TARGET 'client')
2026-07-16 04:55:47 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] ВАЖНО: подключение к клиенту потеряно
2026-07-16 04:55:47 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] ОПЕРАТОР: BASE_BACKUP ( LABEL 'pg_basebackup base backup', PROGRESS, WAIT 0, TABLESPACE_MAP, MANIFEST 'yes', TARGET 'client')
2026-07-16 04:55:47 MSK pg_basebackup 1175 postgres@[н/д] from [local] [vxid:36/0 txid:0] [sending backup "pg_basebackup base backup"] СООБЩЕНИЕ: временный файл: путь "base/pgsql_tmp/pgsql_tmp1175.0", размер 983040



Подскажите пожалуйста из-за чего такое происходит и как исправить?

Читать полностью…

pgsql – PostgreSQL

Быстрее будет ID. Только что от него толку, если на каждую станцию разных ID десятки если не сотни? Зачем плодить группы из-за того, что на станции закрылась или открылась пропарка вагонов или дефектоскопия колёсных пар?

Читать полностью…

pgsql – PostgreSQL

или айди, что чуть быстрее будет

Читать полностью…

pgsql – PostgreSQL

Не понятно при чём тут километры. И где источник? С какого года они опередили РФ?

Читать полностью…

pgsql – PostgreSQL

Если прибавить к США Канаду и Мексику, тогда они РФ обгонят. Но если к РФ прибавить только Казахстан, то отрыв в пользу РФ опять станет существенным.

Читать полностью…

pgsql – PostgreSQL

Штаты потому и штаты, что они все - разные государства, а задержки в доинтернетную эпоху были достаточные, чтобы их учитывать в модели. Решение лежит в осмыслении предметной области.

Читать полностью…

pgsql – PostgreSQL

У них оборот вагонов, какой ржд и не снился даже в лучшие времена, и проверенные временем модели данных. Еще с тех времен, когда доступ к мейнфреймам стоил больших денег.

Читать полностью…

pgsql – PostgreSQL

Бедные американские железнодорожники. Как же они справляются то?

Читать полностью…

pgsql – PostgreSQL

Абстрактный вопрос. Смотря по каким операциям и с какими фильтрами будет выборка.
У меня есть витрина, которая еле успевает посчитаться с вечера пятницы до утра понедельника. Но там и прогнозирование на нескольких математических моделях с кроссвалидацией и поиск оптимумов в Gurobi.

Читать полностью…

pgsql – PostgreSQL

Сервер не помрет от горя?

Читать полностью…

pgsql – PostgreSQL

Ну и агрегируйте по этому атрибуту. В чём проблема?

Читать полностью…

pgsql – PostgreSQL

Ну ок. По стране хочу проагрегировать

Читать полностью…

pgsql – PostgreSQL

Вчерашнее. Добрый одмин соединил два тупых коммутатора двумя патчкордами. Сеть периодически ложилась. Обнаружили случайно, заметил частые переподключения к базе.
Иногда Postgres ни при чем, согласен.

Читать полностью…

pgsql – PostgreSQL

Спасибо, попробую, напишу о результате через какое-то время

Читать полностью…

pgsql – PostgreSQL

ключевое - "завершение процесса передачи журнала из-за тайм-аута репликации", те wal_sender_timeout срубает стрим пока basebackup долго копирует данные и не шлёт keepalive вовремя.

задери на сервере wal_sender_timeout (напр 0 или 3600s) и на клиенте используй -r/отдельный слот, либо --wal-method=fetch вместо stream чтобы вообще убрать параллельный wal-стрим. на медленном/загруженном диске это обычная причина.

Читать полностью…

pgsql – PostgreSQL

Так сложно все. Там же не понятно даже, что и как устроено. Тысячи таблиц в PostgreSQL, Clickhouse для исторических данных, но аналитика на оперативном PostgreSQL, куда через fdw тянутся данные из клика, при том, что через месяц все может поменяться (почему не наоборот, я так и не понял). Там еще и kafka. Тут черт ногу сломит, и, наверное, каждый по-своему, прав.

Читать полностью…

pgsql – PostgreSQL

Вернитесь к ключам, пожалуйста.

Читать полностью…

pgsql – PostgreSQL

Километры тут явно не при чём. Тонны тоже. Электрофикация тем более. Важны тонно-километры.

Читать полностью…

pgsql – PostgreSQL

РФ VS США
90 тыс. км VS 230 тыс. км
1.2 млрд тонн VS ~1.5 млрд тонн
51% электрификации VS 3% электрификации

Читать полностью…

pgsql – PostgreSQL

А с какого года они умудрились обогнать РЖД. А то я вижу совсем иное https://statbase.ru/datasets/air-rail-and-water-transportation/railways-goods/
США на третьем месте после Китая и России.

Читать полностью…

pgsql – PostgreSQL

У них нет движения по Монголии или Афганистану. А Мексика больше развита, чем даже Казахстан. Так что очень сомневаюсь, что у них бывают задержки в получении информации даже в дни, не то что в месяцы.

Читать полностью…

pgsql – PostgreSQL

А что у них? Они граничат всего с двумя странам, и обе эти страны во многом им подконтрольны

Читать полностью…

pgsql – PostgreSQL

А подготовка данных для этой витрины может и несколько часов длится, если для расчёта дельты приходится забираться на полгода назад из-за изменений в темпоральных таблицах относительно предыдущего расчёта. Тут как повезет. Дельта может быть и только за последнюю неделю, а может быть и за полгода

Читать полностью…

pgsql – PostgreSQL

Хотя о чем это я...всегда можно прикостылить асинхронную очередь расчетов...

Читать полностью…

pgsql – PostgreSQL

Ну..это пока. Корабли приходят и уходят а грузчики остаются.

Читать полностью…

pgsql – PostgreSQL

Мне настолько тупое руководство пока не попадалось. А если попадётся, то это будет повод выбить дополнительные ресуры )))

Читать полностью…

pgsql – PostgreSQL

Среди атрибутов станции есть участок, отделение, дорога, страна. Группируйте или фильтруйте по ним, если надо.

Читать полностью…
Subscribe to a channel