Партиционирование в PostgreSQL

[sire]

Они удаляются в момент удаления из фронтенда Наверное вопрос был не совсем корректен, сорри.

Кстати, одна из таблиц которая теряет смысл своего содержимого это housekeeper при отключении хаускипера.
Она используется хаускипером для контроля удаления присутствующей истории УЖЕ удаленных айтемов. В схема с партишинингом эта таблица будет содержать определенные данные, которые никак не будут использоваться, количесво записей будет медленно расти по мере изменений конфигурации (удалении айтемов).
При обычном функционировании (с хаускипером) эта таблица большинство времени пуста, и только иногда там на некоторое время появляются данные.

При включенном хаускипере не раз видел в логах запись вроде "Housekeeper deleted: ... 125000 records of deleted items,..."

[dotneft]

После эксплуатации Zabbix (600 items/sec) в конфигурации с партиционированием Postgres, появились некоторые соображения и замечания по поводу предложенной схемы. Коротко опубликовал их в блоге (english):

http://crypt47.bl0gspot.com/2012/05/partitioning-of-zabbix-database.html

p.s.
ссылки запрещены, так что вот в таком вот виде. Нужно заменить ноль в bl0g на "o".

Да согласен, исправил в wiki.

[novoselov.ai]

Имеет ли смысл использование патча

http://www.zabbix.com/forum/showpost.php?p=92593&postcount=21

в версии 1.8.13 ?

Может казаться, но загрузка на базу большая.

[dotneft]

Имеет ли смысл использование патча

http://www.zabbix.com/forum/showpost.php?p=92593&postcount=21

в версии 1.8.13 ?

Может казаться, но загрузка на базу большая.

Не имеет смысла, там уже встроен патч исправляющий эту проблему.

[zalex_ua]

Имеет ли смысл использование патча

http://www.zabbix.com/forum/showpost.php?p=92593&postcount=21

в версии 1.8.13 ?

Может казаться, но загрузка на базу большая.

Пожалуйста поподробней, что значит ваше "Может казаться" ?
Вы обновились или что? что изменилось?
опишите пожалуйста все.

[fixxxer78]

Здравствуйте!

Огромное спасибо dotneft за столь подробное руководство по использованию разбиений в БД zabbix!

В данный момент я настраиваю связку zabbix 2.0 с PostgreSQL 9.1 по этому руководству. Удалил внешние ключи, появившиеся в схеме 2.0 и относящиеся к таблицам с разбиениями. Как Postgres DBA я можно сказать никакой, поэтому возникли некоторые вопросы по предлагаемой реализации.

1. При вставке записи, вызывающей срабатывание триггера на создание разбиения (то есть первой записи за новый временной интервал), в любую из таблиц с разбиениями, эта первая запись попадает в основную таблицу, а не в созданную таблицу-разбиение. Все следующие записи попадают уже в таблицу-разбиение согласно созданному RULE. Я что-то неправильно сделал/настроил или чего-то не хватает в триггерной функции?

2. Есть таблица auditlog_details, связанная с таблицей auditlog, но без поля clock. Это не позволяет воспользоваться шаблонами функций для создания ее в разбиения. В свою очередь, использование разбиения таблицы auditlog не позволяет использовать внешние ключи на нее. Каким образом правильно производить удаление устаревших записей из этой таблицы?

Хотел бы получить комментарии/советы по данным вопросам.

[dotneft]

2. Есть таблица auditlog_details, связанная с таблицей auditlog, но без поля clock. Это не позволяет воспользоваться шаблонами функций для создания ее в разбиения. В свою очередь, использование разбиения таблицы auditlog не позволяет использовать внешние ключи на нее. Каким образом правильно производить удаление устаревших записей из этой таблицы?

Можно попробовать добавить эту колонку и сделать секционирование по ней тоже. Но я этого не тестил.

[dotneft]

Обновил мануал для использования его для 2.0 версии. Вопросы, предложения приветствуются.

[saa]

Обновил мануал для использования его для 2.0 версии. Вопросы, предложения приветствуются.

Добрый день.

Спасибо за мануал.

У меня периодически выскакивают deadlockи, сегодня получил новый - http://paste.kde.org/537590/

Вы не могли бы помочь?

[dotneft]

Насколько часто?

Я такое замечал только при попытке создания новой партиции, т.е. на стыке суток в 00:00 примерно.

[saa]

Насколько часто?

Я такое замечал только при попытке создания новой партиции, т.е. на стыке суток в 00:00 примерно.

Конкретно такое - http://paste.kde.org/537590/, первый раз.

Было еще при update для таблицы items.

Кстати, видел здесь на форуме, что надо как-то тюнить таблицы items и triggers, можете ,что-нибудь подсказать, на что обратить внимание?

[Psycho]

Доброго времени суток.
В базах данных я ещё весьма зелён, но попытался всё сделать по вашему мануалу (за который большое спасибо).
Всё делал на чистой базе (zabbix ver 2.0.2). Прописал партиции только для таблицы history (для пробы) и получаю следующую картину:
При вводе данных, строка, которая инициирует функцию создания новой дочерней таблицы, попадает не в созданную дочернюю таблицу, а в мастер таблицу. И следовательно когда дропается устаревшая таблица, то остаётся запись в мастер таблице, хотя их там (как я понял) вообще не должно быть.

[AbyssMoon]

Доброго времени суток.
Предстоит отказаться от хаускиппера в пользу партиционирования, подскажите, скриптик с первой страницы работает с Zabbix 2.0.3 и PostgreSQL 9.2.1 ?

[glebofff]

Прошло много лет, в постгресе появился create table ... like ... including, и, скорее всего, функции для копирования индексов и констрейнтов уже не нужны. Если только для универсальности или обратной совместимости.

Я, совсем заколебавшись бороться с заббиксом и дедлоками, даже и не вспомнил о партиционировании. Приятно видеть, что кому-то пригодилось. :-)