4 Preparando la tabla de registro de auditoría para particionado

Descripción general

Algunas bases de datos (por ejemplo, MySQL) requieren que la columna de partición sea parte de la "constraint" única de la tabla. Por lo tanto, para particionar la tabla auditlog por tiempo, la clave principal debe cambiarse de auditid a una clave compuesta auditid + clock.

Esta sección proporciona instrucciones para modificar la clave principal de la tabla "auditlog".

Las instrucciones proporcionadas en esta página están diseñadas para usuarios avanzados. Tenga en cuenta que es posible que sea necesario ajustar estas instrucciones para su configuración específica. La modificación de la clave principal también puede ser incompatible con futuros parches de actualización, por lo que puede ser necesario gestionar manualmente futuras actualizaciones.

Modificar la clave principal puede ser una operación que consume muchos recursos y lleva mucho tiempo dependiendo del tamaño de la tabla "auditlog". Se recomienda detener el servidor Zabbix y cambiar la interfaz de Zabbix a modo de mantenimiento durante el momento de la modificación. Sin embargo, si es absolutamente necesario, existe una manera de modificar la clave principal sin tiempo de inactividad (ver más abajo).

Particionar la tabla auditlog puede mejorar, por ejemplo, el mantenimiento en configuraciones grandes. Aunque actualmente la limpieza de Zabbix no puede aprovechar las tablas particionadas (excepto para TimescaleDB), puede deshabilitar el mantenimiento de Zabbix y eliminar particiones mediante scripts.

Desde Zabbix 7.0, la tabla auditlog para TimescaleDB se ha convertido en una hipertabla, lo que permite al encargado de mantenimiento eliminar datos en fragmentos. Para actualizar la tabla auditlog existente a una hipertabla, consulte Actualización del esquema de TimescaleDB.

MySQL

Notas importantes sobre la reconstrucción de índices

MySQL reconstruye automáticamente los índices de la clave primaria durante la operación ALTER TABLE. Sin embargo, se recomienda encarecidamente reconstruir también manualmente los índices con la instrucción OPTIMIZE TABLE para garantizar un rendimiento óptimo de la base de datos.

La reconstrucción de índices puede requerir temporalmente tanto espacio adicional en disco como el que utiliza la propia tabla. Para obtener el tamaño actual de los datos y los índices, puede ejecutar las siguientes instrucciones:

ANALYZE TABLE auditlog;
SHOW TABLE STATUS LIKE 'auditlog';

Si el espacio disponible en disco es una preocupación, siga las instrucciones de Alterar la clave primaria sin tiempo de inactividad. También hay otras opciones disponibles:

  • Aumentar el parámetro de MySQL sort_buffer_size puede ayudar a reducir el uso de espacio en disco al reconstruir manualmente los índices. Sin embargo, modificar esta variable puede afectar al uso general de memoria de la base de datos.
  • Considere liberar espacio eliminando datos potencialmente innecesarios.
  • Considere reducir el parámetro Período de almacenamiento de datos de housekeeper antes de ejecutar el housekeeper.
Alteración de la clave primaria con tiempo de inactividad

1. Elimine la clave primaria actual de la tabla auditlog y agregue la nueva clave primaria.

ALTER TABLE auditlog DROP PRIMARY KEY, ADD PRIMARY KEY (auditid, clock);

2. Reconstruya los índices (opcional, pero muy recomendable; consulte Notas importantes sobre la reconstrucción de índices).

OPTIMIZE TABLE auditlog;
Alteración de la clave primaria sin tiempo de inactividad

Aquí se describe el método manual para alterar la clave primaria. Como alternativa, puede usar el toolkit pt-online-schema-change de Percona. Este toolkit realiza automáticamente las siguientes acciones, al mismo tiempo que minimiza el espacio utilizado para alterar la tabla auditlog.

1. Crear una nueva tabla con la nueva clave primaria y crear índices.

CREATE TABLE `auditlog_new` (
  `auditid`            varchar(25)                               NOT NULL,
  `userid`             bigint unsigned                           NULL,
  `username`           varchar(100)    DEFAULT ''                NOT NULL,
  `clock`              integer         DEFAULT '0'               NOT NULL,
  `ip`                 varchar(39)     DEFAULT ''                NOT NULL,
  `action`             integer         DEFAULT '0'               NOT NULL,
  `resourcetype`       integer         DEFAULT '0'               NOT NULL,
  `resourceid`         bigint unsigned                           NULL,
  `resource_cuid`      varchar(25)                               NULL,
  `resourcename`       varchar(255)    DEFAULT ''                NOT NULL,
  `recordsetid`        varchar(25)                               NOT NULL,
  `details`            longtext                                  NOT NULL,
  PRIMARY KEY (auditid,clock)
) ENGINE=InnoDB;
CREATE INDEX `auditlog_1` ON `auditlog_new` (`userid`,`clock`);
CREATE INDEX `auditlog_2` ON `auditlog_new` (`clock`);
CREATE INDEX `auditlog_3` ON `auditlog_new` (`resourcetype`,`resourceid`);

2. Intercambiar las tablas.

RENAME TABLE auditlog TO auditlog_old, auditlog_new TO auditlog;

3. Copiar los datos de la tabla antigua a la nueva.

INSERT INTO auditlog SELECT * FROM auditlog_old;

Esto se puede hacer en fragmentos (varias instrucciones INSERT INTO con cláusulas WHERE clock según sea necesario) para evitar un uso excesivo de recursos.

4. Eliminar la tabla antigua.

DROP TABLE auditlog_old;

PostgreSQL

Notas importantes sobre la reconstrucción de índices

PostgreSQL reconstruye automáticamente los índices de la clave primaria durante la operación ALTER TABLE. Sin embargo, se recomienda encarecidamente reconstruir también manualmente los índices con la instrucción REINDEX TABLE CONCURRENTLY para garantizar un rendimiento óptimo de la base de datos.

La reconstrucción de índices puede requerir temporalmente hasta tres veces el espacio en disco que utilizan actualmente los índices. Para obtener el tamaño actual de los índices, puede ejecutar la siguiente consulta:

SELECT pg_size_pretty(pg_indexes_size('auditlog'));

Si el espacio en disco disponible es una preocupación, siga las instrucciones de Alterar la clave primaria sin tiempo de inactividad. También hay otras opciones disponibles:

  • Aumentar el parámetro de PostgreSQL maintenance_work_mem puede ayudar a reducir el uso de espacio en disco al reconstruir índices manualmente. Sin embargo, modificar esta variable puede afectar el uso general de memoria de la base de datos.
  • Si dispone de otro disco o tablespace con más espacio disponible, puede considerar cambiar la ubicación del almacenamiento temporal para la reconstrucción del índice. Puede establecer el parámetro de PostgreSQL temp_tablespaces para especificar un tablespace diferente para objetos temporales.
  • Considere liberar espacio eliminando datos potencialmente innecesarios.
  • Considere reducir el parámetro Período de almacenamiento de datos housekeeper antes de ejecutar el housekeeper.
Alteración de la clave primaria con tiempo de inactividad

1. Elimine la clave primaria actual de la tabla auditlog y agregue la nueva clave primaria.

ALTER TABLE auditlog DROP CONSTRAINT auditlog_pkey;
ALTER TABLE auditlog ADD PRIMARY KEY (auditid,clock);

2. Reconstruya los índices (opcional, pero muy recomendable; consulte Notas importantes sobre la reconstrucción de índices).

REINDEX TABLE CONCURRENTLY auditlog;
Alteración de la clave primaria sin tiempo de inactividad

Aquí se describe el método manual para alterar la clave primaria. Como alternativa, se puede considerar la extensión pg_repack para crear una nueva tabla, copiar los datos e intercambiar las tablas.

1. Cree una nueva tabla con la nueva clave primaria y cree los índices.

CREATE TABLE auditlog_new (
  auditid              varchar(25)                               NOT NULL,
  userid               bigint                                    NULL,
  username             varchar(100)    DEFAULT ''                NOT NULL,
  clock                integer         DEFAULT '0'               NOT NULL,
  ip                   varchar(39)     DEFAULT ''                NOT NULL,
  action               integer         DEFAULT '0'               NOT NULL,
  resourcetype         integer         DEFAULT '0'               NOT NULL,
  resourceid           bigint                                    NULL,
  resource_cuid        varchar(25)                               NULL,
  resourcename         varchar(255)    DEFAULT ''                NOT NULL,
  recordsetid          varchar(25)                               NOT NULL,
  details              text            DEFAULT ''                NOT NULL,
  PRIMARY KEY (auditid,clock)
);
CREATE INDEX auditlog_new_1 ON auditlog_new (userid,clock);
CREATE INDEX auditlog_new_2 ON auditlog_new (clock);
CREATE INDEX auditlog_new_3 ON auditlog_new (resourcetype,resourceid);

2. Intercambie las tablas.

ALTER TABLE auditlog RENAME TO auditlog_old;
ALTER TABLE auditlog_new RENAME TO auditlog;

3. Copie los datos de la tabla antigua a la nueva.

INSERT INTO auditlog SELECT * FROM auditlog_old;

Esto se puede hacer en fragmentos (varias instrucciones INSERT INTO con cláusulas WHERE clock, según sea necesario) para evitar un uso excesivo de recursos.

4. Elimine la tabla antigua.

DROP TABLE auditlog_old;

Oracle

Notas importantes sobre la reconstrucción de índices

Oracle reconstruye automáticamente los índices de la clave primaria durante la operación ALTER TABLE. Sin embargo, se recomienda encarecidamente reconstruir también manualmente los índices con las instrucciones ALTER INDEX <index> REBUILD PARALLEL para garantizar un rendimiento óptimo de la base de datos.

La reconstrucción de índices puede requerir temporalmente una cantidad significativa de espacio en disco.

Si el espacio disponible en disco es una preocupación, siga las instrucciones de Alterar la clave primaria sin tiempo de inactividad. También hay otras opciones disponibles:

  • Aumentar el parámetro de Oracle SORT_AREA_SIZE puede ayudar a reducir el uso de espacio en disco al reconstruir manualmente los índices. Sin embargo, modificar esta variable afectará el uso total de memoria de la base de datos.
  • Puede establecer el grado de paralelismo mediante la cláusula PARALLEL, por ejemplo: ALTER INDEX auditlog_1 REBUILD PARALLEL 4
  • Considere liberar espacio eliminando datos potencialmente innecesarios.
  • Considere reducir el parámetro Data storage period housekeeper antes de ejecutar el housekeeper.
Alteración de la clave primaria con tiempo de inactividad

1. Obtenga el nombre de la restricción.

SELECT CONSTRAINT_NAME FROM all_constraints WHERE TABLE_NAME = 'AUDITLOG' AND CONSTRAINT_TYPE = 'P';

2. Elimine la clave primaria actual de la tabla auditlog y agregue la nueva clave primaria.

ALTER TABLE auditlog DROP CONSTRAINT <constraint_name>;
ALTER TABLE auditlog ADD CONSTRAINT auditlog_pk PRIMARY KEY (auditid, clock);

3. Reconstruya los índices (opcional, pero muy recomendable; consulte Notas importantes sobre la reconstrucción de índices).

3.1. Obtenga los nombres de los índices.

SELECT index_name FROM user_indexes WHERE table_name='AUDITLOG';

3.2. Reconstruya cada índice.

ALTER INDEX auditlog_pk REBUILD PARALLEL;
ALTER INDEX auditlog_1 REBUILD PARALLEL;
ALTER INDEX auditlog_2 REBUILD PARALLEL;
ALTER INDEX auditlog_3 REBUILD PARALLEL;
Alterar la clave primaria sin tiempo de inactividad

1. Crear una nueva tabla con la nueva clave primaria y crear índices.

CREATE TABLE auditlog_new (
  auditid              nvarchar2(25)                             ,
  userid               number(20)                                NULL,
  username             nvarchar2(100)  DEFAULT ''                ,
  clock                number(10)      DEFAULT '0'               NOT NULL,
  ip                   nvarchar2(39)   DEFAULT ''                ,
  action               number(10)      DEFAULT '0'               NOT NULL,
  resourcetype         number(10)      DEFAULT '0'               NOT NULL,
  resourceid           number(20)                                NULL,
  resource_cuid        nvarchar2(25)                             ,
  resourcename         nvarchar2(255)  DEFAULT ''                ,
  recordsetid          nvarchar2(25)                             ,
  details              nclob           DEFAULT ''                ,
  PRIMARY KEY (auditid,clock)
);
CREATE INDEX auditlog_new_1 ON auditlog_new (userid,clock);
CREATE INDEX auditlog_new_2 ON auditlog_new (clock);
CREATE INDEX auditlog_new_3 ON auditlog_new (resourcetype,resourceid);

2. Intercambiar las tablas.

ALTER TABLE auditlog RENAME TO auditlog_old;
ALTER TABLE auditlog_new RENAME TO auditlog;

3. Copiar los datos de la tabla antigua a la nueva.

INSERT INTO auditlog SELECT * FROM auditlog_old;

Esto se puede hacer en fragmentos (varias instrucciones INSERT INTO con cláusulas WHERE clock según sea necesario) para evitar un uso excesivo de recursos.

4. Eliminar la tabla antigua.

DROP TABLE auditlog_old;

Ver también