Migración de datos de ClickHouse [tabla remota, copiadora de Clickhouse]

Clickhouse-copier es la herramienta oficial para la sincronización de datos. Se basa en zk para cumplir con escenarios de sincronización de datos entre clústeres.

Supongamos que queremos copiar table_dis del cluster 1 [ip1, ip2, ip3] al cluster 2 [IP4, IP5]. Table_dis es una tabla distribuida y la tabla de árbol de fusión correspondiente es table_local.

(1) ZK. XML

Crea el archivo zk.xml para copiar.

schema.xml

Las variables marcadas entre paréntesis deben reemplazarse según la situación real.

Ejecutar en IP1:

haga clic en house-copier copier-daemon-config ZK . XML-task-PATH/[ZK-haga clic en house-PATH/NODE]-base-dir /. [RUTA]-task-upload-force true-task-file esquema. XML

Se necesitan 30 segundos para probar 10 millones de datos en tres clústeres y escribirlos en dos clústeres.