Implementierung von Diensten im Docker für den Zugriff auf Hostdienste

Version: "3"
 
Leistungen:
  postgres:
    Bild: failymao/postgres:12.7
    Containername: postgres
    Neustart: sofern nicht gestoppt
    privilegiert: true # Docker-Compose-Umgebungsdatei festlegen Befehl: [ "-c", "config_file=/var/lib/postgresql/postgresql.conf", "-c", "hba_file=/var/lib/postgresql/pg_hba.conf" ]
    Bände:
      - ./config/postgresql.conf:/var/lib/postgresql/postgresql.conf
      - ./config/pg_hba.conf:/var/lib/postgresql/pg_hba.conf
    Umfeld:
      POSTGRES_PASSWORD: abc123
      POSTGRES_USER: postgres
      POSTGRES_PORT: 15432
      POSTGRES_HOST: 127.0.0.1
    Gesundheitscheck:
      Test: sh -c "sleep 5 && PGPASSWORD=abc123 psql -h 127.0.0.1 -U postgres -p 15432 -c '\q';"
      Intervall: 30s
      Zeitüberschreitung: 10 s
      Wiederholungsversuche: 3
    Netzwerkmodus: "Host"
 
  Tierpfleger:
    Bild: failymao/zookeeper:1.4.0
    Containername: Zookeeper
    Neustart: immer
    Netzwerkmodus: "Host"
 
  Kafka:
    Bild: failymao/kafka:1.4.0
    Containername: Kafka
    Neustart: immer
    hängt ab von:
      - Tierpfleger
    Umfeld:
      KAFKA_ADVERTISED_HOST_NAME: kafka
      KAFKA_ZOOKEEPER_CONNECT: localhost:2181
      KAFKA_LISTENERS: PLAINTEXT://127.0.0.1:9092
      KAFKA_ADVERTISED_LISTENERS: PLAINTEXT://127.0.0.1:9092
      KAFKA_BROKER_ID: 1
      KAFKA_LOG_RETENTION_HOURS: 24
      KAFKA_LOG_DIRS: /data/kafka-data #Daten mountnetwork_mode: "host"
 
  Produzent:
    hängt ab von:
      - Redis
      - Kafka
      - Tierpfleger
    Bild: long2ice/synch
    Containername: Produzent
    Befehl: sh -c "
      30 schlafen &&
      synch --alias pg2ch_test produzieren"
    Bände:
      - ./synch.yaml:/synch/synch.yaml
    Netzwerkmodus: "Host"
 
  # Ein Verbraucher verbraucht einen Datenbankverbraucher:
    tty: wahr
    hängt ab von:
      - Redis
      - Kafka
      - Tierpfleger
    Bild: long2ice/synch
    Containername: Verbraucher
    Befehl: sh -c
      "schlafe 30 &&
      synch --alias pg2ch_test verwenden --schema pg2ch_test"
    Bände:
      - ./synch.yaml:/synch/synch.yaml
    Netzwerkmodus: "Host"
 
  Redis:
    Hostname: Redis
    Containername: Redis
    Bild: redis:latest
    Bände:
      - redis:/Daten
    Netzwerkmodus: "Host"
 
Bände:
  Redis:
  Kafka:
  Tierpfleger:

Kern:
  debug: true # wenn auf True gesetzt, werden SQL-Informationen angezeigt.
  insert_num: 20000 # wie viele Zahlen sollen übermittelt werden, es wird empfohlen, bei der Produktion 20000 einzustellen
  insert_interval: 60 # wie viele Sekunden gesendet werden sollen, empfehlen wir die Einstellung 60 bei der Produktion
  # Aktivieren Sie dies, um automatisch eine Datenbanksynchronisierung in ClickHouse zu erstellen und Monitordaten einzufügen
  Überwachung: wahr
 
Redis:
  Gastgeber: Redis
  Port: 6379
  Anzahl der Zeichen: 0
  Passwort:
  Präfix: synch
  sentinel: false # Redis-Sentinel aktivieren
  sentinel_hosts: # Redis-Sentinel-Hosts
    127.0.0.1:5000
  sentinel_master: Meister
  queue_max_len: 200000 # maximale Streamlänge, redundante werden mit FIFO gelöscht
 
Quelldatenbank:
  -db_typ: postgres
    Alias: pg2ch_test
    broker_type: kafka # unterstützt derzeit Redis und Kafka
    Host: 127.0.0.1
    Port: 5433
    Benutzer: postgres
    Passwort: abc123
    Datenbanken:
      - Datenbank: pg2ch_test
        auto_create: wahr
        Tabellen:
          - Tabelle: pgbench_accounts
            auto_full_etl: wahr
            clickhouse_engine: ZusammenklappenMergeTree
            sign_column: Zeichen
            Versionsspalte:
            partition_by:
            Einstellungen:
 
Klickhaus:
  # Shard-Hosts werden beim Cluster nach dem Zufallsprinzip eingefügt
  Gastgeber:
    – 127.0.0.1:9000
  Benutzer: Standard
  Passwort: ''
  cluster_name: # Cluster-Modus aktivieren, wenn nicht leer, und es muss mehr als einen Host geben, wenn aktiviert.
  distributed_suffix: _all # Suffix für verteilte Tabellen, im Cluster verfügbar
 
Kafka:
  Server:
    – 127.0.0.1:9092
  topic_prefix: synchronisieren

root@failymao-NC:/mnt/d/pythonProject/pg_2_ch_demo# cat /etc/hosts
# Diese Datei wurde automatisch von WSL generiert. Um die automatische Generierung dieser Datei zu stoppen, fügen Sie den folgenden Eintrag zu /etc/wsl.conf hinzu:
# [Netzwerk]
# generateHosts = false
127.0.0.1 lokaler Host
 
10.111.130.24 host.docker.internal

Kern:
  debug: true # wenn auf True gesetzt, werden SQL-Informationen angezeigt.
  insert_num: 20000 # wie viele Zahlen sollen übermittelt werden, es wird empfohlen, bei der Produktion 20000 einzustellen
  insert_interval: 60 # wie viele Sekunden gesendet werden sollen, empfehlen wir die Einstellung 60 bei der Produktion
  # Aktivieren Sie dies, um automatisch eine Datenbanksynchronisierung in ClickHouse zu erstellen und Monitordaten einzufügen
  Überwachung: wahr
 
Redis:
  Gastgeber: Redis
  Port: 6379
  Anzahl der Zeichen: 0
  Passwort:
  Präfix: synch
  sentinel: false # Redis-Sentinel aktivieren
  sentinel_hosts: # Redis-Sentinel-Hosts
    127.0.0.1:5000
  sentinel_master: Meister
  queue_max_len: 200000 # maximale Streamlänge, redundante werden mit FIFO gelöscht
 
Quelldatenbank:
  -db_typ: postgres
    Alias: pg2ch_test
    broker_type: kafka # unterstützt derzeit Redis und Kafka
    Host: host.docker.internal
    Port: 5433
    Benutzer: postgres
    Passwort: abc123
    Datenbanken:
      - Datenbank: pg2ch_test
        auto_create: wahr
        Tabellen:
          - Tabelle: pgbench_accounts
            auto_full_etl: wahr
            clickhouse_engine: ZusammenklappenMergeTree
            sign_column: Zeichen
            Versionsspalte:
            partition_by:
            Einstellungen:
 
Klickhaus:
  # Shard-Hosts werden beim Cluster nach dem Zufallsprinzip eingefügt
  Gastgeber:
    – 127.0.0.1:9000
  Benutzer: Standard
  Passwort: ''
  cluster_name: # Cluster-Modus aktivieren, wenn nicht leer, und es muss mehr als einen Host geben, wenn aktiviert.
  distributed_suffix: _all # Suffix für verteilte Tabellen, im Cluster verfügbar
 
Kafka:
  Server:
    – 127.0.0.1:9092
  topic_prefix: Host synchronisieren: host.docker.internal
Kern:
  debug: true # wenn auf True gesetzt, werden SQL-Informationen angezeigt.
  insert_num: 20000 # wie viele Zahlen sollen übermittelt werden, es wird empfohlen, bei der Produktion 20000 einzustellen
  insert_interval: 60 # wie viele Sekunden gesendet werden sollen, empfehlen wir die Einstellung 60 bei der Produktion
  # Aktivieren Sie dies, um automatisch eine Datenbanksynchronisierung in ClickHouse zu erstellen und Monitordaten einzufügen
  Überwachung: wahr
 
Redis:
  Gastgeber: Redis
  Port: 6379
  Anzahl der Zeichen: 0
  Passwort:
  Präfix: synch
  sentinel: false # Redis-Sentinel aktivieren
  sentinel_hosts: # Redis-Sentinel-Hosts
    127.0.0.1:5000
  sentinel_master: Meister
  queue_max_len: 200000 # maximale Streamlänge, redundante werden mit FIFO gelöscht
 
Quelldatenbank:
  -db_typ: postgres
    Alias: pg2ch_test
    broker_type: kafka # unterstützt derzeit Redis und Kafka
    Gastgeber: 
    Port: 5433
    Benutzer: postgres
    Passwort: abc123
    Datenbanken:
      - Datenbank: pg2ch_test
        auto_create: wahr
        Tabellen:
          - Tabelle: pgbench_accounts
            auto_full_etl: wahr
            clickhouse_engine: ZusammenklappenMergeTree
            sign_column: Zeichen
            Versionsspalte:
            partition_by:
            Einstellungen:
 
Klickhaus:
  # Shard-Hosts werden beim Cluster nach dem Zufallsprinzip eingefügt
  Gastgeber:
    – 127.0.0.1:9000
  Benutzer: Standard
  Passwort: ''
  cluster_name: # Cluster-Modus aktivieren, wenn nicht leer, und es muss mehr als einen Host geben, wenn aktiviert.
  distributed_suffix: _all # Suffix für verteilte Tabellen, im Cluster verfügbar
 
Kafka:
  Server:
    – 127.0.0.1:9092
  topic_prefix: synchronisieren