Administración de Confluent Apache Kafka

Módulo 1: Introducción a la arquitectura y configuración del clúster de Confluent Apache Kafka

• El papel de Kafka en los pipelines de datos modernos
• Diferencias entre Apache Kafka y Confluent Kafka
• Componentes principales: productores, consumidores, brokers, temas, particiones
• Modelos de despliegue de clústeres de Kafka y consideraciones de escalabilidad

Módulo 2: Configuración del Quórum de Zookeeper

• ¿Qué es Zookeeper?
• El papel de Zookeeper en un clúster de Kafka
• Tamaño del quórum de Zookeeper
• Configuración de Zookeeper
• Implementación de SSH en nuestros servidores
• Práctico: Configuración de Zookeeper (como equipo y como servicio)
• Uso de la interfaz de línea de comandos (CLI) de Zookeeper
• Práctico: Configuración del quórum de Zookeeper
• Sistema de archivos interno de Zookeeper
• Factores de rendimiento que afectan a Zookeeper
• Demostración de herramientas de administración para Zookeeper y Zoonavigator

Módulo 3: Configuración del Clúster de Kafka

• Conceptos básicos de Kafka
• Configuración de Kafka
• Práctico: Configuración de brokers de Kafka
• Práctico: Ejecución de comandos de Kafka
• Práctico: Configuración de un clúster de Kafka con múltiples brokers
• Práctico: Pruebas del clúster de Kafka
• ¿Puedo conectarme a mi clúster de Kafka?
• Configuración de Advertised.listeners: la configuración más importante
• Configuración de temas
• Configuración para la descarga y ingestión de mensajes en temas
• Práctico: Demostrando la resiliencia de Kafka
• Rendimiento de Kafka: Entrada/Salida (I/O)
• Rendimiento de Kafka: Red (RED)
• Rendimiento de Kafka: Memoria RAM
• Rendimiento de Kafka: CPU
• Rendimiento de Kafka: Sistema Operativo (SO)
• Rendimiento de Kafka: Otros
• Práctico: Cómo cambiar la configuración de un broker de Kafka

Módulo 4: Configuración Avanzada de Kafka

• Interfaz de usuario de temas de Landoop Kafka, configuración de Confluent REST Proxy y Confluent Schema Registry
• Envío y recepción de mensajes (CLI, Java y framework Spring)
• Métricas de monitoreo y herramientas (Confluent Control Center, Elasticsearch, etc.)
• Archivos de registro y gestión de offsets
• Alta disponibilidad y recuperación ante desastres
• Asegurar la alta disponibilidad mediante la replicación
• Optimización del rendimiento de productores y consumidores
• Estrategias de recuperación ante desastres
• Control de conmutación por error y recuperación de datos
• Configuración de conectores
• Implementación de Kafka Connect
• Funciones de seguridad de Kafka

Resumen y Próximos Pasos