• docker swarm

    Docker Swarm What is Docker Swarm? 여러 컨테이너를 클러스터로 만들어 관리 Docker를 사용한 orchestration infra를 구축할 때 가장 호환성이 좋음 Node 클러스터에 속한 도커 서버 단위 입니다. 보통 한 서버에 하나의 도커 데몬을 실행하기 때문에 노드는 곧 서버라고 이해 할 수 있습니다. Manager 매니저는 클러스터의 상태를 관리합니다. 명령어는 매니저 노드에서만...


  • kafka Cluster 환경

    설치 모듈 docker, docker-compose, kafka-stack-docker-compose docker, docker-compose 설치 # docker 설치 [root@tivlxdkkfs-kafka /]# yum install docker -y # 부팅 시 자동실행 활성화 [root@tivlxdkkfs-kafka /]# systemctl enabled docker.service # docker 시작 [root@tivlxdkkfs-kafka /]# systemctl start docker.service # docker-compose 설치 [root@tivlxdkkfs-kafka /]# sudo curl -L "https://github.com/docker/compose/releases/download/1.29.1/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose # docker-compose...


  • kafkacat

    Kafka Management Tool https://github.com/edenhill/kafkacat What is kafkacat kkafkacat은 Apache Kafka® 배포를 테스트하고 디버그하는 데 사용할 수있는 명령 줄 유틸리티입니다. kafkacat을 사용하여 Kafka에 대한 주제 및 파티션 정보를 생성, 소비 및 나열 할 수 있습니다. “netcat for Kafka”로 설명되는이 도구는 Kafka에서 데이터를 검사하고 생성하기위한 도구 입니다. Kafka Console Producer ( kafka-console-producer)...


  • kafka 설치 및 실행

    1. Docker 이미지 선택 [root@tivlxdkkfs-kafka kafka]# docker search kafka INDEX NAME DESCRIPTION STARS OFFICIAL AUTOMATED docker.io docker.io/wurstmeister/kafka Multi-Broker Apache Kafka Image 1352 [OK] docker.io docker.io/spotify/kafka A simple docker image with both Kafka and ... 411 [OK] docker.io docker.io/bitnami/kafka Apache Kafka is a distributed streaming pl... 231 [OK] docker.io docker.io/sheepkiller/kafka-manager kafka-manager...


  • Apache Kafka란

    Apache Kafka(아파치 카프카) 는 LinkedIn에서 개발된 분산 메시징 시스템으로써 2011년에 오픈소스로 공개되었다. 대용량의 실시간 로그처리에 특화된 아키텍처 설계를 통하여 기존 메시징 시스템보다 우수한 TPS(Transaction per Second)를 보여주고 있다. Kafka 란? 분산 스트리밍 플랫폼 데이터 파이프 라인 구성 시 주로 사용되는 오픈소스 솔루션 대용량의 실시간 로그처리에 특화되어 있는 솔루션 데이터를 유실없이...