| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | ||||||
| 2 | 3 | 4 | 5 | 6 | 7 | 8 |
| 9 | 10 | 11 | 12 | 13 | 14 | 15 |
| 16 | 17 | 18 | 19 | 20 | 21 | 22 |
| 23 | 24 | 25 | 26 | 27 | 28 | 29 |
| 30 | 31 |
Tags
- 분산시스템
- Kafka
- AWS
- 코테
- 인프라
- 쿠버네티스
- SRE
- it
- tech
- Pub/Sub
- elasticsearch
- 개발
- 개발자
- Observability
- Kubernetes
- Data Engineering
- 운영체제
- 대규모시스템
- etcd
- 시스템호출
- Network
- OS
- fork()
- k8s
- 엘라스틱서치
- 커널
- 스프링빈
- Monitoring
- devsecops
- 데이터엔지니어
Archives
- Today
- Total
목록Data Engineering (1)
모래성 말고 철옹성
파이썬으로 카프카 consumer, producer 만들기 필자는 유닉스 기반 PC를 사용중이 아니라 가상 컨테이너 도커로 카프카와 주키퍼를 만들어 테스트 해봤다. 1. docker-compose로 카프카, 주키퍼 컨테이너 생성 카프카와 주키퍼를 운영할 컨테이너를 한 번에 띄울 수 있게 docker-compose.yml 파일 생성한다. 카프카, 주키퍼 도커 이미지는 confluent, wurstmeister, bitnami 세 가지 정도의 이미지가 있었지만 wurstmeister/kafka, zookeeper 이미지가 가장 레퍼런스가 많았기 때문에 해당 이미지로 선정했다. docker-compose.yml 코드 version: '3' services: zookeeper: image: wurstmeiste..
데이터 엔지니어링/Kafka
2022. 2. 22. 01:04