Kafka
-
Kafka Monitoring 환경 구축Kafka 2024. 8. 30. 19:52
오늘은 카프카 Lag을 모니터링 하기 위한 Grafana 모니터링 환경을 구축하려고 합니다.어떤 것들을 설치했고, 어떻게 구성했는지 기록하며 복기해보도록 하겠습니다..! 설치 목록kafka-exporterprometheusgrafana설치 환경 - 리눅스localhostkafka-exporter (docker) prometheus (bin)grafana (bin)Test-ServerKafka1. kafka-exporter 설치설치 : https://hub.docker.com/r/danielqsj/kafka-exporter https://hub.docker.com/r/danielqsj/kafka-exporter hub.docker.comdocker run -ti --rm -p 9308:9308 daniel..
-
RAIDKafka 2024. 5. 26. 21:44
오늘은 RAID에 대해 알아보도록 하겠습니다 단순 데이터 A, B, C, D를 디스크에 저장한다고 한다면 위 그림의 Disk1 처럼 디스크에 차곡차곡 쌓이게 될 것입니다.하지만 데이터의 양이 늘어난다면? Disk의 용량을 높이기 위해 더 많은 비용이 들것이며 데이터를 쌓는데도 시간이 더 걸릴것입니다. 또한 디스크 하나로 데이터를 관리하다보면 가용성 측면에서도 매우 안좋을 것입니다,,! 이에대한 해결책은? -> RAIDRAID는 아래와 같은 의미를 가지고 있습니다.- Redundant Array of Independent Disk(독립된 디스크의 복수 배열)- Redundant Array of Inexpensive Disk(저렴한 디스크의 복수 배열) 말 그대로 RAID는 여러개의 디스크를 연결하여 가용..