HPA
-
Kafka + HPA 테스트쿠버네티스 2024. 8. 4. 23:57
쿠버네티스를 공부해보며 도입해볼만한 것들을 추리고 있는데, HPA를 활용한 어플리케이션 병렬처리가 Kafka의 Consumer Group을 다루기에 궁합이 좋다고 느껴 테스트를 해보았습니다. 더보기++ Kafka 선택 이유레디스와 카프카를 고민해보긴했는데 온프레미스 환경에서 서비스가 돌아가기 때문에 In-memory로는 Scale-out, Scale-up에 한계가 있어 카프카를 선택하게 되었습니다. 실행환경local : minikube내부망 : Server 1 (Kafka) 동작1. Elasticsearch 에서 문서를 가져와 Kafka (topic 1)에 적재2. topic 1에 적재된 문서들을 가져와 전처리 (간단한 Key, value 추가) 후 다시 Kafka (topic 2)에 적재 Kafk..