기록의..어쩌구...중요성...어쩌구...

https://www.confluent.io/blog/kafka-listeners-explained/ Kafka Listeners - Explained How to connect clients to Kafka hosted in separate networks, such as Docker, AWS EC2, GCP, Azure, etc rmoff.net 카프카 서버를 AWS에 올리는 방법 중에서 External Listener와 Internal Listener 요청을 찢는 방법을 알아봤다. 1. AWS 내의 네트워크와 통신하기 이러한 네트워크 통신은 브로커간의 통신일 수도 있고 카프카 커넥트와 그 구성요소들 간의 통신일 수도 있다. 이러한 경우에는 EC2의 Internal IP를 사용해야한다. 2. AWS ..

서랍/Apache Kafka 2022. 3. 11. 15:05

이 글은 먼저 아파치 카프카가 무엇인지를 알아야한다. https://bagbokman.tistory.com/5 Apache Kafka - 카프카란? 카프카란? Event Streaming 플랫폼이다. 분산 처리를 한다. 오픈 소스이다. 그러면 Event Streaming이 뭔데? 데이터베이스, 센서, 모바일기기, 어플리케이션 등과 같은 곳에서 발생하는 데이터를 Event Stream bagbokman.tistory.com 아직 조금 허접한 글이지만 카프카가 데이터 허브의 역할을 한다는 것을 알고 있으면 된다. 그리고 카프카에 데이터를 Publish 하기 위해서는 Producer가 필요하고 카프카에서 데이터를 Subscribe하려면 Consumer가 필요하다는 것을 알고 있으면 된다. 한가지 더! 비슷한 ..

서랍/Kafka Connect 2021. 11. 30. 16:22