Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | 7 |
8 | 9 | 10 | 11 | 12 | 13 | 14 |
15 | 16 | 17 | 18 | 19 | 20 | 21 |
22 | 23 | 24 | 25 | 26 | 27 | 28 |
29 | 30 | 31 |
Tags
- 한빛미디어
- gradle
- RabbitMQ
- enablekafkastreams
- schema registry
- kafka streams
- Kafka
- Elasticsearch
- play framework
- springboot
- statestore
- confluent
- scala 2.10
- kafka interactive query
- 카프카
- Logstash
- aws
- Elk
- Spring
- Slick
- reactive
- avo
- kafkastream
- spring-kafka
- spring-batch
- 플레이 프레임워크
- spring-cloud-stream
- kafkastreams
- coursera
- scala
Archives
- Today
- Total
목록Airflow (1)
b
airflow broker_url 에 multiple rabbitMQ node 설정하기
기존의 RabbitMQ 클러스터가 N 대 있고, VIP로 엮여있다. 그리고 legacy system 은 그 VIP 만을 broker_url로 사용하고 있었다. (잘 모르겠지만 이거 이래도 되나?) 그래서 VIP 사용을 제거하고 broker_url 을 node list로 변경하기로 했다. Spring 같은 경우는 Kafka, Elastic 등에서 Node List를 프로퍼티로 주고 많이 사용했기 때문에 문제가 없었지만 airflow 에서 설정이 문제였다. celery 문서를 따라가보면 세미콜론 또는 List 형태로 줄 수 있다고 한다. (https://docs.celeryproject.org/en/stable/userguide/configuration.html#broker-settings) 방법1) bro..
카테고리 없음
2020. 5. 20. 11:23