일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | 7 |
8 | 9 | 10 | 11 | 12 | 13 | 14 |
15 | 16 | 17 | 18 | 19 | 20 | 21 |
22 | 23 | 24 | 25 | 26 | 27 | 28 |
29 | 30 | 31 |
- kafka interactive query
- aws
- avo
- scala
- scala 2.10
- Slick
- spring-batch
- kafkastreams
- RabbitMQ
- springboot
- Elk
- enablekafkastreams
- confluent
- kafka streams
- statestore
- coursera
- Elasticsearch
- 카프카
- kafkastream
- gradle
- reactive
- play framework
- 플레이 프레임워크
- schema registry
- spring-kafka
- Logstash
- 한빛미디어
- spring-cloud-stream
- Kafka
- Spring
- Today
- Total
목록schema registry (2)
b
몇 달전에 메모장에 적어놨던 내용인데, 지우면 또 까먹을 듯 해서 기록으로 남김 * 기존 Java Class에서 Avro Schema 획득하기ReflectData.get().getSchema 를 이용하여, 쉽게 json형식의 AvroSchema를 획득할 수 있다. (검증은 꼭 할것) 아쉽지만 record 타입을 자동으로 찾아서 해준다거나, vargs 형식으로 getSchema를 사용할 수는 없다.Schema schema = ReflectData.get().getSchema(Order.class); System.out.println(schema.toString(true)); * Schema Evolution1. backward : 새스키마로 이전 데이터를 읽을 수 있다. ex) 새 field를 추가할때 d..
subject란?- Schema Registry는 Schema를 Subject 단위로 관리되어지는 듯 하다. 디폴트로는 -key, -value (ex: data.order-value) 형식으로 사용되지만 confluent 4.1 부터 이 부분을 커스텀마이징 할 수 있는 SubjectNameStrategy가 추가되었다.기본적으로 사용하는 토픽이 동일하다면 동일한 subject를 보지만, 커스텀마이징 한다면 Record 에 따라 subject로 변경 가능하다.Get the subject name for the given topic and value type. 1. 최초에 Schema Registry에 등록하고 Schema ID 를 가져오는 동작- SR은 Cache 기반으로 동작한다 어플리케이션이 시작하면 A..