java中的avro到json转换器

lqfhib0f  于 2021-09-13  发布在  Java
关注(0)|答案(1)|浏览(326)

我将kafka中的avro作为一个字符串来阅读,并尝试使用java代码将字符串avro转换为json。

@KafkaListener(topics = "#{'${kafka.consumer.topics}'.split(',')}", containerFactory = "kafkaListenerContainerFactory")
    void listener(String message, Acknowledgment acknowledgment, @Header(KafkaHeaders.RECEIVED_TOPIC) String topic) throws CacheServiceException, JsonProcessingException {

//some code here
byte[] data = message.getBytes(); //This seems to be the issue

avroToJson(schema,data)

}

//Code to convert avro to json
public String avroToJson(Schema schema, byte[] avroBinary) throws IOException {
        DatumReader<Object> datumReader = new GenericDatumReader<>(schema);
        Decoder decoder = DecoderFactory.get().binaryDecoder(avroBinary, null);
        Object avroDatum = datumReader.read(null, decoder);
        System.out.println("Initiating loop");
        try (ByteArrayOutputStream baos = new ByteArrayOutputStream()) {
            DatumWriter<Object> writer = new GenericDatumWriter<>(schema);
            JsonEncoder encoder = EncoderFactory.get().jsonEncoder(schema, baos, false);
            writer.write(avroDatum, encoder);
            encoder.flush();
            baos.flush();
            return new String(baos.toByteArray(), StandardCharsets.UTF_8);
        }
    }

我希望避免从Kafka以avro的形式读取数据,因为我在同一Kafka中读取不同主题、不同模式的数据。

gg58donl

gg58donl1#

avro用于根据模式验证数据。如果您不想这样做,只需删除avro并仅使用Kafka即可。从生产者端发送json数据,而不是avro序列化数据。

相关问题