对python操作kafka写入json数据的简单demo分享
如下所示：
安装kafka支持库pipinstallkafka-python
fromkafkaimportKafkaProducer
importjson
'''
生产者demo
向test_lyl2主题中循环写入10条json数据
注意事项：要写入json数据需加上value_serializer参数，如下代码
'''
producer=KafkaProducer(
value_serializer=lambdav:json.dumps(v).encode('utf-8'),
bootstrap_servers=['192.168.12.101:6667','192.168.12.102:6667','192.168.12.103:6667']
)
foriinrange(10):
data={
"name":"李四",
"age":23,
"gender":"男",
"id":i
}
producer.send('test_lyl2',data)
producer.close()
fromkafkaimportKafkaConsumer
importjson
'''
消费者demo
消费test_lyl2主题中的数据
注意事项：如需以json格式读取数据需加上value_deserializer参数
'''
consumer=KafkaConsumer('test_lyl2',group_id="lyl-gid1",
bootstrap_servers=['192.168.12.101:6667','192.168.12.102:6667','192.168.12.103:6667'],
auto_offset_reset='earliest',value_deserializer=json.loads
)
formessageinconsumer:
print(message.value)
以上这篇对python操作kafka写入json数据的简单demo分享就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持毛票票。
热门推荐
10 新人红包祝福语简短精辟
11 幼师给毕业祝福语简短
12 生日高考祝福语妹妹简短
13 下飞机祝福语简短英文
14 元宵发客户祝福语简短
15 爸妈金婚文案祝福语简短
16 新郎朋友红包祝福语简短
17 虎年五一祝福语大全简短
18 出阁宴祝福语姐姐简短