首页 > 代码库 > python3.5读取kafka中的数据
python3.5读取kafka中的数据
安装包 pykafka
代码如下:
from pykafka import KafkaClient client = KafkaClient(hosts="test43:9092") print(client.topics) topic = client.topics[b‘rokid‘] #topic名称 consumer = topic.get_simple_consumer() for record in consumer: if record is not None: valuestr = record.value.decode() #从bytes转为string类型 valuedict = eval(valuestr) message = valuedict["message"] fields = message.split("\u0001") for field in fields: kv = field.split("\u0002") if len(kv) == 2: print(kv[0],‘----‘,kv[1]) print(‘-‘*100)
以上仅供开发测试使用,真正发布到线上需要多地方加固。。。
mark
python3.5读取kafka中的数据
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。