首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏python3

    安装Kafka-Python

    安装Kafka-Python 下载Kafka-Python压缩包 从https://github.com/mumrah/kafka-python/releases中下载最新的release包,此时最新的包为

    1.3K10发布于 2020-01-07
  • 来自专栏技术栈大杂烩

    Python: kafka-python版本差异导致的问题

    于是事不延迟,找台机器升级下 kafka-python 版本到 1.4.0 看看,升级完之后发现日志大幅度减少了。 ? 升级后的日志大约是升级前的九分之一了,这样来看很明显就是 1.3.5 的问题了。 直接去 kafka-python 官网,找了较新的版本 1.4.2,更新之后,消费和日志都正常了。 欢迎各位大神指点交流, QQ讨论群: 258498217

    1.9K40发布于 2018-10-22
  • 来自专栏Devops专栏

    python3 交互操作 kafka 之 kafka-python

    Github地址 https://github.com/dpkp/kafka-python kafka-python库的官网 https://pypi.org/project/kafka-python/ kafka-python官网文档 https://kafka-python.readthedocs.io/en/master/ 使用pip3安装kafka-python 在阅读kafka-python pip3 install kafka-python D:\pythonProject\kafka_test>pip3 install kafka-python Collecting kafka-python kafka-python的功能与官方java客户端非常相似,带有多个pythonic接口(例如,消费者迭代器)。 kafka-python最适用于较新的代理broker(0.9+),但与旧版本(向0.8.0)向后兼容。某些功能仅在较新的代理上启用。

    13.8K10发布于 2019-06-15
  • 来自专栏Victor的专栏

    kafka-python 执行两次初始化导致进程卡主

    3. python连接kafka的库python-kakfa ` kafka-python ` 是一个用于在 Python 中与 Apache Kafka 集成的客户端库。 `kafka-python` 还支持各种配置选项,允许你调整客户端的行为,以满足特定需求。

    61610编辑于 2023-12-02
  • 来自专栏Hadoop实操

    0501-使用Python访问Kerberos环境下的Kafka(二)

    .CDK2.2.0(0.10.2) 4.Python 2.7.15 2 环境准备 在使用Python访问Kafka前,还需要为Python环境安装相关的Kafka包,这里Fayson使用官网推荐使用的kafka-python 该依赖包的GitHub地址为: https://github.com/dpkp/kafka-python,关于kafka-python的详细说明可以参考GitHub。 3.安装kafka-python依赖包 [root@cdh2 ~]# /opt/cloudera/anaconda2/bin/pip install kafka-python ? 2.关于Kafka支持的属性配置可以参考如下地址 https://github.com/dpkp/kafka-python/blob/master/kafka/producer/kafka.py ? 5 总结 1.kafka-python依赖包需要Python的环境有2.7、3.4、3.5、3.6 2.如果使用kafka-python访问Kerberos环境下的Kafka,需要安装gssapi依赖包

    2K10发布于 2019-11-28
  • 来自专栏Hadoop实操

    0502-CDSW中访问Kerberos环境下的Kafka

    CDK2.2.0(0.10.2) 4.Python 2.7.15 2 CDSW运行环境准备 在使用Python访问Kafka前,还需要为Python环境安装相关的Kafka包,这里Fayson使用官网推荐使用的kafka-python 该依赖包的GitHub地址为: https://github.com/dpkp/kafka-python,关于kafka-python的详细说明可以参考GitHub。 3.会话启动成功后在执行如下命令安装kafka-python依赖包 ? 2.关于Kafka支持的属性配置可以参考如下地址 https://github.com/dpkp/kafka-python/blob/master/kafka/producer/kafka.py ? 5 总结 1.kafka-python依赖包需要Python的环境有2.7、3.4、3.5、3.6 2.如果使用kafka-python访问Kerberos环境下的Kafka,需要安装gssapi依赖包

    81210发布于 2019-11-27
  • 来自专栏python前行者

    [727]python操作kafka

    kafka pypi:https://pypi.org/project/kafka-python/ kafka-python:https://github.com/dpkp/kafka-python pip install kafka pip install kafka-python 如果想要完成负载均衡,就需要知道kafka的分区机制,同一个主题,可以为其分区,在生产者不指定分区的情况,kafka import KafkaError # from kafka.structs import TopicPartition ''' pip install kafka==1.3.5 pip install kafka-python ---- pykafka pykafka:https://github.com/Parsely/pykafka pip install pykafka 开始肯定去找python连接kafka的标准库,kafka-python ,后者是Samsa的升级版本,在python连接并使用kafka 使用samsa连接zookeeper然后使用kafka Cluster很能满足我的需求,在pykafka的例子中也看到了zk的支持,而kafka-python

    3K20发布于 2020-01-13
  • 来自专栏北京马哥教育

    Python操作分布式流处理系统Kafka

    实验一:kafka-python实现生产者消费者 kafka-python是一个python的Kafka客户端,可以用来向kafka的topic发送消息、消费消息。 引用资料 kafka-python在线文档 - kafka-python - kafka-python 1.3.6.dev documentation kafka官方文档 - Apache Kafka

    1.2K40发布于 2018-05-03
  • 来自专栏Python 技术小屋

    Python 使用 kafka 报错:No module named 'kafka.vendor.six.moves'

    kafka.vendor.six.moves import range ModuleNotFoundError: No module named 'kafka.vendor.six.moves' 原因 & 解决方案 原因 kafka-python 支持版本查看:https://pypi.org/project/kafka-python-ng/ 解决方案 卸载 kafka-python 安装 kafka-python-ng。 pip3 uninstall kafka-python pip3 install kafka-python-ng 个人简介 你好,我是 Lorin 洛林,一位 Java 后端技术开发者!

    50821编辑于 2024-12-04
  • 来自专栏python3

    python 操作kafka

    开始 开始肯定去找python连接kafka的标准库, kafka-python 和 pykafka 前者使用的人多是比较成熟的库,后者是Samsa的升级版本,在网上到文章 在python连接并使用kafka  使用samsa连接zookeeper然后使用kafka Cluster很能满足我的需求,在pykafka的例子中也看到了zk的支持,而kafka-python并没有zk的支持,所以选择了pykafka

    73910发布于 2020-01-09
  • 来自专栏Python中文社区

    Python操作分布式流处理系统Kafka

    实验一:kafka-python实现生产者消费者 kafka-python是一个python的Kafka客户端,可以用来向kafka的topic发送消息、消费消息。 引用资料 kafka-python在线文档 - kafka-python - kafka-python 1.3.6.dev documentation kafka官方文档 - Apache Kafka

    1.7K100发布于 2018-02-01
  • 来自专栏软件测试技术

    使用python发送和接口kafka

    使用python操作kafka 安装 pip install kafka-python==2.0.2 kafka 的Producer 如果是kafka集群则bootstrap_servers可传入多个, # 安装 pip install kafka-python==2.0.2 from kafka import KafkaConsumer import time topic='test_topic'

    1.7K10编辑于 2022-05-16
  • 来自专栏未闻Code

    如何使用Python读写Kafka?

    这一篇文章里面,我们要使用的一个第三方库叫做kafka-python。大家可以使用pip或者pipenv安装它。下面两种安装方案,任选其一即可。 python3 -m pip install kafka-python pipenv install kafka-python 如下图所示: ?

    9.3K11发布于 2019-12-25
  • 来自专栏python3

    Kafka系列3-python版本pro

    直接上代码了: # -*- coding: utf-8 -*- ''' 使用kafka-Python 1.3.3模块 ''' import sys import time import json

    58110发布于 2020-01-03
  • 来自专栏授客的专栏

    Python 使用python-kafka类库开发kafka生产者&消费者&客户端

    :实践中发现,pip版本比较旧的话,没法安装whl文件 kafka_python-1.4.4-py2.py3-none-any.whl 下载地址1: https://pypi.org/project/kafka-python https://www.lfd.uci.edu/~gohlke/pythonlibs/ 下载地址2: https://pan.baidu.com/s/10XtLXESp64NtwA73RbryVg 说明: kafka-python 参考链接: https://pypi.org/project/kafka-python/#description https://kafka-python.readthedocs.io/en/master

    4.9K40发布于 2019-09-10
  • 来自专栏python3

    规范-编码

    常用库: pymysql httplib2 kafka kafka-python pymongo psycopg2 elasticsearch murmurhash3 shell编码规范 bash, zsh

    97110发布于 2020-01-02
  • 来自专栏软件研发

    讲解NoBrokersAvailableError

    错误描述"NoBrokersAvailableError" 是 Apache Kafka Python 客户端库(如 kafka-python)抛出的一个错误。 示例代码下面是一个使用 kafka-python 库连接到 Kafka 集群的示例代码,以帮助你理解如何处理 "NoBrokersAvailableError" 异常:pythonCopy codefrom

    1.2K10编辑于 2023-12-25
  • 来自专栏Python乱炖

    python玩玩kafka

    关于简单的操作就介绍到这里了,想了解更多: https://pypi.org/project/kafka-python/

    1K30发布于 2019-09-23
  • 来自专栏python3

    kafka介绍与搭建(单机版)

    三、使用python操作kafka 使用python操作kafka目前比较常用的库是kafka-python库 安装kafka-python pip3 install kafka-python 生产者

    1.2K20发布于 2020-02-20
  • 来自专栏深度学习之tensorflow实战篇

    python下Kafka 教程系列(二)安装与基本操作

    如果安装不成功可以执行如下, 也可以到网站:http://pipy.python.org/ ,找到kafka的相关kafka-python ,网速比较慢,或者通过下面连接下载(直通车) 有的说需要下载相关组件

    1.6K10发布于 2019-01-25
领券