kafkapython客户机支持kafka0.9,但显然不包括新的身份验证和加密功能,因此我猜它只适用于开放服务器(与以前的版本一样)。在任何情况下,甚至java客户机都需要一个特殊的messagehub登录模块来连接(或者在示例中看起来是这样),这意味着除非有一个类似的模块可用于python,否则什么都不起作用。
我的具体场景是,我希望使用同样托管在bluemix(apachespark服务)中的jupyter笔记本中的消息中心服务。
kafkapython客户机支持kafka0.9,但显然不包括新的身份验证和加密功能,因此我猜它只适用于开放服务器(与以前的版本一样)。在任何情况下,甚至java客户机都需要一个特殊的messagehub登录模块来连接(或者在示例中看起来是这样),这意味着除非有一个类似的模块可用于python,否则什么都不起作用。
我的具体场景是,我希望使用同样托管在bluemix(apachespark服务)中的jupyter笔记本中的消息中心服务。
4条答案
按热度按时间i86rm4rw1#
我们在非java语言支持的文档中添加了一些文本—请参阅“在非java应用程序中连接和验证”部分:https://www.ng.bluemix.net/docs/services/messagehub/index.html
我们当前的身份验证方法是非标准的,不受apache项目的支持,只是一个临时解决方案。消息中心团队正在与apachekafka社区合作开发kip-43。一旦完成,我们将更改消息中心身份验证实现以匹配,并且可以用任何语言实现该规范的客户机。
55ooxyrt2#
在bluemixpachespark服务本机支持之前,您可以采用与realtime情绪分析项目相同的方法。这方面的帮助程序代码可以在cds labs spark samples github repo上找到。
8aqjt8rx3#
我可以使用kafka python库进行连接:
然后。。。
我从BlueMixSpark将其作为jupyter笔记本的一项服务来使用,但是请注意,这种方法没有使用spark。代码只是在驱动程序主机上运行。
bksxznpy4#
已请求kafka python客户端中的sasl支持:https://github.com/dpkp/kafka-python/issues/533 但在messagehub使用的用户名/密码登录方法得到支持之前,它将无法工作