博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
kafka api消费集群中kafka数据报错问题
阅读量:5797 次
发布时间:2019-06-18

本文共 725 字,大约阅读时间需要 2 分钟。

ERROR - Failed to send requests for topics test3 with correlation ids in [0,12](错误大概是这样的)

出现这个错误的时候我漫天的百度,因为自己在集群中生产者生产的数据,消费者能够消费。但是在本地java api 生产数据发送到kafka集群中就出现上面的错误了,百度上面的方法基本都试过了,什么ip配置错误、kafka配置文件中的hosts.name没有配置呀  等等,都试过了,都不行

首先我进入掉kafka的DataDir(大概是这个目录,就是存放kafka数据的地方),我进入到我生产数据的主题,在没有运行java 程序之前发现这个文件是空的,但是等我运行java 程序,程序报错但是文件夹却有数据而且数据是我自己在java程序生产的,这时候我首先想到的肯定是集群出问题了。于是我重新安装kafka集群,配置文件肯定不能用之前的配置文件了。因为我的配置文件配置了host.name等,其实这些都没有用,只需要配置如下几个参数:

 

[kafka/config/server.properties]

...
broker.id=202
...
listeners=PLAINTEXT://:9092
...
log.dirs=/home/centos/kafka/logs
...
zookeeper.connect=s201:2181,s202:2181,s203:2181

 

 

其他的参数都不需要配置,配合多了可能会导致集群出问题,具体的细节我没有去深究,有兴趣的可以研究研究。

转载于:https://www.cnblogs.com/hdfs/p/9376143.html

你可能感兴趣的文章
Dubbo笔记(四)
查看>>
Web前端JQuery入门实战案例
查看>>
Android开发教程 - 使用Data Binding(一) 介绍
查看>>
java B2B2C Springboot电子商城系统- SSO单点登录之OAuth2.0 登出流程(3)
查看>>
12月26日云栖精选夜读:CDN新品发布:阿里云SCDN安全加速开放公测
查看>>
USB 通信原理
查看>>
7zZip zip RAR iOS
查看>>
ssh无密码登陆远程主机
查看>>
date命令的详细用法!
查看>>
分布式存储ceph集群部署
查看>>
UiAutomator源码分析之UiAutomatorBridge框架
查看>>
python 开发之selenium
查看>>
Xcode3.2.5中找不到Mac OS X - Command Line Utility -...
查看>>
css的div垂直居中的方法,百分比div垂直居中
查看>>
如何理解EM算法
查看>>
nginx 域名跳转一例~~~(rewrite、proxy)
查看>>
我的友情链接
查看>>
linux用户家目录无损迁移到独立硬盘
查看>>
文件查找
查看>>
shell编程前言(一)
查看>>