Kafkabrokers之间或者broker与客户端之间出现toomanyopenfiles错误

1. 修改系统最大文件打开数 在Linux系统中，可以通过执行以下命令来查看当前的最大文件打开数：ulimit -n。 如果当前的最大文件打开数值较小，可以通过修改/etc/security/limits.conf文件来增加该数值。比如，可以在该文件末尾新增以下两行代码：

• soft nofile 65535
• hard nofile 65535

表示设置所有用户的最大打开文件数限制为65535，soft和hard分别表示软限制和硬限制。增加完毕后，可以重启系统，然后执行ulimit -n命令来检查最大打开文件数，是否已经增加到65535。

2. 增加Kafka配置参数 如果修改系统最大文件打开数之后，问题仍然存在，那么就可以尝试增加Kafka的相关配置参数。以下是一个示例：

增加以下配置参数到broker中：

broker: sockets: max.connection.idle.ms: 600000 max.connection.lifetime.ms: 7200000 max.connections.per.ip: 10000 receive.buffer.bytes: 1048576 send.buffer.bytes: 1048576 heartbeat.interval.ms: 3000 connection.setup.timeout.ms: 20000 max.connections: -1 connections.max.idle.ms: 540000

增加以下配置参数到producer或consumer中：

producer: buffer.memory: 33554432 connections.max.idle.ms: 540000 max.block.ms: 3000 acks: all

consumer: fetch.max.wait.ms: 5000 session.timeout.ms: 10000 max.poll.records: 500 fetch.min.bytes: 1048576

配置参数的具体含义可以参考官方文档。