KafkaS3SinkConnector在将文件提交到S3之前分配临时文件或堆外内存吗？

Kafka S3 Sink Connector在将文件提交到S3之前会将数据写入临时文件中，然后再进行上传。默认情况下，临时文件保存在本地文件系统的/tmp目录下。

以下是在配置文件中指定S3 Sink Connector使用本地内存的示例：

# 设置S3 Sink Connector使用本地内存，默认为true
s3.sink.buffer.dir=/dev/shm/kafka-s3-sink
s3.sink.buffer.dir.retry.interval.ms=60000

# 配置临时文件大小，默认为1048576 bytes
s3.sink.buffer.size=1048576
s3.sink.buffer.size.bytes=1048576

在此示例中，我们将S3 Sink Connector的缓存目录设置为/dev/shm/kafka-s3-sink，并将缓存的大小设置为1MB。在这种情况下，S3 Sink Connector将数据缓存在内存中，而不是在磁盘上进行临时存储。