flume系列之：flume生产环境sink重要参数理解
- sink1.hdfs.maxOpenFiles
- sink1.hdfs.threadsPoolSize
- sink1.hdfs.rollTimerPoolSize
- sink1.hdfs.rollCount
- sink1.hdfs.rollSize
- sink1.hdfs.rollSize
- sink1.hdfs.rollInterval
- sink1.hdfs.idleTimeout
- sink1.hdfs.batchSize
- sink1.hdfs.writeFormat
- sink1.hdfs.callTimeout
sink1.hdfs.maxOpenFiles
- sink1.hdfs.maxOpenFiles参数用于设置HDFS Sink插件同时打开的最大文件数。
- 该参数的值应根据系统的资源和需求进行调整。如果系统的磁盘和内存资源充足，并且需要同时写入大量的文件，可以适当增大该参数的值。如果系统资源有限或写入的文件较少，可以减小该参数的值。
sink1.hdfs.threadsPoolSize
- sink1.hdfs.threadsPoolSize参数用于设置HDFS Sink插件的线程池大小。该参数的值决定了可以并行处理的任务数。
- 通常情况下，可以根据系统的CPU核心数和负载情况来设置该参数。如果系统的CPU核心数较多，并且没有其他繁重的任务，可以适当增大该参数的值以提高并行处理能力。如果系统的CPU资源较为紧张或存在其他繁重的任务，可以减小该参数的值。
sink1.hdfs.rollTimerPoolSize
- sink1.hdfs.rollTimerPoolSize参数是HDFS Sink插件中的一个配置项，用于设置HDFS Sink插件的滚动计时器线程池的大小。该线程池用于执行HDFS Sink插件中的滚动计时器任务，定期将数据写入HDFS。滚动计时器任务会在一定时间间隔内（由sink1.hdfs.rollInterval参数设置）触发，以将当前的数据写入HDFS。
- 该参数的值应该根据系统的CPU资源和负载情况进行调整。如果系统的CPU资源较为充足，并且需要处理大量的数据，可以适当增大该参数的值，以提高
