datax speed
时间: 2023-08-19 14:17:09 浏览: 130
DataX的速度限制可以通过配置文件中的参数进行设置。在core.json文件中的speed方法中,可以通过记录数和字节数来限制DataX的速度。这些配置参数在CoreConstant类中定义。可以通过在IDEA中使用Find Usages功能来查看这些参数在哪些地方被调用。此外,在Channel类中也实现了限速功能。具体的限速实现可以在Channel类的代码中找到。关键的优化参数包括:job.setting.speed.channel(总并发数)、job.setting.speed.record(总记录限速)、job.setting.speed.byte(总字节限速)、core.transport.channel.speed.record(单个通道的记录限速,默认值为10000条/秒)、core.transport.channel.speed.byte(单个通道的字节限速,默认值为1024*1024字节/秒)。\[1\]\[2\]\[3\]
#### 引用[.reference_title]
- *1* *2* [DataX教程(09)- DataX是如何做到限速的?](https://blog.csdn.net/qq_20042935/article/details/122988002)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item]
- *3* [DataX优化](https://blog.csdn.net/qq_36593748/article/details/122441642)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item]
[ .reference_list ]
阅读全文