我正在尝试找到一种方法,可以将数据加载到Elasticsearch中。AWS-ES提供了批量API,但是AWS对有效负载大小设置了限制。
请问有没有最快的方法从DB2中提取数据并将其放入AWS-ES中?记录数约为5000万条,每条记录的有效负载可能在1到3KB之间。
我已经尝试过使用Java模块,并通过API调用将数据放入ES,但速度非常慢。
是否有任何ETL工具或任何服务可用,可以读取JSON或CSV并将数据放入ES?
请问有没有最快的方法从DB2中提取数据并将其放入AWS-ES中?记录数约为5000万条,每条记录的有效负载可能在1到3KB之间。
我已经尝试过使用Java模块,并通过API调用将数据放入ES,但速度非常慢。
是否有任何ETL工具或任何服务可用,可以读取JSON或CSV并将数据放入ES?