Spark 学习笔记之 MONGODB SPARK CONNECTOR 插入性能测试

MONGODB SPARK CONNECTOR

 测试数据量：

 

测试结果：

 

 

116万数据通过4个表的join，从SQL Server查出，耗时1分多。MongoSparkConnector插入平均耗时：3分30秒。

总计耗时4分半-5分钟。