我有一个16GB的CSV文件,已经导入到Power BI桌面应用程序中。我使用的工作站是运行Windows Server 2016(64GB内存)的Azure VM。文件的导入只需要几秒钟,但是当我尝试在查询编辑器中将数据集过滤到特定的日期范围时,这需要相当长的时间(目前仍在运行,已经大约30分钟了)。源文件(16GB CSV)正在从VM上创建的RAM磁盘中读取。
当处理这样大小的数据集时,最佳方法/实践是什么?如果我将CSV文件导入SQL服务器,然后在将数据集过滤到日期范围时使用直接查询,是否会获得更好的性能?我原本认为,在我的当前设置下,由于VM上有64GB内存,它应该运行得相当快。
当处理这样大小的数据集时,最佳方法/实践是什么?如果我将CSV文件导入SQL服务器,然后在将数据集过滤到日期范围时使用直接查询,是否会获得更好的性能?我原本认为,在我的当前设置下,由于VM上有64GB内存,它应该运行得相当快。