16得票7回答
SSIS:代码页返回到65001

在我编写的SSIS包中,我的源是一个CSV文件。在连接管理器的常规页面上,代码页为65001(我在测试)。Unicode未被选中。 这些列与SQL Server目标表中的varchar列进行映射。 目标处发生错误:"columnname"列无法处理,因为对其指定了两个以上的代码页(6500...

23得票2回答
为什么在使用Visual Studio运行SSIS加载时,我的ODBC连接失败,但在使用Execute Package Utility运行相同的包时却没有失败。

我正在 SSIS 2012 中处理一个数据集市加载包。在尝试在 Visual Studio 中执行该包时,出现以下错误:"The AcquireConnection method call to the connection manager Data Warehouse.ssusr faile...

7得票1回答
在SSIS上配置一个MDX查询

嗨,我在配置 SSIS 任务运行 MDX 查询时遇到了问题。解析工作正常,但它不允许我显示查询的不同列以进行映射 这是我使用的查询: SELECT [Measures].[# Consumers] ON 0, [Company].[Company Country Code].[...

8得票4回答
导入具有可变标题的Excel文件

我有一个SSIS包,可以将Excel文件加载到数据库中。我创建了Excel Source任务来将Excel列名映射到数据库表列名,并且它运行良好。 很少情况下,我们会收到带有一些空格的Excel文件列名(例如:列名为“ABC”,但我们收到的是“ABC ”),这会导致映射问题并使SSIS失败。...

153得票6回答
当用Python处理一个巨大的CSV文件时,如果突然停止,'killed'是什么意思?

我有一个Python脚本,它导入一个大型CSV文件,然后计算文件中每个单词出现的次数,最后将这些计数导出到另一个CSV文件。 但是问题在于,一旦计算完成并开始导出,终端会显示Killed。 我不认为这是内存问题(如果是内存错误,我应该会得到一个内存错误而不是Killed)。 可能是进程运...

9得票2回答
如何将扁平文件数据拆分并加载到数据库的父子表中?

我有一些非规范化的数据(来自文件),需要导入到父子表中。源数据大致如下: Account# Name Membership Email 101 J Burns Gold alpha@foo.com 101 J...

9得票3回答
如何在Python中根据正则表达式规则对字符串进行分类/归类

我正在用Python编写ETL脚本,从CSV文件中获取数据,验证和清洗数据,并根据一些规则对每行进行分类或归类,最后将其加载到postgresql数据库中。 数据看起来像这样(简化): ColA,ColB,Timestamp,Timestamp,Journaltext,AmountA,Am...

12得票4回答
ETL(从数据库到数据库)如何适用于SOA?

让我们想象一下,我们的应用程序需要从关系数据库抽取(transform)、转换(extract)和加载(load)数据到另一个关系数据库。 最简单(也是性能最好的,我的意见是)的方式是建立数据库之间的链接并编写简单的存储过程。在这种情况下,我们使用最少的技术和组件,所有功能都是“开箱即用”的。...

24得票1回答
在 Visual Studio 中缺少 SSIS 工具箱

我在本机上运行SQL Server 2014。我已经安装了Visual Studio 2017的SSDT,我也有这个软件。现在我无法在我的Visual Studio中找到SSIS工具箱。我需要重新安装整个SSDT吗?请告知,先感谢您。

14得票6回答
在Oracle 11g分区表上进行并发统计信息收集

我正在使用Oracle 11g开发数据仓库。我们有一些大表(250+万行),按值分区。每个分区都分配给不同的数据源,并且每个分区都是独立的,因此它们可以同时加载和处理。 数据分布非常不均匀,我们有数百万行的分区,也有不到一百行的分区,但我没有选择分区方案,而且我也无法更改。 考虑到数据量,...