有一个非常简单的SSIS包：
每次运行此包并在Notepad ++中打开平面文件时，它是ANSI格式，而不是UTF-8。如果我勾选Unicode选项，则该文件是UCS-2 Little Endian。
我做错了什么-如何使平面文件成为UTF-8编码？
谢谢
在源代码 -> 高级编辑器 -> 组件属性中，将默认代码页设置为65001；并将AlwaysUseDefaultCodePage设置为True。
然后在源代码 -> 高级编辑器 -> 输入和输出属性中，检查每个外部列和输出列，并在可能的情况下将代码页设置为65001。
就这样了。
顺便说一句，Excel不能定义文件内的数据为UTF-8格式。Excel只是一个文件处理程序。您也可以使用记事本创建CSV文件，只要使用UTF-8填充CSV文件，就应该没问题。
向答案中添加解释...
将CodePage设置为65001（但不要在文件源上勾选Unicode复选框），应该生成一个UTF-8文件。（是的，内部数据类型也应该是nvarchar等）。
但是从SSIS生成的文件没有BOM头（字节顺序标记），因此某些程序会认为它仍然是ASCII而不是UTF-8。我已经在MSDN上看到了微软员工的确认，也经过了测试确认。
文件追加解决方案是绕过此问题的一种方法 - 通过创建带有正确BOM的空文件，然后从SSIS附加数据，BOM标头保持不变。如果您告诉SSIS覆盖该文件，它也会丢失BOM。
感谢这里的提示，它帮助我找出了上述细节。
最近我遇到了一个问题，具体情况如下：
您正在使用SQL Server Integration Services（Visual Studio 2005）解决方案。您正在从数据库中提取数据并尝试将结果放入UTF-8格式的平面文件（.CSV）中。该解决方案完美地导出数据并保留文件中的特殊字符，因为您使用了65001作为代码页。
但是，当您打开文本文件或尝试将其加载到另一个进程中时，它会显示文件是ANSI而不是UTF-8。如果您在记事本中打开文件并进行“另存为”，然后将编码更改为UTF-8，那么您的外部进程就可以工作，但这是一项繁琐的手动操作。
我发现，当您指定平面文件连接管理器的代码页属性时，它会生成一个UTF-8文件。但是，它生成的UTF-8文件版本缺少我们所称的字节顺序标记。
因此，如果您有包含字符AA的CSV文件，则UTF8的BOM将为0xef、0xbb和0xbf。即使文件没有BOM，它仍然是UTF8。
不幸的是，在某些旧的遗留系统中，应用程序会搜索BOM以确定文件类型。看起来您的进程也是这样做的。
为了解决问题，您可以在导出过程后运行以下代码片段的脚本任务。
using System.IO;
using System.Text;
using System.Threading;
using System.Globalization;
enter code here
static void Main(string[] args)
{
string pattern = "*.csv";
string[] files = Directory.GetFiles(@".\", pattern, SearchOption.AllDirectories);
FileCodePageConverter converter = new FileCodePageConverter();
converter.SetCulture("en-US");
foreach (string file in files)
{
converter.Convert(file, file, "Windows-1252"); // Convert from code page Windows-1250 to UTF-8
}
}
class FileCodePageConverter
{
public void Convert(string path, string path2, string codepage)
{
byte[] buffer = File.ReadAllBytes(path);
if (buffer[0] != 0xef && buffer[0] != 0xbb)
{
byte[] buffer2 = Encoding.Convert(Encoding.GetEncoding(codepage), Encoding.UTF8, buffer);
byte[] utf8 = new byte[] { 0xef, 0xbb, 0xbf };
FileStream fs = File.Create(path2);
fs.Write(utf8, 0, utf8.Length);
fs.Write(buffer2, 0, buffer2.Length);
fs.Close();
}
}
public void SetCulture(string name)
{
Thread.CurrentThread.CurrentCulture = new CultureInfo(name);
Thread.CurrentThread.CurrentUICulture = new CultureInfo(name);
}
}
string sPath;
sPath=Dts.Variables["User::v_ExtractPath"].Value.ToString();
string pattern = "*.txt";
string[] files = Directory.GetFiles(sPath);
我知道这是一个非常老的话题，但是这里有另一个答案，可能比已经发布的其他答案更容易实现（你可以选择）。
基本上，这个命令行实用程序为SSIS提供了使用“执行进程任务”从代码页转换到代码页的能力。对我来说非常好用。（如果您部署到SQL Server，则当然还需要将可执行文件复制到系统文件夹中的服务器中。）
祝好，Raphael
好的 - 在SQL Server论坛上似乎找到了一个可接受的解决方法。基本上，我不得不创建两个UTF-8模板文件，使用文件任务将它们复制到我的目标，然后确保我是在追加数据而不是覆盖。
对于非常大的文件，@Prashanthi的内存解决方案会导致内存溢出异常。这是我的实现，是从这里的代码变体。
public static void ConvertFileEncoding(String path,
Encoding sourceEncoding, Encoding destEncoding)
{
// If the source and destination encodings are the same, do nothting.
if (sourceEncoding == destEncoding)
{
return;
}
// otherwise, move file to a temporary path before processing
String tempPath = Path.GetDirectoryName(path) + "\\" + Guid.NewGuid().ToString() + ".csv";
File.Move(path, tempPath);
// Convert the file.
try
{
FileStream fileStream = new FileStream(tempPath, FileMode.Open, FileAccess.Read, FileShare.ReadWrite);
using (StreamReader sr = new StreamReader(fileStream, sourceEncoding, false))
{
using (StreamWriter sw = new StreamWriter(path, false, destEncoding))
{
//this seems to not work here
//byte[] utf8 = new byte[] { 0xef, 0xbb, 0xbf };
//sw.BaseStream.Write(utf8, 0, utf8.Length);
int charsRead;
char[] buffer = new char[128 * 1024];
while ((charsRead = sr.ReadBlock(buffer, 0, buffer.Length)) > 0)
{
sw.Write(buffer, 0, charsRead);
}
}
}
}
finally
{
File.Delete(tempPath);
}
}