我有一个应用程序允许用户将字符串保存到数据库中，这些字符串可能包含表情符号。我的问题是，例如 这样的表情符号会被存储在MySQL中为 😊
当我使用PHP MySQL客户端检索此字符串并在Web浏览器中呈现时，它可以正常呈现，这可能是因为 Content-Type 设置为UTF-8。当我尝试在node.js中读取该字符串时，我得到的是ISO8859-1编码的字面量 😊。表上的字符集设置为latin1，这就是我从中获取ISO8859-1的地方。
在node.js中正确的编码字符串的方式是什么，以便我可以看到表情符号而不是MySQL设置的编码？当我通过 console.log 输出该字符串时。
😊是Mojibake，表示笑脸表情。如果将它当作latin1解释，你可以得到十六进制值F09F988A，这是该Emoji的UTF-8十六进制值。
注意：在MySQL外部使用UTF-8等同于在MySQL内部使用utf8mb4。
在MySQL中，你必须使用CHARACTER SET utf8mb4声明列/表，同时还必须指定数据存储/获取时的编码为utf8mb4。注意：使用utf8不足以满足需求。
执行SELECT HEX(col) FROM ...命令，查看是否得到该Emoji的十六进制值。如果是并且该列当前为latin1，则需要小心地将该列转换为utf8mb4。也就是说，你有一个CHARACTER SET latin1列，但其中包含UTF-8字节；这会保持字节不变，同时修复字符集。假设该列已经是VARCHAR(111) CHARACTER SET latin1 NOT NULL，那么请按以下两步进行更改：
ALTER TABLE tbl MODIFY COLUMN col VARBINARY(111) NOT NULL;
ALTER TABLE tbl MODIFY COLUMN col VARCHAR(111) CHARACTER SET utf8mb4 NOT NULL;
几乎任何其他转换机制都会造成更糟糕的混乱。
至于正确建立连接，对于node.js来说大致如下：
var connection = mysql.createConnection({ ... , charset : 'utf8mb4'});
?。 - randombits建议使用iconv(一种简单的ISO-8859-1到UTF-8转换)
来源于这个代码片段
var iconv = require('iconv');
function toUTF8(body) {
// convert from iso-8859-1 to utf-8
var ic = new iconv.Iconv('iso-8859-1', 'utf-8');
var buf = ic.convert(body);
return buf.toString('utf-8');
}
如果您传递任何ISO-8859-1编码的内容，它将返回其UTF-8编码。
例如，
toUTF8("😊");
将返回
ðŸË的返回。 - randombits const isoToUtfTable = {
'ð': 0xf0,
'Ÿ': 0x9f,
'˜': 0x98,
'Š': 0x8a
};
function convertISO8859ToUtf8(s) {
const buf = new Uint8Array([...s].map(c => isoToUtfTable[c]));
return String.fromCharCode(...buf)
}
function decode_utf8(s) {
return decodeURIComponent(escape(s));
}
console.log(decode_utf8(convertISO8859ToUtf8('😊')))isoToUtfTable 表格（它很小，参见 https://en.wikipedia.org/wiki/ISO/IEC_8859-1）即可。请注意不要删除任何 HTML 标签。😊 中最新的 4 个字符中有 3 个不是有效的 ISO-8859-1 字符。所以，我不知道除了创建一个小的 255 元素表（如果下半部分相同，则可能甚至只需要 127）之外，还有什么其他的修复方法。 - zerkmsconst iconv = new Iconv('ISO-8859-2', 'UTF-8');
const buffer = iconv.convert(something);
console.log(buffer);
console.log(buffer.toString('UTF8'));
这是@zerkms解决方案的完整答案
const isoToUtfTable = {
'€':0x80,
'na':0x81,
'‚':0x82,
'ƒ':0x83,
'„':0x84,
'…':0x85,
'†':0x86,
'‡':0x87,
'ˆ':0x88,
'‰':0x89,
'Š':0x8a,
'‹':0x8b,
'Œ':0x8c,
'na':0x8d,
'Ž':0x8e,
'na':0x8f,
'na':0x90,
'‘':0x91,
'’':0x92,
'“':0x93,
'”':0x94,
'•':0x95,
'–':0x96,
'—':0x97,
'˜':0x98,
'™':0x99,
'š':0x9a,
'›':0x9b,
'œ':0x9c,
'na':0x9d,
'ž':0x9e,
'Ÿ':0x9f,
'NSBP':0xa0,
'¡':0xa1,
'¢':0xa2,
'£':0xa3,
'¤':0xa4,
'¥':0xa5,
'¦':0xa6,
'§':0xa7,
'¨':0xa8,
'©':0xa9,
'ª':0xaa,
'«':0xab,
'¬':0xac,
'SHY':0xad,
'®':0xae,
'¯':0xaf,
'°':0xb0,
'±':0xb1,
'²':0xb2,
'³':0xb3,
'´':0xb4,
'µ':0xb5,
'¶':0xb6,
'·':0xb7,
'¸':0xb8,
'¹':0xb9,
'º':0xba,
'»':0xbb,
'¼':0xbc,
'½':0xbd,
'¾':0xbe,
'¿':0xbf,
'À':0xc0,
'Á':0xc1,
'Â':0xc2,
'Ã':0xc3,
'Ä':0xc4,
'Å':0xc5,
'Æ':0xc6,
'Ç':0xc7,
'È':0xc8,
'É':0xc9,
'Ê':0xca,
'Ë':0xcb,
'Ì':0xcc,
'Í':0xcd,
'Î':0xce,
'Ï':0xcf,
'Ð':0xd0,
'Ñ':0xd1,
'Ò':0xd2,
'Ó':0xd3,
'Ô':0xd4,
'Õ':0xd5,
'Ö':0xd6,
'×':0xd7,
'Ø':0xd8,
'Ù':0xd9,
'Ú':0xda,
'Û':0xdb,
'Ü':0xdc,
'Ý':0xdd,
'Þ':0xde,
'ß':0xdf,
'à':0xe0,
'á':0xe1,
'â':0xe2,
'ã':0xe3,
'ä':0xe4,
'å':0xe5,
'æ':0xe6,
'ç':0xe7,
'è':0xe8,
'é':0xe9,
'ê':0xea,
'ë':0xeb,
'ì':0xec,
'í':0xed,
'î':0xee,
'ï':0xef,
'ð':0xf0,
'ñ':0xf1,
'ò':0xf2,
'ó':0xf3,
'ô':0xf4,
'õ':0xf5,
'ö':0xf6,
'÷':0xf7,
'ø':0xf8,
'ù':0xf9,
'ú':0xfa,
'û':0xfb,
'ü':0xfc,
'ý':0xfd,
'þ':0xfe,
'ÿ':0xff }
let offsetArray = [];
function convertISO8859ToUtf8Simple(s) {
offsetArray = [];
const buf = new Uint8Array([...s].map((c, index) =>
{
if(isoToUtfTable[c]) {
if(offsetArray.length > 0 && offsetArray[offsetArray.length -1]+3 < index) {
offsetArray.push(index);
}
if(offsetArray.length == 0) {
offsetArray.push(index);
}
}
return isoToUtfTable[c];
}
));
return String.fromCharCode(...buf);
}
function decode_utf8(s) {
return decodeURIComponent(escape(s));
}
function emojiStringToArray(str) {
split = str.split(/([\uD800-\uDBFF][\uDC00-\uDFFF])/);
arr = [];
for (var i=0; i<split.length; i++) {
char = split[i]
if (char !== "" && !char.includes('\u0000')) {
arr.push(char);
}
}
return arr;
};
const string = 'hello 😌😌 with some emojis 😊 ';
function finalString(s) {
const emojis = emojiStringToArray(decode_utf8(convertISO8859ToUtf8Simple(s)));
for(let i = 0; i<offsetArray.length; i++){
let position = 0;
if (i == 0) {
position = offsetArray[i];
} else {
position = (i * -3) + offsetArray[i] + (i);
}
s = [s.slice(0, position), emojis[i], s.slice(position+4)].join('');
}
return s;
}
console.log(finalString(string));