如何转换“u00e9”转换为 utf8 字符，在 mysql 或 php 中？

Question

我正在对一些正在导入 mysql 的混乱数据进行一些数据清理。

数据包含“伪”unicode 字符，这些字符实际上嵌入到字符串中，如“u00e9”等。

所以一个字段可能是..“Jalostotitlu00e1n” 我需要撕掉那个笨拙的“u00e1n”并将其替换为相应的utf字符

我可以在mysql中执行此操作，也许使用子字符串和CHR，但我通过PHP预处理数据，所以我也可以在那里执行此操作。

我已经知道如何配置 mysql 和 php 以使用 utf 数据。问题实际上出在我导入的源数据中。

谢谢

Answer 1

/*
php 将 utf8 html 转换为 ansi 的函数
*/

public static function Utf8_ansi($valor='') {

    $utf8_ansi2 = array(
    "\u00c0" =>"À",
    "\u00c1" =>"Á",
    "\u00c2" =>"Â",
    "\u00c3" =>"Ã",
    "\u00c4" =>"Ä",
    "\u00c5" =>"Å",
    "\u00c6" =>"Æ",
    "\u00c7" =>"Ç",
    "\u00c8" =>"È",
    "\u00c9" =>"É",
    "\u00ca" =>"Ê",
    "\u00cb" =>"Ë",
    "\u00cc" =>"Ì",
    "\u00cd" =>"Í",
    "\u00ce" =>"Î",
    "\u00cf" =>"Ï",
    "\u00d1" =>"Ñ",
    "\u00d2" =>"Ò",
    "\u00d3" =>"Ó",
    "\u00d4" =>"Ô",
    "\u00d5" =>"Õ",
    "\u00d6" =>"Ö",
    "\u00d8" =>"Ø",
    "\u00d9" =>"Ù",
    "\u00da" =>"Ú",
    "\u00db" =>"Û",
    "\u00dc" =>"Ü",
    "\u00dd" =>"Ý",
    "\u00df" =>"ß",
    "\u00e0" =>"à",
    "\u00e1" =>"á",
    "\u00e2" =>"â",
    "\u00e3" =>"ã",
    "\u00e4" =>"ä",
    "\u00e5" =>"å",
    "\u00e6" =>"æ",
    "\u00e7" =>"ç",
    "\u00e8" =>"è",
    "\u00e9" =>"é",
    "\u00ea" =>"ê",
    "\u00eb" =>"ë",
    "\u00ec" =>"ì",
    "\u00ed" =>"í",
    "\u00ee" =>"î",
    "\u00ef" =>"ï",
    "\u00f0" =>"ð",
    "\u00f1" =>"ñ",
    "\u00f2" =>"ò",
    "\u00f3" =>"ó",
    "\u00f4" =>"ô",
    "\u00f5" =>"õ",
    "\u00f6" =>"ö",
    "\u00f8" =>"ø",
    "\u00f9" =>"ù",
    "\u00fa" =>"ú",
    "\u00fb" =>"û",
    "\u00fc" =>"ü",
    "\u00fd" =>"ý",
    "\u00ff" =>"ÿ");

    return strtr($valor, $utf8_ansi2);      

}

Answer 2

有一个办法。将所有 uXXXX 替换为其 HTML 表示形式，并执行 html_entity_decode()

即 echo html_entity_decode("Jalostotitlán");

每个 UTF u1234 形式的字符可以在 HTML 中打印为 ሴ。但是进行替换非常困难，因为如果没有其他字符来标识 UTF 序列的开头，则可能会出现很多误报。一个简单的正则表达式可以是

preg_replace('/u([\da-fA-F]{4})/', '&#x\1;', $str)

Answer 3

我的 Twitter 时间线脚本将特殊字符（例如 é）返回到 \u00e9，因此我删除了反斜杠并使用 @rubbude 他的 preg_replace。

// Fix uxxxx charcoding to html
$text = "De #Haarstichting is h\u00e9t medium voor alles Into:  De #Haarstichting is hét medium voor alles";
$str     = str_replace('\u','u',$text);
$str_replaced = preg_replace('/u([\da-fA-F]{4})/', '&#x\1;', $str);

echo $str_replaced;

它对我有用，结果是：
De #Haarstichting 是中等内容
进入：
De #Haarstichting 是所有内容的中等内容

Answer 4

虽然多年后才回复，但下次我需要它时，我会记得这个函数对我来说效果很好：

mb_convert_encoding($string, 'ISO-8859-1', 'UTF-8');

它与 utf8_decode 完全相同，但该函数已被弃用PHP 8.2.0