MySQL 数据似乎不采用应有的字符编码

Question

首先，感谢阅读本文的人。 我在使用 PHP 的 PDO 进行交互的 MySQL 数据库中的字符编码有一个非常奇怪的问题。表全部使用UTF8编码，webapp使用utf-8，但似乎数据库中存储的数据实际上不是utf-8而是latin-1。

很长一段时间以来，一切都运行良好，但是在导入 utf-8 编码的数据文件或执行包含特殊字符（例如“é”或“ë”）的全文搜索时，这会导致问题。

编辑：

一些回复表明这是我的终端的问题。它不是：

foreach($dbh->query("SELECT c FROM t") as $row){
    echo $row['c'] ."\n";
    echo urlencode($row['c'])."\n";
}
$dbh->exec("SET NAMES 'latin1'");
foreach($dbh->query("SELECT c FROM t") as $row){
    echo $row['c'] ."\n";
    echo urlencode($row['c'])."\n";
}
$dbh->exec("SET NAMES 'utf8'");
foreach($dbh->query("SELECT c FROM t") as $row){
    echo $row['c'] ."\n";
    echo urlencode($row['c'])."\n";
}

输出以下内容：

é
%C3%A9f
é
%C3%A9f
é
%C3%83%C2%A9f

到目前为止感谢大家。

END EDIT

因此，首先我检查表是否正常工作：

USE information_schema;

mysql> SELECT table_collation FROM tables WHERE table_schema="mydb" and table_name="mytable";
+-----------------+
| table_collation |
+-----------------+
| utf8_general_ci |
+-----------------+
1 row in set (0.00 sec)

mysql> SELECT character_set_name,collation_name FROM information_schema.columns WHERE table_schema="mydb" and table_name="t" and column_name="c";
+--------------------+-----------------+
| character_set_name | collation_name  |
+--------------------+-----------------+
| utf8               | utf8_general_ci |
+--------------------+-----------------+
1 row in set (0.00 sec)

但是，数据似乎不是 utf-8，而是 latin-1：

mysql> use mydb;
Database changed

mysql> SET NAMES 'latin1';
Query OK, 0 rows affected (0.00 sec)

mysql> select c from t;
+---+
| c |
+---+
| é |
+---+
1 row in set (0.00 sec)

mysql> SET NAMES 'utf8';
Query OK, 0 rows affected (0.00 sec)

mysql> select c from t;
+----+
| c  |
+----+
| é |
+----+
1 row in set (0.00 sec)

所以我有两个问题：

1）大多数重要的是，我可以对数据库中已有的数据做什么？

2) 有没有办法设置数据库，以便在连接时它实际上使用utf-8，或者每次都必须执行SET NAMES查询？

非常感谢您的时间和帮助，

马特

Answer 1

这是你的终端似乎是 latin1，而不是数据:)

有没有办法设置数据库，使其实际上使用 utf-8

你已经设置好了。
您唯一需要做的就是设置 client 编码，这是通过 SET NAMES 'utf8' 完成的。

事实上，通过使用 SET NAMES，您可以使数据以您设置的任何编码显示。这是 SET NAMES 魔法词的唯一目的。

如果您遇到本问题未涵盖的一些编码问题，

我可以对数据库中已有的数据做什么？

无论您希望什么，只要您的数据库不返回 ? 标记即可。
要恢复数据，您必须将名称设置为表的数据编码集。这将阻止 mysql 重新编码数据。因此，您可以获取或转储它，然后使用正确的设置再次加载它。

编辑

经过一番考虑，我想说你的数据采用utf8格式，而表编码以某种方式设置为latin1。

%C3%A9 是 é 字符的完全有效的 utf-8 表示形式。 （不知道你在哪里得到尾随 f ）

而 %C3%83%C2%A9 是 %C3%A9 的 utf-f 编码版本。因此，您的数据库似乎认为您的数据采用 latin1 格式，并将其编码为 utf8。

因此，当您将名称设置为 latin1 时，它不会介意并且不会重新编码。

结论：

1. 仔细检查您的表（和字段）编码。它应该是 latin1

2. 是的，要保存您的数据，您必须执行类似的操作

***上帝，我讨厌这种自动格式化问题使我无法在列表项之后立即发布代码

mysqldump --default_charset=latin1 mydb > mydb.sql

，然后检查此转储并将 latin1 的每个外观更改为 utf8。
然后加载回来。

不要忘记先备份您的数据！

Answer 2

如果您从 HTML 页面收到数据并将其保存到数据库中，请不要忘记在 HTML 的 head 部分中设置正确的文本编码：

  <meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1"/>

如果您不这样做如果设置文本编码，浏览器可能会返回不同编码的文本。

关于1)：看看

string utf8_decode ( string $data )

这里描述的PHP函数。从数据库中检索记录，转码为所需的编码并将其写回。

Answer 3

与您的客户连接时使用

SET character_set_client = "UTF-8";

。在 PHP 中，您将通过使用以下函数来实现此目的：

set_charset($encoding)

在执行任何实际数据插入/更新之前

Answer 4

1. 连接到您的数据库

2. 将连接设置为 UTF-8

   SET NAMES 'utf8';

在您的 HTML 文件中：

<meta http-equiv="Content-Type" content="text/html; charset=utf-8" />