来自 MySQL 数据库的 UTF-8 字符串的 PHP 输出编码问题

Question

我知道这个问题在这里一直以一种或另一种形式出现，但我对如何解决它有点不知所措。 我有一个运行 MySQL 的 PHP 网站，将一些扩展字符显示为乱码。 据我所知，从内容导入到在屏幕上显示的每一步都被编码为 UTF-8。 尽管如此，它仍然显示出奇怪的编码问题。 这是第一个测试示例（Natural Phënåm¥na，这是故意的），其中mb_detect_encoding标识为 UTF-8，我只能使用utf8_decode正确显示：

no utf8_decode: Natural PhÃ«nÃ¥mÂ¥na
utf8_decode: Natural Phënåm¥na

第二个例子，它甚至从来没有正确地 utf8_decodes （应该是一个 ümlaut 和“排版师的引号”（故意添加的扩展字符，作为测试：

no utf8_decode: This pÃ¼rson from â€œVancouver, Canadaâ€
utf8_decode: This pürson from �??Vancouver, Canada�?�

我最初的想法是它被双重编码，但我认为这不是正在发生的事情。 当我在命令行上进行查询时，一切都在 MySQL 中正确显示。

以下是我调查过的所有事情的概述：

导入的内容验证为UTF-8，通过UTF-8连接导入MySQL
MySQL数据库，表，列都是UTF-8，utf_unicode_*
在 Amazon RDS 上，MySQL 中的 character_set_client 等变量设置为 utf8
PHP PDO 连接为 UTF-8，NAME 设置为 UTF-8
PHP 标头字符集和 HTML 元字符集都是 UTF-8
mb_detect_encoding 为两个字符串返回 UTF-8

所以经过几个小时的故障排除后，我有点不知所措。 一时兴起，我什至尝试将 HTML 标头/元和 PHP 标头设置为 ISO-8559-1，但这也不起作用。

我最后花了一段时间与 Amazon RDS 进行斗争以设置正确的变量，但除此之外我没有想法。

mysql> show variables like '%character%';
+--------------------------+-------------------------------------------+
| Variable_name            | Value                                     |
+--------------------------+-------------------------------------------+
| character_set_client     | utf8                                      |
| character_set_connection | utf8                                      |
| character_set_database   | utf8                                      |
| character_set_filesystem | utf8                                      |
| character_set_results    | utf8                                      |
| character_set_server     | utf8                                      |
| character_set_system     | utf8                                      |
| character_sets_dir       | /rdsdbbin/mysql-5.5.40.R1/share/charsets/ |
+--------------------------+-------------------------------------------+

所以我想知道，是否有我遗漏的步骤？ 有什么明显的？ 提前致谢。

更新

这是我的 PHP 输出脚本，为了进一步说明我提到的“输出”：

<?php header("Content-type: text/html; charset=utf-8"); ?>
<html>
<header>
    <meta charset="utf-8" />
    <title>My test</title>
</header>
    <body>
<?php


    try {
        $dbh = new PDO("mysql:host=localhost;dbname=database", 
        "user", "password", array(PDO::MYSQL_ATTR_INIT_COMMAND => "SET NAMES utf8"));
    }
    catch(PDOException $e) {
        echo $e->getMessage();
    }

    $sth = $dbh->prepare("my select statement");
$sth->execute();
$rows = $sth->fetchAll(PDO::FETCH_ASSOC);


foreach ($rows as $row) {
    echo mb_detect_encoding($row['name']);
    echo "<br>no utf8 decode: ". $row['name'] . "<br>\n";
    echo "single utf8 decode: ". utf8_decode($row['name']) . "<br>\n";
    echo "no utf8 decode: ". $row['description'] . "<br>\n";
    echo "single utf8 decode: ". (utf8_decode($row['description'])) . "<br>\n";
}

?>
</body>
</html>

更新 #2我也尝试过直接从 PHP echo 和直接的静态 HTML 将这些相同的字符输出到浏览器中，并且字符显示得非常好。

echo "“test ü ö”<br>"; ?>
<p>“test ü ö”</p>

Answer 1

您不应更改所有character_set%字段，仅更改受SET NAMES utf8;影响的三个字段SET NAMES utf8; .

不要使用 utf8_encode 或解码。

您可能在存储时搞砸了。

这似乎可以恢复字符，但这不是一个可行的解决方法：

CONVERT(CAST(CONVERT('pÃ¼rson from â€œVancouver, Canadaâ€' USING latin1)
             AS BINARY)
        USING utf8)
--> 'pürson from “Vancouver, Canada - spec',

为了弄清楚做了什么，请提供

SELECT col, HEX(col) FROM tbl WHERE ...

对于某些未正确渲染的单元格。

Answer 2

您提到在所有数据流中都是 utf-8 格式，除非它在屏幕上呈现。 我假设在浏览器上，而不是控制台上。 如果是这样，请检查 html 的<head>标签内是否有<meta charset="utf-8"> 。 就像在 html5 样板中一样https://github.com/h5bp/html5-boilerplate/blob/master/dist/index.html

Answer 3

所以它看起来在 MySQL 级别上以某种方式在其中一些字段中对 UTF-8 字符进行了双重编码。 我终于能够通过这篇很棒的博客文章走出 MySQL 字符集地狱来确定它。 不是 100% 清楚当它从 Python 发送时是否被“双重编码”，或者当它击中 PHP API 时，但它是 90% 的答案，就在那里。

来自 MySQL 数据库的 UTF-8 字符串的 PHP 输出编码问题

问题描述

3 个解决方案

解决方案1
1 已采纳 2015-06-24 20:31:32

解决方案2
0 2015-06-23 01:25:02

解决方案3
0 2015-06-23 17:21:29

来自 MySQL 数据库的 UTF-8 字符串的 PHP 输出编码问题

问题描述

3 个解决方案

解决方案1 1 已采纳 2015-06-24 20:31:32

解决方案2 0 2015-06-23 01:25:02

解决方案3 0 2015-06-23 17:21:29

解决方案1
1 已采纳 2015-06-24 20:31:32

解决方案2
0 2015-06-23 01:25:02

解决方案3
0 2015-06-23 17:21:29