Как записать файл в формате UTF-8?

У меня есть куча файлов, которые не в кодировке UTF-8, и я конвертирую сайт в кодировку UTF-8.

Я использую простой скрипт для файлов, которые я хочу сохранить в utf-8, но файлы сохраняются в старой кодировке:

header('Content-type: text/html; charset=utf-8');
mb_internal_encoding('UTF-8');
$fpath="folder";
$d=dir($fpath);
while (False !== ($a = $d->read()))
 {

 if ($a != '.' and $a != '..')
  {

  $npath=$fpath.'/'.$a;

  $data=file_get_contents($npath);

  file_put_contents('tempfolder/'.$a, $data);

  }

 }

Как я могу сохранить файлы в кодировке utf-8?

10 ответов

Решение

file_get_contents / file_put_contents не будет магически преобразовывать кодировку.

Вы должны преобразовать строку явно; например с iconv() или же mb_convert_encoding(),

Попробуй это:

$data = file_get_contents($npath);
$data = mb_convert_encoding($data, 'UTF-8', 'OLD-ENCODING');
file_put_contents('tempfolder/'.$a, $data);

Или, альтернативно, с помощью потоковых фильтров PHP:

$fd = fopen($file, 'r');
stream_filter_append($fd, 'convert.iconv.UTF-8/OLD-ENCODING');
stream_copy_to_stream($fd, fopen($output, 'w'));

Добавить спецификацию: UTF-8

file_put_contents($myFile, "\xEF\xBB\xBF".  $content); 

Iconv на помощь.

В Unix/Linux простая команда оболочки может использоваться альтернативно для преобразования всех файлов из данного каталога:

 recode L1..UTF8 dir/*

Может быть запущен через PHPs exec().

//add BOM to fix UTF-8 in Excel
fputs($fp, $bom =( chr(0xEF) . chr(0xBB) . chr(0xBF) ));

Я получил эту строку от Cool

Это очень полезный вопрос. Я думаю, что мое решение для Windows 10 PHP7 весьма полезно для людей, у которых еще есть проблемы с преобразованием UTF-8.

Вот мои шаги. Сценарий PHP, вызывающий следующую функцию, здесь названный utfsave.php, должен иметь кодировку UTF-8, это можно легко сделать путем преобразования в UltraEdit.

В utfsave.php мы определяем функцию, вызывающую PHP fopen($filename, "wb"), т. Е. Она открывается в обоих режимах записи w, и особенно с b в двоичном режиме.

<?php
//
//  UTF-8 编码:
//
// fnc001: save string as a file in UTF-8:
// The resulting file is UTF-8 only if $strContent is,
// with French accents, chinese ideograms, etc..
//
function entSaveAsUtf8($strContent, $filename) {
  $fp = fopen($filename, "wb"); 
  fwrite($fp, $strContent);
  fclose($fp);
  return True;
}

//
// 0. write UTF-8 string in fly into UTF-8 file:
//
$strContent = "My string contains UTF-8 chars ie 鱼肉酒菜 for un été en France";

$filename = "utf8text.txt";

entSaveAsUtf8($strContent, $filename);


//
// 2. convert CP936 ANSI/OEM - chinese simplified GBK file into UTF-8 file:
//
$strContent = file_get_contents("cp936gbktext.txt");
$strContent = mb_convert_encoding($strContent, "UTF-8", "CP936");


$filename = "utf8text2.txt";

entSaveAsUtf8($strContent, $filename);

?>

Исходный файл cp936gbktext.txt содержимое файла:

>>Get-Content cp936gbktext.txt
My string contains UTF-8 chars ie 鱼肉酒菜 for un été en France 936 (ANSI/OEM - chinois simplifié GBK)

Запуск utf8save.php на Windows 10 PHP, созданный таким образом utf8text.txt, utf8text2.txt файлы будут автоматически сохранены в формате UTF-8.

При использовании этого метода символ спецификации не требуется. Решение BOM плохое, потому что оно вызывает проблемы, когда мы, например, получаем sql-файл для MySQL.

Стоит отметить, что мне не удалось выполнить работу file_put_contents($filename, utf8_encode($mystring)); для этого.

++++++++++++++++++++++++++++++++++++++++++++++++++ +++++++++++++

Если вы не знаете кодировку исходного файла, вы можете перечислить кодировки с помощью PHP:

print_r(mb_list_encodings());

Это дает такой список:

Array
(
  [0] => pass
  [1] => wchar
  [2] => byte2be
  [3] => byte2le
  [4] => byte4be
  [5] => byte4le
  [6] => BASE64
  [7] => UUENCODE
  [8] => HTML-ENTITIES
  [9] => Quoted-Printable
  [10] => 7bit
  [11] => 8bit
  [12] => UCS-4
  [13] => UCS-4BE
  [14] => UCS-4LE
  [15] => UCS-2
  [16] => UCS-2BE
  [17] => UCS-2LE
  [18] => UTF-32
  [19] => UTF-32BE
  [20] => UTF-32LE
  [21] => UTF-16
  [22] => UTF-16BE
  [23] => UTF-16LE
  [24] => UTF-8
  [25] => UTF-7
  [26] => UTF7-IMAP
  [27] => ASCII
  [28] => EUC-JP
  [29] => SJIS
  [30] => eucJP-win
  [31] => EUC-JP-2004
  [32] => SJIS-win
  [33] => SJIS-Mobile#DOCOMO
  [34] => SJIS-Mobile#KDDI
  [35] => SJIS-Mobile#SOFTBANK
  [36] => SJIS-mac
  [37] => SJIS-2004
  [38] => UTF-8-Mobile#DOCOMO
  [39] => UTF-8-Mobile#KDDI-A
  [40] => UTF-8-Mobile#KDDI-B
  [41] => UTF-8-Mobile#SOFTBANK
  [42] => CP932
  [43] => CP51932
  [44] => JIS
  [45] => ISO-2022-JP
  [46] => ISO-2022-JP-MS
  [47] => GB18030
  [48] => Windows-1252
  [49] => Windows-1254
  [50] => ISO-8859-1
  [51] => ISO-8859-2
  [52] => ISO-8859-3
  [53] => ISO-8859-4
  [54] => ISO-8859-5
  [55] => ISO-8859-6
  [56] => ISO-8859-7
  [57] => ISO-8859-8
  [58] => ISO-8859-9
  [59] => ISO-8859-10
  [60] => ISO-8859-13
  [61] => ISO-8859-14
  [62] => ISO-8859-15
  [63] => ISO-8859-16
  [64] => EUC-CN
  [65] => CP936
  [66] => HZ
  [67] => EUC-TW
  [68] => BIG-5
  [69] => CP950
  [70] => EUC-KR
  [71] => UHC
  [72] => ISO-2022-KR
  [73] => Windows-1251
  [74] => CP866
  [75] => KOI8-R
  [76] => KOI8-U
  [77] => ArmSCII-8
  [78] => CP850
  [79] => JIS-ms
  [80] => ISO-2022-JP-2004
  [81] => ISO-2022-JP-MOBILE#KDDI
  [82] => CP50220
  [83] => CP50220raw
  [84] => CP50221
  [85] => CP50222
)

Если вы не можете угадать, попробуйте один за другим, так как mb_detect_encoding() не может легко выполнить эту работу.

Если вы хотите рекурсивно использовать перекодирование и фильтровать по типу, попробуйте следующее:

find . -name "*.html" -exec recode L1..UTF8 {} \;

Это работает для меня.:)

$f=fopen($filename,"w"); 
# Now UTF-8 - Add byte order mark 
fwrite($f, pack("CCC",0xef,0xbb,0xbf)); 
fwrite($f,$content); 
fclose($f); 

Я собрал все вместе и получил простой способ конвертировать текстовые файлы ANSI в "UTF-8 No Mark":

function filesToUTF8($searchdir,$convdir,$filetypes) {
  $get_files = glob($searchdir.'*{'.$filetypes.'}', GLOB_BRACE);
  foreach($get_files as $file) {
    $expl_path = explode('/',$file);
    $filename = end($expl_path);
    $get_file_content = file_get_contents($file);
    $new_file_content = iconv(mb_detect_encoding($get_file_content, mb_detect_order(), true), "UTF-8", $get_file_content);
    $put_new_file = file_put_contents($convdir.$filename,$new_file_content);
  }
}

Использование: filesToUTF8('C:/Temp/','C:/Temp/conv_files/','php,txt');

  1. Откройте ваши файлы в ноутбуке Windows
  2. Измените кодировку на кодировку UTF-8
  3. Сохраните ваш файл
  4. Попробуйте снова!: О)
Другие вопросы по тегам