[MySQL][PHP] cyrylica na stronie Opcje

[jakkolwiek]

Witam,
mam problem z wyświetlaniem cyrylicy na stronie. W bazie MySQL mam ustawione strony kodowania i porównywania tekstów na kolejno UTF-8 i utf8_general_ci. Pola w tabeli, w której przetrzymywane są dane zapisane cyrylicą - ustawione jest na utf8_general_ci. Strona ze skryptem, który wprowadza te dane do tabel - ma ustawione kodowanie na utf-8. Strona, na której powinien być wyświetlony tekst w cyrylicy - kodowanie ustawione na utf-8. Mimo tego wszystkiego, na stronie widzę same znaki zapytania. Nie wiem już co zrobić, bardzo proszę o jakieś naprawadzenie na rozwiązanie albo radę...

[vokiel]

A czy przy łączeniu z bazą ustawiasz kodowanie połączenia?

[SQL] pobierz, plaintext 
SET NAMES utf8;
SET character_set_connection=utf8;
SET character_set_client=utf8;
SET character_set_results=utf8;
[SQL] pobierz, plaintext 

btw: Polskie znaki na stronie www

[cojack]

Spróbuj zapisywać do bazy danych poprzez htmlspecialchars z ENT_QUOTES i UTF-8, a odczytuj i wyświetlaj za pomocą: htmlspecialchars_decode i ENT_QUOTES. Powinno pomóc, sprawdź jeszcze czy plik też jest kodowany w utf8.

[jakkolwiek]

Spróbowałem tego co obaj piszecie, najpierw kolejno później i jedną i drugą metodę i efekt jest taki sam jak poprzednio - same znaki zapytania.

Fragment kodu skryptu, który uploaduje do bazy

[PHP] pobierz, plaintext 
    $c = mysql_connect('localhost', 'root', '');
    $s = mysql_select_db('nhm');
    $n = mysql_query("SET NAMES 'utf8'");
    mysql_query('SET character_set_connection=utf8');
    mysql_query('SET character_set_client=utf8');
    mysql_query('SET character_set_results=utf8');
    $uchwyt = fopen($_GET['np'].".csv", 'r');
    if($delete = mysql_query("DROP TABLE t_nhm_new;") &&
                         mysql_query("CREATE TABLE t_nhm_new (
                                        nhm VARCHAR( 8 ) NOT NULL ,
                                        definition TEXT NOT NULL ,
                                        language INT( 2 ) NOT NULL ,
                                        decode_definition TEXT NOT NULL 
                                        ) ENGINE = MYISAM;") &&
                         mysql_query("ALTER TABLE t_nhm_new CHANGE definition definition TEXT CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL ,
                                        CHANGE decode_definition decode_definition TEXT CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL;")) {
            echo("<b>DELETE<font color='green'> ok</font><br></b>");
            } else {
                die(mysql_error());
            }
 
        while(($data = fgetcsv($uchwyt, 0, "    ")) !== false) {
            list($kod, $pl, $de, $en, $ru) = $data;
 
            $s = $kod;
                for($i = 0; $i < 1; $i++) {
                    $x = preg_replace('/(00)+$/', '', $s);
                    if(mysql_query("INSERT INTO t_nhm_new(nhm, definition, language, decode_definition) VALUES('".$x."', '".$pl."', '".$plCode."', '".replacePL($pl)."')") 
                    && mysql_query("INSERT INTO t_nhm_new(nhm, definition, language, decode_definition) VALUES('".$x."', '".htmlspecialchars($ru, ENT_QUOTES)."', '".$ruCode."', '".$ru."')")
                    && mysql_query("INSERT INTO t_nhm_new(nhm, definition, language, decode_definition) VALUES('".$x."', '".$de."', '".$deCode."', '".replaceDE($de)."')")
                    && mysql_query("INSERT INTO t_nhm_new(nhm, definition, language, decode_definition) VALUES('".$x."', '".wytnij($en)."', '".$enCode."', '".$en."')")) {
                    } else {
                        die("<font color='red'>".mysql_error()."</font><br>");
                    }
                }
        }
[PHP] pobierz, plaintext 

Fragment, który odpowiada za wyświetlenie wyniku:

[PHP] pobierz, plaintext 
    function ShowNHMs($value, $count) {
      echo '<table width="650" align="center" border="0">';
      echo '<th width="100" align="center" class="TableHead">Kod NHM</th>'.
           '<th width="550" align="center" class="TableHead">Opis</th>'.
           '</table>';
      echo '<table width="650" align="center" border="0">';
      $j = 1;     
 
      while ($row = mysql_fetch_array($value)) {
              $NHMnr = $row[0];
        switch(strlen(trim($row[0]))) {
          case 2 : $klasaNHM = 'header';
                   $klasaDef = $klasaNHM;
                   $poloz = 'left';
                   break;
          case 4 : $klasaNHM = 'tekst12';
                   $klasaDef = $klasaNHM;
                   $poloz = 'left';
                   break;
          case 6 : $klasaNHM = 'NHMtekstBold';
                   $klasaDef = 'tekst11bold';
                   $poloz = 'center';
                                     $NHMnr = $NHMnr.'&nbsp;';
                   break;
          default: $klasaNHM = 'NHMtekst';
                   $klasaDef = 'tekstsmall';
                   $poloz = 'center';
                   break;
        }
        if (($j % 2) == 0)
          $color = "";
        else  
          $color = ' bgcolor="#D8E6F0"';
        echo '<tr>';
        echo '<td width="100" align="'.$poloz.'" class="'.$klasaNHM.'"'.$color.'>'.$NHMnr.'</td>'.
             '<td width="550" align="left" class="'.$klasaDef.'"'.$color.'>'.$row[1].'</td>'; 
        echo '</tr>';
        $j++;
      } 
      echo '</table>';
    }
[PHP] pobierz, plaintext 

Wszystkie pliki są ustawione na utf8, łącznie z CSV.

[cojack]

A zobacz w bazie jak Ci przechowuje, może już na samym poziomie bazy się tworzy problem?


@edit
pomysł z irca, masz w head ustawiony charset na utf-8?

@edit 2
kolejny pomysł z irca, może masz źle dobraną czcionkę? arial/tahoma/verdana propozycja.

@edit 3
po ENGINE MYISAM, dodaj DEFAULT CHARSET=utf8, ten pomysł mój.


@EDIT tam na dole

to ja się poddaje.

Ten post edytował cojack 28.09.2009, 13:51:30

[jakkolwiek]

Podglądałem zawartość bazy PhpMyAdminem i MySQL Query Browserem - w obu przypadkach w bazie jest poprawnie zapisana cyrylica.
W każdym pliku mam ustawione w head charset na utf-8, nie licząc pliku zawierającego same funkcje wypisane, który później jest includowany w głównym pliku. Pomysł z czcionką wydał mi się dobry, bo jak się okazało ustawiałem wszędzie Helveticę, ale po zmianie na Ariala lub Verdanę dalej to samo. Dodałem DEFAULT CHARSET=utf8, wyczyściłem bazę załadowałem dane jeszcze raz, wszystko przeładowane i dalej same znaki zapytania. Tylko w przypadku cyrylicy, polskie znaki czy niemieckie umlauty w tej samej tabeli, które się znajdują wyświetlane są bez problemu.

[vokiel]

A w jakim kodowaniu jest ten plik .csv?

Dane w bazie są poprawne po załadowaniu ich z pliku .csv?

A jakie jest kodowanie samych plików php? Może przekonwertuj pliki php na UTF8 bez BOM za pomocą np notepad++ ?

[jakkolwiek]

Wszystko jest przekonwertowane na UTF8 właśnie przy pomocy notepad++, dodatkowo dla pewności już jeszcze skorzystałem z gżegżółki na pliku CSV. Świeżo po załadowaniu danych do bazy widzę jest wyświetlone poprawnie w PhpMyAdmin, na stronie nie

[vokiel]

Masz to gdzieś dostępne z zewnątrz?

Edit:
A i jeszcze jedno, czy dodajesz

[SQL] pobierz, plaintext 
SET NAMES utf8;
[SQL] pobierz, plaintext 

przed każdym pobraniem danych z bazy, czy tylko przed zapisem?

Ten post edytował vokiel 28.09.2009, 14:30:44

[jakkolwiek]

Niestety tylko na lokalu i nie mogę tego udostępnić ze względu na dane firmowe (IMG:style_emoticons/default/sad.gif)

[vokiel]

To może zrób taki test.
Utwórz nową bazę danych i wypełnij rekordami

[SQL] pobierz, plaintext 
SET NAMES utf8;
SET character_set_connection=utf8;
SET character_set_client=utf8;
SET character_set_results=utf8;
 
CREATE TABLE `TEST` (
  `ID` int(11) NOT NULL AUTO_INCREMENT,
  `PL` varchar(255) DEFAULT NULL,
  `DE` varchar(255) DEFAULT NULL,
  `RU` varchar(255) DEFAULT NULL,
  PRIMARY KEY  (`ID`)
) ENGINE=MyISAM DEFAULT CHARSET=utf8;
 
INSERT INTO TEST (ID,PL,DE, RU) VALUES (NULL,'Polski','Zusätzlich','Новости');
[SQL] pobierz, plaintext 

Odpal notepad++ utwórz nowy plik (UTF8 bez BOM), zrób proste zapytanie z wyświetleniem:

[PHP] pobierz, plaintext 
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns="http://www.w3.org/1999/xhtml" dir="ltr" lang="pl-PL">
<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />
<title>Test</title>
</head>
<body>
<?php
$query = "SELECT * FROM `TEST`;";
$connection = mysql_connect ("localhost", "root", "");
$db = mysql_select_db ('NOWA', $connection);
mysql_query("SET NAMES 'utf8'");
mysql_query('SET character_set_connection=utf8'); 
mysql_query('SET character_set_client=utf8'); 
mysql_query('SET character_set_results=utf8');
$result = mysql_query($query);
while($wiersz = mysql_fetch_assoc($result)){
    echo '<br />'.$wiersz['ID'].' | '.$wiersz['PL'].' | '.$wiersz['DE'].' | '.$wiersz['RU'];
    //ewentualnie
    var_dump($wiersz);
}
?>
</body>
</html>
[PHP] pobierz, plaintext 

Zobacz jakie wyniki otrzymasz. Jeśli tutaj będzie ok to znaczy, że musisz przekonwertować pliki (notepad++ doskonale się do tego nadaje, nie trzeba gżegżółki).

[jakkolwiek]

Dzięki za pomoc! Twój przykład zadziałał i w sumie dużo mi pomógł. Pliki miałem już wcześniej przekonwertowane przy pomocy notepada++, a dopiero później próbowałem jeszcze dla pewności gżegżółką. Co prawda nadal zamiast cyrylicy mam znaki zapytania, ale teraz mam pewność przynajmniej, że błąd nie leży po stronie bazy (IMG:style_emoticons/default/smile.gif) Dzięki! (IMG:style_emoticons/default/smile.gif)

@EDIT:
oczywiście błąd spowodował czynnik ludzki. Wystarczyło dodać:

[PHP] pobierz, plaintext 
mysql_query("SET NAMES 'utf8'");
mysql_query('SET character_set_connection=utf8');
mysql_query('SET character_set_client=utf8');
mysql_query('SET character_set_results=utf8');
[PHP] pobierz, plaintext 

do połączenia przy pobieraniu danych z bazy. Dodałem to oczywiście w złym miejscu, dodałem przy insercie, ale zapomniałem przy klasie odpowiedzialnej za połączenie przy pobieraniu danych.
Jeszcze raz dziękuję za pomoc zarówno cojack'owi jak i vokiel'owi!

Ten post edytował jakkolwiek 29.09.2009, 09:29:04

[cojack]

Tylko ja się zastanawiam, jak to jest możliwe że przy htmlspecialchars dalej miałeś pytajniki. Dla mnie to jest jakiś absurd.No ale ważne że działa.