MySQL encoding кошмар

Котяр · Сообщение **Котяр** » 09 сен 2006, 23:41

пытаюсь запихнуть в базу sql файл с русским текстом, получаю одни "????..???"

конвертнул файл в utf8: MySQL ругается - типа какая-то загогулина неизвестно откуда появляется перед INSERT

как с этим бороться

bormo · Сообщение **bormo** » 10 сен 2006, 00:41

попробовал повторить - через php запихивается нормально, mysql 3 на rhe 3 php 4.2. Русская локаль не установлена.

Скорее по дороге где-то какой-то драйвер режет. Хотя на 100% не уверен. А что в my.cfg написано?

Котяр · Сообщение **Котяр** » 10 сен 2006, 00:48

bormo писал(а):попробовал повторить - через php запихивается нормально, mysql 3 на rhe 3 php 4.2. Русская локаль не установлена.

Скорее по дороге где-то какой-то драйвер режет. Хотя на 100% не уверен. А что в my.cfg написано?

если бы у меня был доступ к my.cfg

вообще задача стоит запихать все в utf8 через phpMyAdmin, но у меня вообще ни в какой кодировке не получается

bormo · Сообщение **bormo** » 10 сен 2006, 00:57

Я пробовал через него - выбрал в меню phpmyadmin language

Russian (ru-win1251),

и все работает.

А с юникодом не знаю...

Otto · Сообщение **Otto** » 10 сен 2006, 01:24

Проверь какие кодировки установлены в базе:
SHOW VARIABLES LIKE 'character_set%';

должна быть та же кодировка в которой написан sql файл

Котяр · Сообщение **Котяр** » 10 сен 2006, 01:35

Otto писал(а):Проверь какие кодировки установлены в базе:
SHOW VARIABLES LIKE 'character_set%';

должна быть та же кодировка в которой написан sql файл

в базе везде стоит utf8 кроме (character_set_server latin1 ). Как определить в какой кодировке sql файл?

Пробовал конвертировать в Notepad++, UltraEdit - no luck

phpMyAdmin ругается на какой-то символ перед INSERT - хотя ничего там нет

вот кусок самого файла в его оригинальной кодировке

Otto · Сообщение **Otto** » 10 сен 2006, 10:19

Оригинальная кодировка твоего файла - windows 1251.

При переводе в UTF-8 блокнот вставляет в начало файла 3 байта: EF BB BF. Это признак файла в кодировке UTF-8.

Попробуй просто удалить их или заменить на пробелы.

Котяр · Сообщение **Котяр** » 10 сен 2006, 13:15

Otto писал(а):Оригинальная кодировка твоего файла - windows 1251.

При переводе в UTF-8 блокнот вставляет в начало файла 3 байта: EF BB BF. Это признак файла в кодировке UTF-8.

Попробуй просто удалить их или заменить на пробелы.

чем их можно удалить если ни блокнот, ни Notepad++, ни UltraEdit эти символы не показывают?

чего я только не делал, а phpMyAdmin все равно выдает

#1064 - You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'ÿþ ' at line 1

ura · Сообщение **ura** » 10 сен 2006, 17:32

А тебе надо по этому полю контекстный поиск делать? Если нет то можно и как base64 encoded хранить.

Котяр · Сообщение **Котяр** » 10 сен 2006, 17:38

ura писал(а):А тебе надо по этому полю контекстный поиск делать? Если нет то можно и как base64 encoded хранить.

это не поле - это таблица из ~2000 полей руссификации сайта. Мне надо эти данные воткнуть в базу, желательно в utf8

Otto · Сообщение **Otto** » 10 сен 2006, 18:59

Котяр писал(а):чем их можно удалить если ни блокнот, ни Notepad++, ни UltraEdit эти символы не показывают?

При открытии блокнотом внизу выбери кодировку ANSI, тогда он покажет эти три символа в начале. Удали их, сохрани и открой как utf8, посмотри что получилось. У меня работает.

Другой вариант - редактор Far

Котяр · Сообщение **Котяр** » 10 сен 2006, 19:28

Otto писал(а): При открытии блокнотом внизу выбери кодировку ANSI, тогда он покажет эти три символа в начале. Удали их, сохрани и открой как utf8, посмотри что получилось...

сработало

СПАСИБО

ты настоящий шаман

Otto · Сообщение **Otto** » 10 сен 2006, 19:38

Да не за что

Котяр · Сообщение **Котяр** » 11 сен 2006, 12:43

Otto, а в mySQL вообще существует "utf8_unicode_cs"

или только "utf8_unicode_ci"

Otto · Сообщение **Otto** » 11 сен 2006, 15:10

Котяр писал(а):Otto, а в mySQL вообще существует "utf8_unicode_cs" или только "utf8_unicode_ci"

utf8_unicode_cs к сожалению нет.

Используй uft8_bin для достижения эффекта case sensitive