Здравствуйте.
Проблема такая - в базу пишутся данные которые приходят от пользователей. Стали появляться ошибки #1366 - Incorrect string value.
Все решения которые я нагуглил сводятся к преобразованию кодировки базы/таблицы/поля в utf8mb4.
Для меня этот вариант неприемлим.

Есть ли другие решения этой ошибки?
Может быть какая-то настройка отключает это и в базу запишутся урезанные символы, пусть они будут вопросами - это устраивает.
Или может в пыхе есть волшебная функция которая вырежет эти эмоджи или конвертнет во что-нибудь ?

Но это, право, лишнее...
Речь идет о том, что мускуль выдает ошибку, когда в сообщении приходит какой-нибудь эмоджи, который 4-х байтный.
Мне этот эмоджи на хрен не нужен, поэтому и не хочу конвертировать таблицу в другую кодировку.
Можно его выпилить или преобразовать во что-нибудь... по фиг.
Главное - чтоб не валилась ошибка и была какая-то запись в базу.

Akina,

mysql_query тут совершенно ни при чем. mysqli дает ровно такую же ошибку.
я же объясняю еще раз, услышьте меня, проблема в том что добавляются 4-х байтные символы (эмоджи) в базу, у которой кодировка utf8 (3-х байтная)

Таблица очень большая, а эти 4-х байтные емоджи мне не нужны по условиям задачи абсолютно, поэтому ради них перекодировать базу я не буду.

Поэтому мне нужно как-то их или вырезать или подавить эти ошибки в мускуле. Что-то мне подсказывает что такая настройка есть, но я не могу ее найти. Когда я вставляю эмоджи на локале в точно такую же таблицу, то все вставляется и эти эмоджи заменяются знаками вопроса. Но на проде так не происходит - выдает ошибку "#1366 - Incorrect string value: '\xF0\x9F\x98\x80' for column `msg` at row 1"

ps: я, практически, уверен, что эту ошибку любой может воcпроизвести в том же phpMyAdmin. Не обязательно писать код. Добавьте в таблицу у которой кодировка utf8, символ эмоджи в любое текстовое поле.

peter64,
Эти все советы предполагают изменение кодировки таблицы.
Я же в каждом своем посте повторяю - этот вариант мне не годится

Akina,
На локале тем не менее получается вставить строку с эмоджи в таблицу с такой же кодировкой, там эти эмоджи просто заменяются на знаки вопросов. Значит это какая то настройка делает (которая скорее всего по дефолту есть в старых версиях (у меня на локале) и нет или выключена или наоборот включена... хз.. по дефолту в новых версиях (как на проде)). Это был бы идеальный вариант для меня.

Версия с пыхом как вариант тоже прокатит, подскажите как можно их вырезать?
Но этот вариант придется во многих местах добавлять. С настройкой мускуля было бы лучше.

Как другой пример - в лог 404 ошибок в поле HTTP_REFERRER тоже прилетают эмоджи, и весь лог этой 404 ошибки тоже валится с "#1366 - Incorrect string value "

Dimitry Sibiryakov,

Вы уверены, что только метаданные поменяются и вся таблица не заблочится на N часов? Что-то мне подсказывает, что это очень трудоемкая операция

Dimitry Sibiryakov,

Даже поверхностное изучение вопроса, говорит о том, что дело не ограничится изменением только метаданных. Потребуется полное перекодирование всего столбца как минимум. Сервера у нас отличные, ттх привести сейчас не могу, но руководство никогда не скупилось на это дело. По опыту могу сказать, что даже обычное удаление пары-тройки миллионов записей наглухо блочит всю таблицу, поэтому перекодирование таблицы с десятками миллионов записей гарантированно отправит ее в блок.

И снова повторюсь - игра не стоит свеч. Если б это было кране необходимо, можно было бы и это сделать. Но это на хрен не нужно!!! Насрать на потерянные эмоджи. Нужно просто убрать ошибку.

На данный момент, в качестве решения рассматривается вырезание этих эмождей в пыхе, но мне он не нравится, т.к. нужно перелопатить весь проект чтоб добавить этот код везде, а таких мест получается немало. Все еще надеюсь на помощь гуру, которые скажут какую настройку надо включить или выключить в мускуле.

Как я и предполагал операция перекодировки совсем не легкая. На 500 000 записей, такой запрос занял около 5 сек.



Таблица messages на проде с несколькими десятками миллионов записей гарантированно уйдет в блок на несколько минут. Даже и пробовать не буду. Это неприемлимо в моем случае.

На данный момент решил проблему в пыхе вырезанием этих эмоджей. Но это не совсем то, что я хочу, т.к. есть и другие потенциальные места где такое возможно и не хочется везде добавлять этот код.

Поэтому, все еще очень жду от знающих людей совета про настройку мускуля, которая игнорит эти ошибки. Она должна быть.