Форум программистов [Powered by Invision Power Board]

Версия для печати темы
Нажмите сюда для просмотра этой темы в оригинальном формате

Форум программистов > PHP: Тексты > проверка на кирилицу

Автор: Нурик Сакура 20.3.2006, 14:16

Нашел в Инете скрипт регистрации, все отлично пашет, кое-что свое подобавлял, но столкнулся с одной проблемой - регистрироваться под русским ником нельзя. А в проекте, который я планирую создать, это просто необходимо. В скрипте есть функция field_validator(), которая проверяет поля на правильность и если все правильно - записывает в БД. Так вот, там есть такой вот код:

Код


$data_types=array(
            "email"=>$email_regexp,
            "digit"=>"^[0-9]$",
            "number"=>"^[0-9]+$",
            "alpha"=>"^[a-zA-Z]+$",
            "alpha_space"=>"^[a-zA-Z ]+$",
            "alphanumeric"=>"^[a-zA-Z0-9]+$",
            "alphanumeric_space"=>"^[a-zA-Z0-9 ]+$",
            "string"=>""
         );

Как мне в alpha и производные добавить поддержку кирилицы? Попытался просто добавить "а-яА-Я", но не помогло smile

. Я в этом деле полный Незнайка, потому обращаюсь к вам. Если тема уже была - прошу меня извинить, я не нашел. Или просто не понял, что именно те темы мне нужны.

добавлено позже
Сейчас вот подумал, что эта тема может быть немного не по адресу, но уже поздно. Я про БД думал, потому сюда и написал.

Автор: CyClon 20.3.2006, 14:55

Добавть в квадратные скобки:

А-Яа-я

или просто

а-Я

Автор: Нурик Сакура 20.3.2006, 15:12

Цитата(CyClon @ 20.3.2006, 14:55

)

Добавть в квадратные скобки:

А-Яа-я

или просто

а-Я

Извини, в какие квадратные скобки? в [a-zA-Z]? Я же написал, что пробовал - не помогает.
Добавлено @ 15:21
Поправка. Я добавлял "а-яА-Я". Это не помогло. Добавил "а-Я", и у меня скрипт матернулся:

Код


Warning: ereg() [function.ereg]: REG_ERANGE in W:\www\game\auth\functions.php on line 148

Вот строка 148:

Код


$field_ok = ereg($data_types[$field_type], $field_data);

Автор: wsr 20.3.2006, 15:22

Ты уверен, что именно в alpha нужно. попробуй добавить во все поля и посмотри на результат. А вообще, это правильно [a-zA-Zа-яА-Я]

Автор: Нурик Сакура 20.3.2006, 15:26

Да, я уверен, что именно в альфа нужно, потому что передается:

Код


field_validator("login name", $_POST["login"], "alphanumeric", 4, 15);

Автор: Ciber SLasH 20.3.2006, 15:49

Всё работает, вот пример:

Код


echo ereg("^[a-zA-Zа-яА-Я0-9 _]+$", "Мега 1_2 ник");

Автор: Нурик Сакура 20.3.2006, 16:06

Ciber SLasH, запустил твою строку в отдельном файле в результате вывело просто число 1 и все.

Автор: Нурик Сакура 20.3.2006, 16:56

Кстати, если в БД поменять вручную логин на русский - то тоже выдает ошибку, говорит, что логин не правильный.

Автор: Ciber SLasH 20.3.2006, 16:58

Тогда могу посоветовать перевести все файлы в кодировку UTF-8 и тогда будет работать такой код:

Код


<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN"
"http://www.w3.org/TR/html4/loose.dtd">
<html>
<head>
<meta http-equiv="Content-Type" content='text/html; charset=utf-8'>
</head>

<body>
<?php echo preg_match("/^[a-zA-Zа-яА-Я0-9 _]+$/u", "Меганик"); ?>
</body>
</html>

Автор: Нурик Сакура 20.3.2006, 17:01

Не работает. Матерится на 9 строку твоего кода

Код


Warning: preg_match() [function.preg-match]: Compilation failed: invalid UTF-8 string at offset 9 in W:\www\game\auth\nur.php on line 9

Автор: wsr 21.3.2006, 22:43

Цитата(Nurik @ 20.3.2006, 15:26)

Да, я уверен, что именно в альфа нужно, потому что передается:

Код


field_validator("login name", $_POST["login"], "alphanumeric", 4, 15);

Ну ты уж определись, что у тебя alpha, а что alphanumeric. И добавь во все проверки и помотри, нефига гемороиться.

Код


echo ereg("^[a-zA-Zа-яА-Я0-9 _]+$", "Мега 1_2 ник");

Выводит 1 потому, что результатом выполнения этой операции будет TRUE или FALSE т.е. если Удовлетворяет регулярке, то TRUE иначе FALSE. Это собственно все в мануале написано.

Или выкладывай весь код полностью.!

Автор: Ciber SLasH 22.3.2006, 03:14

Цитата(Nurik @ 20.3.2006, 17:01

)

Не работает. Матерится на 9 строку твоего кода

Это потому, что у тебя исходник не в кодировке UTF-8. Я же написал... сконвертируй все свои скрипты в кодировку UTF-8 и пропиши соответствующий META-тэг.

Автор: Нурик Сакура 22.3.2006, 18:00

Цитата(wsr @ 21.3.2006, 22:43

)

Ну ты уж определись, что у тебя alpha, а что alphanumeric. И добавь во все проверки и помотри, нефига гемороиться.

Я во все добавлял. Если ты не заметил чуток выше я писал про alpha и производные.

Цитата(wsr @ 21.3.2006, 22:43

)

Выводит 1 потому, что результатом выполнения этой операции будет TRUE или FALSE т.е. если Удовлетворяет регулярке, то TRUE иначе FALSE. Это собственно все в мануале написано.

Извини, я с регулярными выражениями никогда еще не работал. Почитал сейчас мануал, буду пытаться разобраться.

Цитата(Ciber SLasH @ 22.3.2006, 03:14

)

Я скопировал твой код, вставил в отдельный файл, сохранил, запустил в браузере. Выдало ошибку с матами на 9 строку. Где еще ему мета-тег прописать?

Автор: Ciber SLasH 23.3.2006, 12:06

Цитата(Nurik @ 22.3.2006, 18:00

)

Я скопировал твой код, вставил в отдельный файл, сохранил, запустил в браузере

Сохранять нужно в кодировке UTF-8 !!

Автор: Нурик Сакура 23.3.2006, 14:37

Все, я понял. Я просто не раздуплился, что самому файлу нужно указать кодировку.

Автор: Нурик Сакура 23.3.2006, 15:34

Значит так. Вот что я только что напроверял. Вынес проверку поля в отдельный файл и запустил. Все заработало. А вот в файле регистрации не хочет (оба файла в кодировке ANSI).

Вот запрос к функции после нажатия на кнопку "Зарегаться":

Код


field_validator("login name", $_POST["login"], "alphanumeric", 4, 15);

Вот ПОЛНЫЙ код всей функции field_validator:

Код


function field_validator($field_descr, $field_data, $field_type, $min_length="", $max_length="", $field_required=1)
{
    global $messages;

    if(!$field_data && !$field_required)
    {
        return;
    }

    $field_ok=false;

    $email_regexp="^([a-zA-Z0-9_\-\.]+)@((\[[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.)|";
    $email_regexp.="(([a-zA-Z0-9\-]+\.)+))([a-zA-Z]{2,4}|[0-9]{1,3})(\]?)$";

    $data_types=array(
                        "email"=>$email_regexp,
                        "digit"=>"^[0-9]$",
                        "number"=>"^[0-9]+$",
                        "alpha"=>"^[a-zA-Zа-яА-Я]+$",
                        "alpha_space"=>"^[a-zA-Zа-яА-Я ]+$",
                        "alphanumeric"=>"^[a-zA-Zа-яА-Я0-9]+$",
                        "alphanumeric_space"=>"^[a-zA-Zа-яА-Я0-9 ]+$",
                        "string"=>""
                     );

    if ($field_required && empty($field_data))
    {
        $messages[] = "$field_descr is a required field.";
        return;
    }

    if ($field_type == "string")
    {
        $field_ok = true;
    }
    else
    {
        $field_ok = ereg($data_types[$field_type], $field_data);
    }

    if (!$field_ok)
    {
        $messages[] = "Please enter a valid $field_descr.";
        return;
    }

    if ($field_ok && $min_length)
    {
        if (strlen($field_data) < $min_length)
        {
            $messages[] = "$field_descr is invalid, it should be at least $min_length character(s).";
            return;
        }
    }

    if ($field_ok && $max_length)
    {
        if (strlen($field_data) > $max_length)
        {
            $messages[] = "$field_descr is invalid, it should be less than $max_length characters.";
            return;
        }
    }
}

При передаче в поле $_POST["login"] из формы логина "Нурик" выводится сообщение: "Please enter a valid $field_descr." А вот вынесенная в отдельный файл проверка:

Код


<?php
$field_ok=false;
$field_data = "Нурик";
$field_type = "alphanumeric";

$data_types=array(
            "email"=>$email_regexp,
            "digit"=>"^[0-9]$",
            "number"=>"^[0-9]+$",
            "alpha"=>"^[a-zA-Zа-яА-Я]+$",
            "alpha_space"=>"^[a-zA-Zа-яА-Я ]+$",
            "alphanumeric"=>"^[a-zA-Zа-яА-Я0-9]+$",
            "alphanumeric_space"=>"^[a-zA-Zа-яА-Я0-9 ]+$",
            "string"=>""
         );

$field_ok = ereg($data_types[$field_type], $field_data);

if ($field_type == "string")
{
    $field_ok = true;
}
else
{
    $field_ok = ereg($data_types[$field_type], $field_data);
}

print $field_ok;
?>

Все отлично работает и выводит единицу.

Автор: madFobos 20.4.2006, 23:59

Вобщем, не мучайся. Самое простое это вместо А-Яа-я использовать \x7F-\xFF, это шестнадцатеричные коды русских букв (хотя я не уверен, что их ereg поддерживате, вот preg_match точно).

Другой вариант заключается в том, что все проверки строк основаны на текущей локали, так что выстави
setlocalce(LC_ALL, 'rus') //Название локалей надо на хостинге смотреть
или хотя бы проверь какая у тебя стоит на сравнение строк с помощью:

Код


echo setlocale(LC_COLLATE, 0);

Автор: Mal Hack 21.4.2006, 12:36

Модератор: а при чем тут Базы Данных? Что, не может отличить текстовую информацию от БД? Перенесено.

Автор: Нурик Сакура 13.1.2007, 11:34

Вобщем, сейчас вот вернулся к этому вопросу. Кажется, у меня получилось найти решение.

Во-первых, у меня в php.ini стояло раньше не default_charset = "utf8", а что-то другое, потому русский язык не поддерживался и приходилось писать все на английском. Сейчас поставил и все пашет как надо.

Во-вторых, разобрался наконец-то с регуляркой. Теперь можно спокойно делать русский ник и он будет выводиться на экран нормально.

Код


function field_validator($field_descr, $field_data, $field_type, $min_length, $max_length, $field_required=1)
{
    global $messages;
    global $lang;

    if(!$field_data && !$field_required)
    {
        return;
    }

    $field_ok=false;

    $email_regexp="^([a-zA-Z0-9_\.\-]+)@((\[[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.)|";
    $email_regexp.="(([a-zA-Z0-9\-]+\.)+))([a-zA-Z]{2,4}|[0-9]{1,3})(\]?)$";

    $data_types=array(
                        "email"=>$email_regexp,
                        "digit"=>"^[0-9]$",
                        "number"=>"^[0-9]+$",
                        "alpha"=>"^[a-zA-Z]+$",
                        "alpha_space"=>"^[a-zA-Z ]+$",
                        "alphanumeric"=>"^[a-zA-Z0-9_\-]+$",
                        "alphanumeric_space"=>"^[a-zA-Z0-9_ \-]+$",
                        "alpha_ru"=>"^[a-zA-Zа-яА-Я]+$",
                        "alpha_space_ru"=>"^[a-zA-Zа-яА-Я ]+$",
                        "alphanumeric_ru"=>"^[a-zA-Zа-яА-Я0-9_\-]+$",
                        "alphanumeric_space_ru"=>"^[a-zA-Zа-яА-Я0-9_ \-]+$",
                        "string"=>""
                     );

    if ($field_required && empty($field_data))
    {
        $messages[] = "<b>".$field_descr."</b> " . $lang['err_is_required'];
        return;
    }

    if ($field_type == "string")
    {
        $field_ok = true;
    }
    else
    {
        $field_ok = ereg($data_types[$field_type], $field_data);
    }

    if (!$field_ok)
    {
        $messages[] = $lang['err_invalid_data_begin'] . $field_descr . $lang['err_invalid_data_end'];
        return;
    }

    if ($field_ok && $min_length)
    {
        if (strlen($field_data) < $min_length)
        {
            $messages[] = "<b>".$field_descr."</b>" . $lang['err_min_length_begin'] . $min_length . $lang['err_length_end'];
            return;
        }
    }

    if ($field_ok && $max_length)
    {
        if (strlen($field_data) > $max_length)
        {
            $messages[] = "<b>".$field_descr."</b>" . $lang['err_max_length_begin'] . $max_length . $lang['err_length_end'];
            return;
        }
    }
}

Для тех, кто не заметил разницы, обьясняю. Ввиду того, что логин у меня должен быть только на английском, а имя может содержать и русские символы, мне пришлось продублировать записи в масиве $data_types, указав для русского нужные символы.

Проверять после этого стало все успешно регистрировать. Но при выводе из БД выдавало "???" вместо имени. Еще вчера я столкнулся с проблемой кодировки текста от пользователя, потому сделал ф-цию mk_txt (просто для удобства):

Код


function mk_txt($act, $txt)
{
    switch($act)
    {
        case "enc":
            $text = utf8_encode($txt);
            break;
        case "dec":
            $text = utf8_decode($txt);
            break;
    }
    return $text;
}

И теперь перед каждым вводом и выводом инфы, которая может быть на русском, я юзаю эту ф-цию. Все пашет идеально =) Юзайте, кому нужно, авось поможет. smile

Автор: Mal Hack 13.1.2007, 14:12

Цитата(Нурик Сакура @ 13.1.2007, 11:34

)

Во-первых, у меня в php.ini стояло раньше не default_charset = "utf8", а что-то другое, потому русский язык не поддерживался и приходилось писать все на английском. Сейчас поставил и все пашет как надо.

Вот как раз при utf8 русский замечательно поддерживается.

Изврат. Надо настроить нормально кодировку БД и установить лоакаль setlocale

Автор: Нурик Сакура 13.1.2007, 14:20

Мм.. Ты не понял, у меня стояло НЕ utf8, а что-то другое, я не помню уже что. Я поставил utf8 и все запахало. Что касается кодировки БД, то там стоит utf8_unicode_ci. Но почему-то при вставке русского языка получается фигня какая-то.

Автор: Mal Hack 13.1.2007, 14:22

Цитата(Нурик Сакура @ 13.1.2007, 14:20

)

Но почему-то при вставке русского языка получается фигня какая-то.

uft8_general_ci там должно вроде стоять, не помню все их виды...

Автор: Нурик Сакура 13.1.2007, 14:33

Сейчас проверю.

Добавлено @ 14:42
Посмотрел. Поменял в БД везде кодировку на uft8_general_ci и все заработало без ф-ции mk_txt =)
Сейчас еще проверю отправку ПМок, если все работает - то тогда тема точно решена =)

Автор: Нурик Сакура 13.1.2007, 15:00

С ПМками проблема. Вобщем, вот та часть кода, которая отвечает за запись данных в БД:

Код


if($action == compose2)
{
    field_validator($lang['recipient_field'], $_POST['to'], "alphanumeric_space_ru", 3, 16);
    field_validator($lang['subject_field'], $_POST['subject'], "string", 1, 50);
    field_validator($lang['message_field'], $_POST['message'], "string", 1, 5000);

    $recipient = $_POST['to'];
    $msg = $_POST['message'];

    if($recipient == $char_name)
    {
        $messages[] = $lang['err_selfsending'];
    }

    $tools->checkCharExistance($recipient);
    if($tools->char_check_result == 1)
    {
        $tools->getCharAccID($recipient);
        $recipient_id = $tools->char_acc_id;
    }
    else
    {
        $messages[] = $lang['err_wrong_recipient'];
    }

    if(empty($msg))
    {
        $messages[] = $lang['err_empty_message'];
    }

    if(empty($messages))
    {
        $sentdate = date("U");

        $msg_subject = $_POST['subject'];
        $msg_subject = htmlentities($msg_subject);
        $msg_text = $_POST['message'];
        $msg_text = nl2br(htmlentities($msg_text));

        $dbconn->connect();
        $query = "insert into mailbox (msg_sender, msg_recipient, msg_subject, msg_body, msg_status, msg_sentdate) values ('".$acc_id."', '".$recipient_id."', '".$msg_subject."', '".$msg_text."', 'unread', '".$sentdate."')";
        if(!($result = mysql_query($query, $dbconn->link)))
        {
            print("Unnable to work with <b>mailbox!</b><br>\n" .
                  "MySQL tells: " . mysql_error() . "<br>\n");
            exit;
        }
        $dbconn->disconnect($dbconn->link);
        print("<center>\n" .
              "    ".$lang['mailbox_sent_msg']."<br>\n".
              "    <a href=\"".$_SERVER['PHP_SELF']."?action=inbox\">".$lang['mailbox_return_inbox']."</a>\n" .
              "</center>\n");
    }
    else
    {
        print("<font color=red><br>\n");
        foreach($messages as $err_msg) print "\t".$err_msg."<br>\n";
        print("</font><br>\n");
        newPMform($recipient, $subject, "");
    }
}

Через форму передаются данные для записи в БД. В БД почему-то записывается не в таком формате "Íàçàð÷èê", как было записано русское имя персонажа, а вот в таком формате "Ëîëü÷èê". А при выводе получается не русский текст, а вот такая вот "Ïðèâåòèê" канитель smile

Автор: Нурик Сакура 13.1.2007, 15:52

Я уже разобрался, что вся беда в htmlentities(), который русский текст превращает на то, что вставляется в БД. Но без него ведь никак... Или как-то по другому придется фильтровать то, что юзеры передают...

Автор: Нурик Сакура 13.1.2007, 16:19

Как ни странно, но мануал мне помог решить проблему =)
Поставил вместо просто

Код


htmlentities($msg_subject);

вот такой вот вариант

Код


htmlentities($msg_subject, 0, "utf-8");

и все заработало. Вобщем, все вопросы решены.

Автор: madFobos 15.1.2007, 08:21

Объясните мне одну вещь. Насколько я знаю проблемы с выводом символов ??? связаны с тем, что phpmysql библиотека использует по умолчанию кодировку latin для коннекта к базе, и с этим настройками кодировки самой базы ничего поделать нельзя. Или кодировка phpmysql зависит от default_charset в php.ini?

M
Mal Hack

Один топик один вопрос!