Форум программистов [Powered by Invision Power Board]

Версия для печати темы
Нажмите сюда для просмотра этой темы в оригинальном формате

Форум программистов > Java EE (J2EE) и Spring > Кодировка. Сервлет. Unix. Проблемма.

Автор: Lubomyr 3.10.2005, 14:50

Сервлет получает Post с формы (кирилицу) и перекодирует его непонятным образом.
То есть если выводить ето значение - получается непонятный набор непонятных символов. Под Windows все работает коректно!
При чем данные из базы, кирилица закодированная в сервлете выводятся коректно всегда.
Кодировка везде UTF-8;
Сервер JBOSS 3.2.1.
В самом начале всегда стоит request.setCharacterEncoding("UTF-8");
Когда надо выводить ставлю - response.setContentType("text/html; charset=UTF-8");
<%@ page language="java" contentType="text/html; charset=UTF-8" pageEncoding="UTF-8" .... тоже везде;
Даже уже ACCEPTCHARSET="utf-8" везде в формах поставил...
Понимаю, что проблемма может быть в региональных настройках или настройках ОС (Free BSD).
Нельзя ли сделать код независимым от этих настроек?
И что вообще надо исправить?

Буду признателен за ответ.

Автор: tux 4.10.2005, 13:41

Цитата(Lubomyr @ 3.10.2005, 19:50)

В самом начале всегда стоит request.setCharacterEncoding("UTF-8");

Насколько я понимаю кодировка выставляется уже в сервлете. Попробуй выставлять ее в фильтре. Класс фильтра примерно такой:

Код


import java.io.*;
import javax.servlet.*;

public class SelectLanguageFilter implements Filter {
    private String encoding;
    
    public void init(FilterConfig config) throws ServletException {
        encoding = config.getInitParameter("requestEncoding");
        
        if(encoding==null) encoding="utf-8";
    }
    
    public void doFilter(ServletRequest request, ServletResponse response, FilterChain next)
    throws IOException, ServletException {
        try {
            request.setCharacterEncoding(encoding);
            next.doFilter(request, response);
        } catch (ServletException e) {
            e.printStackTrace();
        }
    }
    
    public void destroy(){}
}

В web.xml нужно добавить следующее:

Код


<?xml version="1.0" encoding="ISO-8859-1"?>
<!DOCTYPE web-app
  PUBLIC "-//Sun Microsystems, Inc.//DTD Web Application 2.3//EN"
  "http://java.sun.com/dtd/web-app_2_3.dtd">

<web-app>

    ...

    <filter>
        <filter-name>SelectLanguageFilter</filter-name>
        <filter-class>SelectLanguageFilter</filter-class>
      <init-param>
        <param-name>requestEncoding</param-name>
        <param-value>utf-8</param-value>
      </init-param>
    </filter>
    
    <filter-mapping>
        <filter-name>SelectLanguageFilter</filter-name>
        <url-pattern>/*</url-pattern>
    </filter-mapping>
  
</web-app>

Автор: Lubomyr 10.10.2005, 15:45

Спасибо. Сделал так. Все равно данные которые получены методом Get request.getParameter считывает в кодировке ISP-8859-1, а приходят они в правильной, UTF-8.
То есть строку в пинципе можно получить, используя:

String newString = new String(badString.getBytes("ISO-8859-1"), "UTF-8");

Но это не универсальный подход... Под другой платформой может не сработать...
Post работает нормально.

Автор: seth 1.10.2006, 20:06

Прописал фильтр - а он выдает ошибку - не могу понять почему (используется struts)

Код


1/10/2006 19:56:03 org.apache.catalina.startup.HostConfig checkResources
INFO: Undeploying context [/gg]
org.apache.jasper.JasperException
    at org.apache.jasper.servlet.JspServletWrapper.service(JspServletWrapper.java:370)
    at org.apache.jasper.servlet.JspServlet.serviceJspFile(JspServlet.java:291)
    at org.apache.jasper.servlet.JspServlet.service(JspServlet.java:241)
    at javax.servlet.http.HttpServlet.service(HttpServlet.java:802)
    at org.apache.catalina.core.ApplicationFilterChain.internalDoFilter(ApplicationFilterChain.java:252)
    at org.apache.catalina.core.ApplicationFilterChain.doFilter(ApplicationFilterChain.java:173)
    at SelectLanguageFilter.doFilter(SelectLanguageFilter.java:16)
    at org.apache.catalina.core.ApplicationFilterChain.internalDoFilter(ApplicationFilterChain.java:202)
    at org.apache.catalina.core.ApplicationFilterChain.doFilter(ApplicationFilterChain.java:173)
    at org.apache.catalina.core.StandardWrapperValve.invoke(StandardWrapperValve.java:213)
    at org.apache.catalina.core.StandardContextValve.invoke(StandardContextValve.java:178)
    at org.apache.catalina.core.StandardHostValve.invoke(StandardHostValve.java:126)
    at org.apache.catalina.valves.ErrorReportValve.invoke(ErrorReportValve.java:105)
    at org.apache.catalina.core.StandardEngineValve.invoke(StandardEngineValve.java:107)
    at org.apache.catalina.connector.CoyoteAdapter.service(CoyoteAdapter.java:148)
    at org.apache.coyote.http11.Http11Processor.process(Http11Processor.java:856)
    at org.apache.coyote.http11.Http11Protocol$Http11ConnectionHandler.processConnection(Http11Protocol.java:744)
    at org.apache.tomcat.util.net.PoolTcpEndpoint.processSocket(PoolTcpEndpoint.java:527)
    at org.apache.tomcat.util.net.LeaderFollowerWorkerThread.runIt(LeaderFollowerWorkerThread.java:80)
    at org.apache.tomcat.util.threads.ThreadPool$ControlRunnable.run(ThreadPool.java:684)
    at java.lang.Thread.run(Thread.java:595)

Автор: 3x3 1.10.2006, 23:43

Цитата(Lubomyr @ 10.10.2005, 15:45)

http://forum.vingrad.ru/index.php?showtopic=113274&st=30 читай.

Jsp должно начинаться заклинанием:

Код


<% if(request.getCharacterEncoding() == null) request.setCharacterEncoding("UTF-8"); %>
<%@ page contentType="text/html;charset=UTF-8" language="java" %>

Не принудительным выставление кодировки, заметь, а только если она не выставлена.
С сервлетом так же: Для начала любой деятельности - настроить кодировку реквеста и респонса.

Это всё.

Автор: UnicornMirage 2.10.2006, 08:48

Цитата

Понимаю, что проблемма может быть в региональных настройках или настройках ОС (Free BSD).
Нельзя ли сделать код независимым от этих настроек?

нужно запустить JBoss или какой там у тебя сервер - с параметром

Код


-Dfile.encoding=windows-1251

и UTF не будет нужен

Автор: y3u 2.10.2006, 10:52

Цитата(UnicornMirage @ 2.10.2006, 08:48

)

нужно запустить JBoss или какой там у тебя сервер - с параметром

код Java
1:

-Dfile.encoding=windows-1251

ни фига подобного, во-первых - это параметр для дефолтной кодировки зачитываемых ридерами файлов, при чем тут реквест/респонз? во-вторых, при таком параметре я не смогу работать со, скажем, китайским, арабским, японским, ивритом и пр...
В JAVA надо юзать юникодные кодировки!

Автор: UnicornMirage 2.10.2006, 10:57

просто ты сказал что работаешь с кириллицей - зачем тогда юникод - лишняя трата трафика?

установка этого параметра не влияет на реквесты/респонсы - т.к. там они задаются как было сказано выше.
а вот этот параметр указывает виртуальной машине кодировку по-умолчанию, не зависимо от настроек ОС.
и поэтому если ты напишешь

Код


byte[] data = ...; // прочитанные откуда то из реквеста
String str = new String(data);

то у тебя данные в строке будут в той кодировке, которая была в
-Dfile.encoding=windows-1251

а у автора темы было жестко привязано в коде:

Код


String newString = new String(badString.getBytes("ISO-8859-1"), "UTF-8");

Автор: ishi 3.10.2006, 23:49

Цитата(Lubomyr @ 3.10.2005, 14:50)

Нельзя ли сделать код независимым от этих настроек?
И что вообще надо исправить?

Здравствуйте! Наконец нашел время ответить. Значит, дело обстоит так:
0)Хватит флудить о том, чего не знаете, хотя в спорах рождается истина, но вы уже задолбали человека.

1).Дело в том, что платформа тут ни при чем. Фирме sun давно известно о проблемах с интернациональными кодировками в сервлетах. Они разработали специальный пакет National Servlets, Который решает эту проблему. Класс простенький и не требует переписания всего кода сервлета.
2) Второй вопрос, это то , что tomcat довольно примитивно определяет кодировку запроса, поэтому не удивительно, что в большинстве случаев это null или ничего не значащий "url-encoding". Советую почитать, если для вас это важно, эту статью "http://ishi.dev.juga.ru/servlet/site?tar=gt&theme=106", причем обратите внимание, что сайт, на который вы зайдете сидит на линуксе, полностью построен на сервлетах + MySQL, так что это живой пример решения вашей проблемы.
3) Третий вопрос - это MySQL драйвер может корежить кодировки при получении из базы строковых данных. Здесь я тоже могу подкинуть один класс, который решает эту проблему. Но если Ваш сайт используется в коммерческих целях, то класс будет платный.

Автор: tux 4.10.2006, 02:12