Собственно вопрос в теме: как наиболее правильно работать с кодировкой UTF-8 в c++ ?
Я вижу простой способ: внутри программы работать с ucs-2 (wchar_t), а при выводе конвертировать... но уж больно неудобно это... хотелось бы некий класс вроде std::string-а под это дело с поддержкой кодировки (да, я знаю что в string можно запихать utf-8, но работать с ним некомфортнее чем с char* буфером).

Я посмотрел ICU - большая, непонятная, поддержки stl stream-ов нету (есть но очень зачаточная форма).
В остальном я НЕ нашел библиотеку, которая походила бы на STL-кую... плохо искал?

QString из QtCore позволяет работать со строками в разных кодировках. А я использую свой класс с блэкджеком и шлюхами.

djamshud, а QString будет работать с STL алгоритамими например? Чет я сомневаюсь... и свой велосипед мне чего-то не очень хочется писать...

jonie, не в курсе. Там есть совместимость с std::string, но на каком она уровне, я не знаю - не пользуюсь STL.

А зачем? QString (как и QtCore ) покрывает функционал STL

Добавлено через 1 минуту и 3 секунды


std::wstring ? чем не устроил кстати?

Почитал доку. Совместимость есть. В QString есть STL-style iterator, и:

антипаттерн блоб.

сдается мне что это std::basic_string<wchar_t> , что не совсем utf-8 например в MSVC.

Не, ребят, тащить за собой Qt из-за строк это верх извращенства... слишком большая библиотечка.

Посмотрите иерархию stl по ветке io и ниже, где - то на уровне stream можно будет задавать локаль, где (вроде бы!!!) входящий поток будет храниться в utf-8. 

Ключевое слово imbue
http://www.cplusplus.com/reference/iostream/ios/imbue/


Это сообщение отредактировал(а) null56 - 10.6.2010, 09:57

  Мне кажется, что работать с символами UFT8 неэффективно, ведь чтобы узнать расположение n-го символа, нужно знать положение n-1 го. Эффективно будут работать только алгоритмы с перебором от начала. Кроме того нужно всегда хранить две длинны. Длину массива в байтах и длину строки. Скажем как зарезервировать место для 30ти символов? Зарезервировать 30 * 2? 30 * 4 или 30 * 3? Тоже самое с алгоритмами вставки и удаления из середины. 
  ИМХО правильнее всего работать с UTF16 (с точки зрения эффективности).

Под windows лучше сразу использовать только Unicode.  А для перевода из/в UTF8 использовать вот это
http://sourceforge.net/projects/utfcpp/

Примерно так
utf8::unchecked::utf16to8 (text.begin (), text.end (), std::back_inserter (dst_text));
Определение длины строки, закодированной в UTF8
size_t text_size = utf8::unchecked::distance (text.begin (), text.end ());

Очень простая библиотека, в стиле STL.
Насчет поддержки иероглифов сказать ничего не могу, но кириллица конвертируется бех ошибок.    


Это сообщение отредактировал(а) cyan - 12.6.2010, 21:28

когда-то задавался похожим вопросом
http://forum.vingrad.ru/forum/topic-249965...tml#st_0_view_0
может поможет.