Поиск:

Ответ в темуСоздание новой темы Создание опроса
> QRegExp для большого объёма данных, очень медленно парсит 
:(
    Опции темы
Riviero
Дата 15.3.2018, 10:17 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Шустрый
*


Профиль
Группа: Участник
Сообщений: 136
Регистрация: 25.3.2010

Репутация: нет
Всего: 3



Парсю сайт, на маленьких страницах всё ок, но когда sizeof(arr) начинает превышать 5 млн символов - можно идти гулять, курить и т.д.

Код

QByteArray arr = QString(rep->readAll()).toLatin1();
QStringList sList;
            qDebug() << arr.length();
            QRegExp exp("регулярное_выражение");
            while ( (lastPos = exp.indexIn( arr, lastPos )) != -1)
            {
                lastPos += exp.matchedLength();
                if (exp.matchedLength() == -1)
                    break;
                sList << exp.cap(1);
            }


Как можно вот это всё ускорить.
Если кто знает, как впихнуть сайт в DOM или где это описано, и будет ли это быстрее - киньте ссылкой. Заранее спасибо. 
PM MAIL   Вверх
ss
Дата 19.3.2018, 20:20 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Шустрый
*


Профиль
Группа: Участник
Сообщений: 131
Регистрация: 17.5.2007

Репутация: нет
Всего: нет




в примерах Qt есть DOM Bookmarks Example

PM MAIL   Вверх
borisbn
Дата 20.3.2018, 13:02 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
****


Профиль
Группа: Завсегдатай
Сообщений: 4875
Регистрация: 6.2.2010
Где: Ростов-на-Дону

Репутация: 48
Всего: 135



Цитата(Riviero @  15.3.2018,  10:17 Найти цитируемый пост)
Если кто знает, как впихнуть сайт в DOM или где это описано

http://doc.qt.io/qt-5/qdomdocument.html

Цитата(Riviero @  15.3.2018,  10:17 Найти цитируемый пост)
будет ли это быстрее

Проверь. Расскажи всем. Думаю, что будет.


--------------------
Женщины отличаются от программистов тем, что у них чары состоят из стрингов
PM MAIL Jabber   Вверх
  
Ответ в темуСоздание новой темы Создание опроса
Правила форума "С/С++: Кроссплатформенное программирование, QT/Gtk+/wxWidgets"
JackYF
Любитель
  • В заголовке темы в квадратных скобках обозначьте используемую вами библиотеку, например: [QT],[GTK],[wx].
  • Если вопрос актуален только для некоторой версии библиотеки, либо, если вы пользуетесь не самой последней версией, укажите это. Например: [QT4], [GTK2].
  • Все начинающие изучать Qt - не забудьте зайти сюда.
  • Проставьте несколько ключевых слов темы, чтобы её можно было легче найти.
  • В вопросе укажите полную версию версию библиотеки, а также все дополнительные используемые программные пакеты.
  • Не забывайте пользоваться кнопкой "Код".
  • Телепатов на форуме нет! Задавайте чёткий, конкретный и полный вопрос. Указывайте полностью ошибки компилятора и компоновщика.
  • Новое сообщение должно иметь прямое отношение к тематике этого раздела. Флуд, флейм, оффтопик запрещены.
  • Категорически запрещается обсуждение вареза, "кряков", взлома программ и т.д.

Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, JackYF, Любитель.

 
1 Пользователей читают эту тему (1 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | С/С++: Кроссплатформенное программирование, Qt/Gtk+/wxWidgets | Следующая тема »


 




[ Время генерации скрипта: 0.1051 ]   [ Использовано запросов: 21 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.