Модераторы: LSD, AntonSaburov
  

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> ExecutorService AS400JDBCConnectionPool 
V
    Опции темы
jGorets
Дата 27.9.2011, 18:34 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Новичок



Профиль
Группа: Участник
Сообщений: 30
Регистрация: 11.7.2010

Репутация: нет
Всего: нет



Задача - распараллелить программу. У меня есть большое количество номеров, с каждым их них надо сделать некоторые операции. 1. делаю выборку из БД уникальных номеров 2. создаю ExecutorService фиксированное кол-во потоков равных кол-ву процессоров на машине 3. так как каждая операция производится по сети, создаю AS400JDBCConnectionPool с 12 открытыми ячейками. 4. Запуская программу, вроде бы работает как ожидается, но прироста 0. в имя потока выводит как пул-1-нить-1,2,3,4. Вот тут подозреваю, что программа работает с одним пулом. Подскажите, так и должно быть? =) или как правильно каждому потому давать свой коннекшн
PM MAIL   Вверх
Stolzen
Дата 28.9.2011, 08:32 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1041
Регистрация: 17.10.2005

Репутация: 23
Всего: 48



Цитата(jGorets @  27.9.2011,  19:34 Найти цитируемый пост)
 имя потока выводит как пул-1-нить-1,2,3,4. Вот тут подозреваю, что программа работает с одним пулом. 

Пул один, да. Но это не пул для соединений, а пул для потоков.


--------------------
datatalks.ru - анализ данных, статистика, машинное обучение
PM MAIL WWW   Вверх
jGorets
Дата 28.9.2011, 10:26 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Новичок



Профиль
Группа: Участник
Сообщений: 30
Регистрация: 11.7.2010

Репутация: нет
Всего: нет



я в общем так и думал, просто смущяет, что прироста производительности нету =( а может такое быть из-за постоянного логирования?))
PM MAIL   Вверх
jk1
Дата 28.9.2011, 12:28 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Участник
Сообщений: 1168
Регистрация: 17.10.2008
Где: Санкт-Петербург

Репутация: 40
Всего: 75



Цитата

а может такое быть из-за постоянного логирования?))

Вполне. Дисковое I/O не самая быстрая штука. 
А Вы вообще профайлером смотрели, что именно тормозит? По сути замеры - единственное, что может реально показать узкие места. Если просто вычитать в книжке, что много потоков лучше, чем один, то эффекта не будет - узкое место может быть совсем в другом.


--------------------
Opinions are like assholes — everybody has one
PM MAIL   Вверх
jGorets
Дата 28.9.2011, 13:37 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Новичок



Профиль
Группа: Участник
Сообщений: 30
Регистрация: 11.7.2010

Репутация: нет
Всего: нет



Цитата

По сути замеры - единственное

в том то и дело что замерял, засекал время перед стартов не распаралеленой процедуры и после выводил разницу, так же и на распаралелиной - выполнялось даже дольше =), потому начал думать на логи, так как их в 4 раза больше начало выводится в консоль.
Цитата

А Вы вообще профайлером смотрели, что именно тормозит? 

в том то и дело что "узких" мест в общем нету, так как обработка одного счета проходит приблизительно за одно время, основная сложность в их количестве, так как их обычно больше 10к и раньше они обрабатывались последовательно, я сделал параллельно, деббагер показывать то что должен и вроде бы то что я ожидал, но прироста нету
 Спасибо, еще потестирую.

Это сообщение отредактировал(а) jGorets - 28.9.2011, 13:41
PM MAIL   Вверх
jGorets
Дата 29.9.2011, 13:50 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Новичок



Профиль
Группа: Участник
Сообщений: 30
Регистрация: 11.7.2010

Репутация: нет
Всего: нет



Поправил пул-коннектов, прирост в 2а раза на 4х процессорной машине, стоил ли попробовать "подкрутить":wizard  еще? 
PM MAIL   Вверх
Stolzen
Дата 29.9.2011, 15:13 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1041
Регистрация: 17.10.2005

Репутация: 23
Всего: 48



А как поправили? 


--------------------
datatalks.ru - анализ данных, статистика, машинное обучение
PM MAIL WWW   Вверх
jGorets
Дата 6.10.2011, 11:29 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Новичок



Профиль
Группа: Участник
Сообщений: 30
Регистрация: 11.7.2010

Репутация: нет
Всего: нет



Цитата(Stolzen @ 29.9.2011,  15:13)
А как поправили?

было пару методов возврата конекта, так вот юзался в некоторых не мой пулл, а старый
PM MAIL   Вверх
  
Ответ в темуСоздание новой темы Создание опроса
Правила форума "Java"
LSD   AntonSaburov
powerOn   tux
javastic
  • Прежде, чем задать вопрос, прочтите это!
  • Книги по Java собираются здесь.
  • Документация и ресурсы по Java находятся здесь.
  • Используйте теги [code=java][/code] для подсветки кода. Используйтe чекбокс "транслит", если у Вас нет русских шрифтов.
  • Помечайте свой вопрос как решённый, если на него получен ответ. Ссылка "Пометить как решённый" находится над первым постом.
  • Действия модераторов можно обсудить здесь.
  • FAQ раздела лежит здесь.

Если Вам помогли, и атмосфера форума Вам понравилась, то заходите к нам чаще! С уважением, LSD, AntonSaburov, powerOn, tux, javastic.

 
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | Java: Общие вопросы | Следующая тема »


 




[ Время генерации скрипта: 0.0476 ]   [ Использовано запросов: 22 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.