Модераторы: Snowy, bartram, MetalFan, bems, Poseidon, Riply

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> Таймаут на выполнение потока, Thread timeout 
:(
    Опции темы
RA
  Дата 13.12.2009, 20:25 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Брутальный буратина
****


Профиль
Группа: Участник Клуба
Сообщений: 3497
Регистрация: 31.3.2002
Где: Лес

Репутация: 7
Всего: 115



Вот недавно столкнулся с сетевой задачей где требовалось реализовать множество потоков, при этом поток должен был завершиться либо самостоятельно в результате получения ответа от сервера, либо принудительно по истечению таймаута. 

Для простоты и удобства я использовал класс TThread, и внутри каждого потока создавал таймер который собственно и отвечал за таймаут выполнения потока. 

Ну и как бы на тестовой сборке в 10 и 100 потоков всё работало как часы "Patek Philippe", потом на сборке в 1000 потоков (при том что ресурс таймера до 10000 штук), начались непонятности ввиде Unexpected и Unknown error-ов. Я поначалу начал грешить на таймеры, и убил неделю прежде чем нашёл истинную причину косяков, но осадок как в известном анегдоте остался в отношении использования таймеров внутри потока. 

Вобщем я пережил дикий стресс из-за которого у меня теперь психологический барьер на использование таймеров  smile.

Хотелось бы увидеть мнения участников по поводу способов таймаута на выполнение потоков в многопотчных приложениях.
PM   Вверх
VictorTsaregorodtsev
Дата 13.12.2009, 21:44 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Опытный
**


Профиль
Группа: Участник
Сообщений: 274
Регистрация: 28.7.2006

Репутация: нет
Всего: 8



RA, баги были скорее всего из-за того, что число дескрипторов в операционке переполнялось (кроме хэндла для каждого потока создавались еще и один или даже два хендла на любой поток, который выводит инфу на экран, т.е. пользуется функциями из системной либы user.dll). Рихтер об этом писал, но не акцентировал, ибо необходимость тысяч потоков для реальной задачи представляется сомнительной smile
А если еще внутри каждого потока создавались какие-то объекты ядра либо потоки убивались (до смерти, CloseHandle'ом) только при завершении проги (а не после окончания работы потока), то тогда точно было переполнение числа дескрипторов.

Ну а по заданному вопросу... Курить ВинАПИ и как-то перепроектировать логику работы проги. Ибо в диспетчере задач Виндов можно увидеть, что все нужды операционки (в т.ч. и сетевые) укладываются в сотни две-три потоков.
PM MAIL WWW   Вверх
Voxifer
Дата 14.12.2009, 00:57 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Новичок



Профиль
Группа: Участник
Сообщений: 12
Регистрация: 27.8.2009

Репутация: нет
Всего: нет



Цитата(VictorTsaregorodtsev @  13.12.2009,  21:44 Найти цитируемый пост)
число дескрипторов в операционке переполнялось
Сомнительно как-то. Теретически - максимальное число хендлов 65536, практически - HKLM\SOFTWARE\Microsoft\Windows NT\CurrentVersion\Windows\USERProcessHandleQuota (10000). Сомневаюсь, что даже в 1000 потоках можно было бы открыть и держать десятку хендлов.
Цитата(RA @  13.12.2009,  20:25 Найти цитируемый пост)
Вобщем я пережил дикий стресс из-за которого у меня теперь психологический барьер на использование таймеров 
Не зная твоего кода, можно лишь предполагать, что, возможно, ты не учел низкоприоритетность таймеров, что на фоне высокой загрузки приложения могло отозваться пропуском сообщений таймеров. Ну и есть, конечно, подозрения на твоё "принудительное" завершение потока, может быть оно проходило без освобождения ресурсов.

В любом случае, использовать низкоточный системный таймер в таймаутах потоков при условии высокой нагрузки, мне кажется, не есть айс. Гораздо проще сделать Sleep(50) в цикле N раз, где  N = таймаут/50. Ну или использовать высокоточный системный таймер. По крайней мере, я бы с этого начал, если бы у меня была аналогичная задача...
PM MAIL   Вверх
dumb
Дата 14.12.2009, 05:25 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


sceloglauxalbifacies
****


Профиль
Группа: Экс. модератор
Сообщений: 2929
Регистрация: 16.6.2006

Репутация: 7
Всего: 158



Цитата(RA @  13.12.2009,  20:25 Найти цитируемый пост)
но осадок как в известном анегдоте остался в отношении использования таймеров внутри потока.
smile
при создании таймера вызывается AllocateHWnd, которая ни разу не thread-safe

ps. хотя, возможно в свежих версиях дельфей этот момент исправлен smile
PM MAIL   Вверх
Демо
Дата 14.12.2009, 10:00 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1278
Регистрация: 3.11.2005

Репутация: 6
Всего: 50



Цитата(dumb @  14.12.2009,  05:25 Найти цитируемый пост)
при создании таймера вызывается AllocateHWnd, которая ни разу не thread-safe


Поясни плиз не "thread-safe"-вость. В чём она здесь заключается?

RA, 

Проблему без кода вряд ли можно понять.
Скорее всего реализация с ошибкой, которая проявляется при недостатке ресурсов (процессора, памяти, например).



--------------------
    
PM MAIL ICQ Skype   Вверх
Alca
Дата 14.12.2009, 10:14 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
****


Профиль
Группа: Завсегдатай
Сообщений: 3993
Регистрация: 14.6.2006

Репутация: нет
Всего: 50



А че за таймер то? TTimer или WaitableTimer (WinAPI)?


--------------------
PM WWW ICQ Skype Jabber   Вверх
Alexeis
Дата 14.12.2009, 10:15 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Амеба
Group Icon


Профиль
Группа: Админ
Сообщений: 11743
Регистрация: 12.10.2005
Где: Зеленоград

Репутация: 16
Всего: 459



Цитата(dumb @  14.12.2009,  04:25 Найти цитируемый пост)
при создании таймера вызывается AllocateHWnd, которая ни разу не thread-safe

  Это при использовании компонента? Я имею ввиду, может таймер создается в каждый в своем потоке при помощи CreateTimer. 


--------------------
Vit вечная память.

Обсуждение действий администрации форума производятся только в этом форуме

гениальность идеи состоит в том, что ее невозможно придумать
PM ICQ Skype   Вверх
Демо
Дата 14.12.2009, 10:45 (ссылка) |    (голосов:1) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1278
Регистрация: 3.11.2005

Репутация: 6
Всего: 50



Цитата(Alexeis @  14.12.2009,  10:15 Найти цитируемый пост)
  Это при использовании компонента?


Да и с TTimer никаких проблем нет. Прекрасно будет работать в потоках.


--------------------
    
PM MAIL ICQ Skype   Вверх
dumb
Дата 16.12.2009, 01:55 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


sceloglauxalbifacies
****


Профиль
Группа: Экс. модератор
Сообщений: 2929
Регистрация: 16.6.2006

Репутация: 7
Всего: 158



Цитата(Демо @  14.12.2009,  10:00 Найти цитируемый пост)
Поясни плиз не "thread-safe"-вость. В чём она здесь заключается?

http://qc.embarcadero.com/wc/qcmain.aspx/qcmain.aspx?d=47559

Цитата(Демо @  14.12.2009,  10:45 Найти цитируемый пост)
Да и с TTimer никаких проблем нет. Прекрасно будет работать в потоках. 
как и всегда в таких случаях - до определенного момента. smile
PM MAIL   Вверх
Демо
Дата 16.12.2009, 04:03 (ссылка) |    (голосов:1) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1278
Регистрация: 3.11.2005

Репутация: 6
Всего: 50



dumb, 

Да, действительно - MakeObjectInstance использует глобальную переменную.
Хоть и вероятность одновременного использования очень мала, но тем не менее это место для возникновения сбоев в программе.
Спасибо за информацию.

Тем не менее использование TTimer в дополнительных потоках никак не связано с этой ошибкой в генетическом коде.
Зная о ней, достаточно будет использовать глобально критическую секцию для создания сколько угодно TTimer в потоках...


--------------------
    
PM MAIL ICQ Skype   Вверх
RA
Дата 16.12.2009, 21:22 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Брутальный буратина
****


Профиль
Группа: Участник Клуба
Сообщений: 3497
Регистрация: 31.3.2002
Где: Лес

Репутация: 7
Всего: 115



dumb, весьма полезно!  smile  
PM   Вверх
Alexeis
Дата 16.12.2009, 21:46 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Амеба
Group Icon


Профиль
Группа: Админ
Сообщений: 11743
Регистрация: 12.10.2005
Где: Зеленоград

Репутация: 16
Всего: 459



Цитата(Демо @  16.12.2009,  03:03 Найти цитируемый пост)
Зная о ней, достаточно будет использовать глобально критическую секцию для создания сколько угодно TTimer в потоках... 

  Поиск по исходникам показал что вызов "Classes.AllocateHWnd" присутствует 5 раз, так что критическая секция для таймера не спасет. 


--------------------
Vit вечная память.

Обсуждение действий администрации форума производятся только в этом форуме

гениальность идеи состоит в том, что ее невозможно придумать
PM ICQ Skype   Вверх
Демо
Дата 17.12.2009, 01:25 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1278
Регистрация: 3.11.2005

Репутация: 6
Всего: 50



Цитата(Alexeis @  16.12.2009,  21:46 Найти цитируемый пост)
что вызов "Classes.AllocateHWnd" присутствует 5 раз,


В TTimer?


--------------------
    
PM MAIL ICQ Skype   Вверх
Демо
Дата 17.12.2009, 05:38 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Эксперт
***


Профиль
Группа: Завсегдатай
Сообщений: 1278
Регистрация: 3.11.2005

Репутация: 6
Всего: 50



Alexeis, 

Вроде как получается, что надо генетический материал поправить...


--------------------
    
PM MAIL ICQ Skype   Вверх
Alexeis
Дата 17.12.2009, 10:31 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Амеба
Group Icon


Профиль
Группа: Админ
Сообщений: 11743
Регистрация: 12.10.2005
Где: Зеленоград

Репутация: 16
Всего: 459



Цитата(Демо @  17.12.2009,  00:25 Найти цитируемый пост)
В TTimer? 

  В том то и дело что нет, т.е. теоретически вызов Classes.AllocateHWnd из основного потока и вызов из конструктора таймера в отдельном потоке могут совпасть во времени.
  
Цитата(Демо @  17.12.2009,  04:38 Найти цитируемый пост)
Вроде как получается, что надо генетический материал поправить...

  Что значит "генетический материал"? Перекомпилить VCL?


--------------------
Vit вечная память.

Обсуждение действий администрации форума производятся только в этом форуме

гениальность идеи состоит в том, что ее невозможно придумать
PM ICQ Skype   Вверх
Ответ в темуСоздание новой темы Создание опроса
Правила форума "Delphi: WinAPI и системное программирование"
Snowybartram
MetalFanbems
PoseidonRrader
Riply

Запрещено:

1. Публиковать ссылки на вскрытые компоненты

2. Обсуждать взлом компонентов и делиться вскрытыми компонентами

  • Литературу по Delphi обсуждаем здесь
  • Действия модераторов можно обсудить здесь
  • С просьбами о написании курсовой, реферата и т.п. обращаться сюда
  • Вопросы по реализации алгоритмов рассматриваются здесь
  • 90% ответов на свои вопросы можно найти в DRKB (Delphi Russian Knowledge Base) - крупнейшем в рунете сборнике материалов по Дельфи
  • 99% ответов по WinAPI можно найти в MSDN Library, оставшиеся 1% здесь

Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, Snowy, bartram, MetalFan, bems, Poseidon, Rrader, Riply.

 
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | Delphi: WinAPI и системное программирование | Следующая тема »


 




[ Время генерации скрипта: 0.0748 ]   [ Использовано запросов: 22 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.