Модераторы: Daevaorn

Поиск:

Ответ в темуСоздание новой темы Создание опроса
> NUMA 
:(
    Опции темы
georain
  Дата 25.6.2008, 14:30 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 193
Регистрация: 28.11.2006
Где: Санкт-Петербург

Репутация: нет
Всего: нет



САБЖ.

NUMA (ccNUMA) - это многопроцессорная архитектура с неоднородным доступом к памяти, альтернатива SMP. Сейчас в основном используется в решениях amd, но идёт к тому что в скором времени будет использоваться повсюду. Поэтому очень, очень важная тема по которой довольно мало информации.

Предлагаю обсудить всё о NUMA применительно к c++.

1. Кросс и не кросс-платформенные API.
2. Выделение/использование памяти.
3. Привязка потока к процессору.
4. Оптимизация в коде.
5. Паттерны.

Возможно обсуждение теории применительно к возможностям c++.

Отдельно (оффтоп к тематике форума, поэтому только ссылки) интересует времена доступа и другие характеристики таких систем с большим количеством процессоров (> 2).
PM MAIL   Вверх
georain
Дата 25.6.2008, 15:00 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 193
Регистрация: 28.11.2006
Где: Санкт-Петербург

Репутация: нет
Всего: нет



По теме более конкретные вопросы.
Как сделать чтобы поток выполнялся только на заданном ядре или группе ядер?
Как выделить память в локальной области заданного ядра/группы ядер/процессора?

PM MAIL   Вверх
andrew_121
Дата 25.6.2008, 15:19 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Кодофей
****


Профиль
Группа: Завсегдатай
Сообщений: 3448
Регистрация: 3.1.2008

Репутация: 6
Всего: 33



georain, Тема довольно актуальная.
Я юзаю MPICH. А какой смысл этой? Ну чтоб понять, нужно-ненужно, зачем, как, и для чего?


--------------------
Удалил аккаунт. Прощайте!
PM MAIL   Вверх
georain
Дата 25.6.2008, 15:22 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 193
Регистрация: 28.11.2006
Где: Санкт-Петербург

Репутация: нет
Всего: нет



Цитата(andrew_121 @  25.6.2008,  15:19 Найти цитируемый пост)
А какой смысл этой?

Что-то я не пойму твоего вопроса. "Этой" - это что? NUMA это не библиотека, это аппаратная архитектура.
PM MAIL   Вверх
andrew_121
Дата 25.6.2008, 15:23 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Кодофей
****


Профиль
Группа: Завсегдатай
Сообщений: 3448
Регистрация: 3.1.2008

Репутация: 6
Всего: 33



Почитал: http://ru.wikipedia.org/wiki/Non-Uniform_Memory_Access
Но так и не понял, какое отношение это имеет к программингу?  smile

Добавлено через 1 минуту и 22 секунды
Цитата(georain @  25.6.2008,  15:22 Найти цитируемый пост)
Что-то я не пойму твоего вопроса. "Этой" - это что? NUMA это не библиотека, это аппаратная архитектура. 

Да, уже почитал. Но зачем это программисту?


--------------------
Удалил аккаунт. Прощайте!
PM MAIL   Вверх
georain
Дата 25.6.2008, 15:31 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 193
Регистрация: 28.11.2006
Где: Санкт-Петербург

Репутация: нет
Всего: нет



Цитата(andrew_121 @  25.6.2008,  15:23 Найти цитируемый пост)
Почитал: http://ru.wikipedia.org/wiki/Non-Uniform_Memory_Access
Но так и не понял, какое отношение это имеет к программингу?


Так, ребята, давайте не будет обсуждать тут что такое NUMA. Кто не знает, но интересно, идите учите. Тут прошу либо отвечать, либо задавать вопросы по NUMA применительно к программированию на c++. А отношение оно имеет такое - если вы напишете одно- или много-поточное приложение под стандартную архитектуру, то оно может сильно проиграть в быстродействии приложению оптимизированному под NUMA. А так как это архитектура завоёвывает позиции, имеет смысл думать в этом направлении.
PM MAIL   Вверх
andrew_121
Дата 25.6.2008, 15:39 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Кодофей
****


Профиль
Группа: Завсегдатай
Сообщений: 3448
Регистрация: 3.1.2008

Репутация: 6
Всего: 33



Цитата(georain @  25.6.2008,  15:31 Найти цитируемый пост)
Кто не знает, но интересно, идите учите.

Хоть пару ссылочек дай.
Тема интересная, но чёт я о тако раньше не слышал. Жду ссылок, и иду учиться... smile 


--------------------
Удалил аккаунт. Прощайте!
PM MAIL   Вверх
georain
Дата 25.6.2008, 15:43 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 193
Регистрация: 28.11.2006
Где: Санкт-Петербург

Репутация: нет
Всего: нет



Добавлю. Библиотеки MPI и OpenMP - это средства обмена данными, а проблема numa - это использование памяти. Поэтому основное внимание тут нужно уделять выделению памяти и её использованию из разных потоком. Локальность памяти.
Также интересуют языковые методы борьбы с потерей производительности на поддержке кешей процессоров в актуальном состоянии (Cache coherent).

Добавлено через 1 минуту и 52 секунды
Цитата(andrew_121 @  25.6.2008,  15:39 Найти цитируемый пост)
Тема интересная, но чёт я о тако раньше не слышал. Жду ссылок, и иду учиться...

Google -> NUMA. Тут нет ничего секретного. А вот про применительно к программингу в самом деле ничего особо нет.
PM MAIL   Вверх
andrew_121
Дата 25.6.2008, 15:54 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Кодофей
****


Профиль
Группа: Завсегдатай
Сообщений: 3448
Регистрация: 3.1.2008

Репутация: 6
Всего: 33



Цитата(georain @  25.6.2008,  15:43 Найти цитируемый пост)
А вот про применительно к программингу в самом деле ничего особо нет. 

Это сарказм?
Ну я внатуре впервые слышу!...


--------------------
Удалил аккаунт. Прощайте!
PM MAIL   Вверх
MAKCim
Дата 25.6.2008, 15:58 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Воін дZэна
****


Профиль
Группа: Экс. модератор
Сообщений: 5644
Регистрация: 10.12.2005
Где: Менск, РБ

Репутация: 52
Всего: 207



C++ к NUMA абсолютно не имеет никакого отношения
NUMA поддерживается через API системы

Добавлено через 7 минут и 3 секунды
Цитата(georain @  25.6.2008,  15:43 Найти цитируемый пост)
А вот про применительно к программингу в самом деле ничего особо нет. 

искал плохо
NUMA for windows
NUMA for linux



--------------------
Ах, у елі, ах, у ёлкі, ах, у елі злыя волкі ©

PM MAIL   Вверх
georain
Дата 25.6.2008, 16:05 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 193
Регистрация: 28.11.2006
Где: Санкт-Петербург

Репутация: нет
Всего: нет



Цитата(MAKCim @  25.6.2008,  15:58 Найти цитируемый пост)
C++ к NUMA абсолютно не имеет никакого отношения
NUMA поддерживается через API системы 

Это не совсем верно. NUMA сделан так чтобы поддерживаться API системы так, как будто его и нет вовсе, чтобы весь спектр программного обеспечения работал на этой архитектуре. Но при масштабировании (увеличении к-ва потоков) стандартного приложения на такой архитектуре его производительность будет падать и в итоге упрётся в "узкое место" - шину. При правильной организации памяти на уровне приложения масштабирование может происходить без потери производительности.

Добавлено через 3 минуты и 30 секунд
Цитата(andrew_121 @  25.6.2008,  15:54 Найти цитируемый пост)
Это сарказм?

Нет это не сарказм. Дело в том что это не так давно стало актуально (год, максимум два). На само деле есть много информации как это работает и "советов" как надо под это писать, но практических примеров нет.
PM MAIL   Вверх
MAKCim
Дата 25.6.2008, 16:10 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Воін дZэна
****


Профиль
Группа: Экс. модератор
Сообщений: 5644
Регистрация: 10.12.2005
Где: Менск, РБ

Репутация: 52
Всего: 207



georain, 
еще раз говорю, С++ здесь не причем
а API как раз причем

Это сообщение отредактировал(а) MAKCim - 25.6.2008, 16:11


--------------------
Ах, у елі, ах, у ёлкі, ах, у елі злыя волкі ©

PM MAIL   Вверх
georain
Дата 25.6.2008, 16:26 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 193
Регистрация: 28.11.2006
Где: Санкт-Петербург

Репутация: нет
Всего: нет



Цитата(MAKCim @  25.6.2008,  16:10 Найти цитируемый пост)
С++ здесь не причем

Ну как не причём. В numa
1. использование глобальных/общих данных - большие временные затраты
2. разная скорости чтения/записи разных данных из разных потоков

И то и другое решается средствами языка программирования.
PM MAIL   Вверх
MAKCim
Дата 25.6.2008, 16:36 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Воін дZэна
****


Профиль
Группа: Экс. модератор
Сообщений: 5644
Регистрация: 10.12.2005
Где: Менск, РБ

Репутация: 52
Всего: 207



Цитата(georain @  25.6.2008,  16:26 Найти цитируемый пост)
Ну как не причём.

ну если только в этом смысле
в остальном API, без него ЯП не поможет
в Linux, к примеру, есть два системных вызова для работа с NUMA
mbind() и set_mempolicy()

Это сообщение отредактировал(а) MAKCim - 25.6.2008, 16:40


--------------------
Ах, у елі, ах, у ёлкі, ах, у елі злыя волкі ©

PM MAIL   Вверх
georain
Дата 25.6.2008, 16:39 (ссылка) | (нет голосов) Загрузка ... Загрузка ... Быстрая цитата Цитата


Бывалый
*


Профиль
Группа: Участник
Сообщений: 193
Регистрация: 28.11.2006
Где: Санкт-Петербург

Репутация: нет
Всего: нет



Цитата(MAKCim @  25.6.2008,  16:36 Найти цитируемый пост)
в отсальном API
без него C++ не поможет 

А, в этом смысле да.
Хотя если пофилософствовать, что работает без API...

Пока нашёл только одну библиотеку под linux
http://www.x86-64.org/pipermail/discuss/2003-May/003528.html
PM MAIL   Вверх
Ответ в темуСоздание новой темы Создание опроса
Правила форума "С++:Общие вопросы"
Earnest Daevaorn

Добро пожаловать!

  • Черновик стандарта C++ (за октябрь 2005) можно скачать с этого сайта. Прямая ссылка на файл черновика(4.4мб).
  • Черновик стандарта C (за сентябрь 2005) можно скачать с этого сайта. Прямая ссылка на файл черновика (3.4мб).
  • Прежде чем задать вопрос, прочтите это и/или это!
  • Здесь хранится весь мировой запас ссылок на документы, связанные с C++ :)
  • Не брезгуйте пользоваться тегами [code=cpp][/code].
  • Пожалуйста, не просите написать за вас программы в этом разделе - для этого существует "Центр Помощи".
  • C++ FAQ

Если Вам понравилась атмосфера форума, заходите к нам чаще! С уважением, Earnest Daevaorn

 
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:
« Предыдущая тема | C/C++: Общие вопросы | Следующая тема »


 




[ Время генерации скрипта: 0.0658 ]   [ Использовано запросов: 22 ]   [ GZIP включён ]


Реклама на сайте     Информационное спонсорство

 
По вопросам размещения рекламы пишите на vladimir(sobaka)vingrad.ru
Отказ от ответственности     Powered by Invision Power Board(R) 1.3 © 2003  IPS, Inc.