https://slinkov.ru/openforum/vsluhforumID9/7284.html Доброго времени суток! Подскажите пожалуйста хорошую идею по решению следующей задачи. Есть кластер многоядерных машин под ОС Linux, на нодах которого работает некая прикладная программа (в виде n ее копий по числу доступных на данной ноде потоков). Даная программа обеспечивает параллельные вычисления по shared memory в пределах одной физической машины. Кроме того, на каждой ноде работает одна копия другой программы (сетевой интерфейс) для обмена данными между физическими машинами и запуска задач на данной многопоточной ноде посредством shared memory. Таким образом, все данные, которые обрабатываться копиями прикладных программ проходят через сетевой интерфейс с/на центральную ноду кластера. Проблема в том, что программа сетевого интерфейса потребляет ресурсы наравне с прикладными программами не выполняя сравнительно много полезной работы, а применение функции sleep() сильно тормозит всю ноду по причине ожидания нею новых/отгрузки старых данных. Как правильно организовать включение/выключение программы сетево https://slinkov.ru/openforum/vsluhforumID9/7284.html#4 Fri, 05 Sep 2008 14:16:43 GMT &gt;А почему MPI нельзя? <br><br>Во-первых, всем приятного возвращения из отпуска. )<br>Во-вторых, проблему в треде я решил (ИМХО!) приемлемо &#8211; UDP сокеты + обработчик из вот этой темы http://www.opennet.ru/openforum/vsluhforumID9/7497.html на SIGIO.<br>В-третьих, почему не MPI. MPI можно, но мне не нравиться несколько его свойств (сам MPI не пользовал, только читал документацию, потому поправите, если что):<br>1. MPI запрашивает данные, нужные для продолжения расчета, в момент, когда они уже нужны алгоритму. В моих задачах (биомедицинское моделирование) есть возможность предсказывать, какие данные понадобятся дальше, и, таким образом, избегать простоев потоков в ожидании их доставки, да и саму доставку можно оптимизировать как по времени, так и по топологии сети (последнее впрочем, скорее мечты). Хотя эту часть работы можно переложить на приложение, но ее реализация по затратам усилий сопоставима с разработкой простенькой специализированной программной платформы для кластерных вычислений (виртуальный процессор, стек https://slinkov.ru/openforum/vsluhforumID9/7284.html#3 Fri, 05 Sep 2008 10:46:41 GMT А почему MPI нельзя?<br><br> https://slinkov.ru/openforum/vsluhforumID9/7284.html#2 Thu, 03 Apr 2008 07:37:18 GMT &gt;&gt;Есть способ выключить программу до появления данных в сокете или <br>&gt;&gt;изменению семафора, но как организовать реакцию на них одновременно. <br>&gt;<br>&gt;Например, два процесса (или потока), один читает из shared memory по событию <br>&gt;на семафоре и пишет в сокет, другой читает из сокета по <br>&gt;мере прихода данных (select/poll) и пишет в shared memory. <br><br>Решение не очень удобное, надо выполнять по факту двойную работу. Но все равно спасибо за совет.<br><br><br> https://slinkov.ru/openforum/vsluhforumID9/7284.html#1 Wed, 02 Apr 2008 13:37:45 GMT &gt;Есть способ выключить программу до появления данных в сокете или <br>&gt;изменению семафора, но как организовать реакцию на них одновременно. <br><br>Например, два процесса (или потока), один читает из shared memory по событию на семафоре и пишет в сокет, другой читает из сокета по мере прихода данных (select/poll) и пишет в shared memory.<br>