원격 노드의 mpi_comm_spawn

Question

MPI_Comm_spawn을 사용하여 원격 노드에서 작업자 프로세스를 시작하는 방법은 무엇입니까? 는 OpenMPI 1.4.3를 사용

, 나는이 코드를 시도했다 :

MPI_Info info; 
MPI_Info_create(&info); 
MPI_Info_set(info, "host", "node2"); 
MPI_Comm intercom; 
MPI_Comm_spawn("worker", 
     MPI_ARGV_NULL, 
     nprocs, 
     info, 
     0, 
     MPI_COMM_SELF, 
     &intercom, 
     MPI_ERRCODES_IGNORE); 

을하지만이 오류 메시지와 함께 실패합니다

 
-------------------------------------------------------------------------- 
There are no allocated resources for the application 
    worker 
that match the requested mapping: 


Verify that you have mapped the allocated resources properly using the 
--host or --hostfile specification. 
-------------------------------------------------------------------------- 
-------------------------------------------------------------------------- 
A daemon (pid unknown) died unexpectedly on signal 1 while attempting to 
launch so we are aborting. 

There may be more information reported by the environment (see above). 

This may be because the daemon was unable to find all the needed shared 
libraries on the remote node. You may set your LD_LIBRARY_PATH to have the 
location of the shared libraries on the remote nodes and this will 
automatically be forwarded to the remote nodes. 
-------------------------------------------------------------------------- 

나는의 이름으로 "노드 2"를 교체하는 경우 내 로컬 컴퓨터, 그럼 잘 작동합니다. 내가 node2로 ssh하고 같은 일을 (정보 사전에 "node2"와 함께) 실행하면 잘 작동합니다.

mpirun을 사용하여 상위 프로세스를 시작하고 싶지 않으므로 원격 노드의 프로세스를 동적으로 생성하는 방법을 찾고 있습니다. 이것이 가능한가?

Answer 1

나는 mpirun이와 부모 프로세스를 시작하고 싶지 않아, 그래서 난 그냥 동적으로 원격 노드에 프로세스를 생성 할 수있는 방법을 찾고 있어요. 이 이 가능한가요?

mpirun으로 시작하고 싶지 않은 이유가 확실하지 않습니다. 어쨌든 MPI_Init()에 도달하자마자 MPI 기계 전체를 암시 적으로 시작합니다.이 방법을 사용하면 기본값에 의존하지 않고 옵션을 전달할 수 있습니다.

여기서 문제는 MPI 라이브러리가 시작할 때 (MPI_Init()) --host 또는 --hostfile 옵션을 지정하지 않았기 때문에 사용할 수있는 다른 호스트가 보이지 않는다는 것입니다 mpirun하기. 그것은 단지 다른 곳에서 프로세스를 시작하지 않을 것입니다. (실제로 스폰가 Info 호스트를 필요로하지 않으므로 일반적으로 다른 곳을 알지조차 모릅니다), 실패합니다.

그래서 당신은 mpirun --host myhost,host2 -np 1 ./parentjob 또는보다 일반적으로, 바람직하게는

myhost slots=1 
host2 slots=8 
host3 slots=8 

사용 가능한 슬롯의 수와 hostfile을 제공하고 작업이 방법을 시작, mpirun --hostfile mpihosts.txt -np 1 ./parentjob이이 기능입니다을 수행해야합니다, 벌레가 아닙니다. 이제 MPI는 작업자의 위치를 ​​파악하고 정보에 명시 적으로 호스트를 지정하지 않으면 가장 활용도가 낮은 장소에 호스트를 배치하려고 시도합니다. 또한 생성하려는 호스트를 변경하기 위해 다시 컴파일 할 필요가 없음을 의미합니다.