Ok, time to dig deeper into btl issues. Can you send me the output of:
$ mpirun -n 2 -mca mpi_show_mca_params all ./sample_printf
if I run it as above, it hangs at MPI_Init() before even getting to output
any debugging info, i.e.:
gmulas@capitanata:~/PAHmodels/anharmonica-scalapack$ mpiexec -n 1 -mca
mpi_show_mca_params all sample_printf
--------------------------------------------------------------------------
[[12601,1],0]: A high-performance Open MPI point-to-point messaging module
was unable to find any relevant network interfaces:
Module: OpenFabrics (openib)
Host: capitanata
Another transport will be used instead, although this may result in
lower performance.
NOTE: You can disable this warning by setting the MCA parameter
btl_base_warn_component_unused to 0.
--------------------------------------------------------------------------
and stays there forever. So unfortunately not much to learn from this,
except that whatever hangs does so _before_ the calls that would have caused
the debugging output to be printed.
If I specify that it should use just self and tcp as transports, it yields:
gmulas@capitanata:~/PAHmodels/anharmonica-scalapack$ mpiexec -n 2 -mca btl
self,tcp -mca mpi_show_mca_params all ./sample_printf
[capitanata:17176]
mca_base_param_files=/home/gmulas/.openmpi/mca-params.conf:/etc/openmpi/openmpi-mca-params.conf
(default)
[capitanata:17176]
mca_param_files=/home/gmulas/.openmpi/mca-params.conf:/etc/openmpi/openmpi-mca-params.conf
(default)
[capitanata:17176]
mca_base_override_param_file=/etc/openmpi/openmpi-mca-params-override.conf
(default)
[capitanata:17176] mca_base_suppress_override_warning=false (default)
[capitanata:17176] mca_base_param_file_prefix= (default)
[capitanata:17176] mca_base_envar_file_prefix= (default)
[capitanata:17176]
mca_base_param_file_path=/usr/share/openmpi/amca-param-sets:/home/gmulas/PAHmodels/anharmonica-scalapack
(default)
[capitanata:17176] mca_base_param_file_path_force= (default)
[capitanata:17176] opal_signal=6,7,8,11 (default)
[capitanata:17176] opal_stacktrace_output=stderr (default)
[capitanata:17176]
opal_net_private_ipv4=10.0.0.0/8;172.16.0.0/12;192.168.0.0/16;169.254.0.0/16
(default)
[capitanata:17176] opal_set_max_sys_limits= (default)
[capitanata:17176] opal_built_with_cuda_support=false (default)
[capitanata:17176] opal_cuda_support=false (default)
[capitanata:17176] mpi_leave_pinned=auto (default)
[capitanata:17176] opal_leave_pinned=auto (default)
[capitanata:17176] mpi_leave_pinned_pipeline=false (default)
[capitanata:17176] opal_leave_pinned_pipeline=false (default)
[capitanata:17176] mpi_warn_on_fork=true (default)
[capitanata:17176] opal_abort_delay=0 (default)
[capitanata:17176] opal_abort_print_stack=false (default)
[capitanata:17176] mca_base_env_list= (default)
[capitanata:17176] mca_base_env_list_delimiter=; (default)
[capitanata:17176] dss_buffer_type=non-described (default)
[capitanata:17176] dss_buffer_initial_size=2048 (default)
[capitanata:17176] dss_buffer_threshold_size=4096 (default)
[capitanata:17176]
mca_base_component_path=/usr/lib/x86_64-linux-gnu/openmpi/lib/openmpi3:/home/gmulas/.openmpi/components
(default)
[capitanata:17176]
mca_component_path=/usr/lib/x86_64-linux-gnu/openmpi/lib/openmpi3:/home/gmulas/.openmpi/components
(default)
[capitanata:17176] mca_base_component_show_load_errors=true (default)
[capitanata:17176] mca_component_show_load_errors=true (default)
[capitanata:17176] mca_base_component_track_load_errors=false (default)
[capitanata:17176] mca_base_component_disable_dlopen=false (default)
[capitanata:17176] mca_component_disable_dlopen=false (default)
[capitanata:17176] mca_base_verbose=stderr (default)
[capitanata:17176] mca_verbose=stderr (default)
[capitanata:17176] dl= (default)
[capitanata:17176] dl_base_verbose=error (default)
[capitanata:17176] dl_dlopen_filename_suffixes=.so,.dylib,.dll,.sl (default)
[capitanata:17176] if= (default)
[capitanata:17176] if_base_verbose=error (default)
[capitanata:17176] if_base_do_not_resolve=false (default)
[capitanata:17176] if_base_retain_loopback=false (default)
[capitanata:17176] mpi_param_check=true (default)
[capitanata:17176] mpi_yield_when_idle=false (environment)
[capitanata:17176] mpi_event_tick_rate=-1 (default)
[capitanata:17176] mpi_show_handle_leaks=false (default)
[capitanata:17176] mpi_no_free_handles=false (default)
[capitanata:17176] mpi_show_mpi_alloc_mem_leaks=0 (default)
[capitanata:17176] mpi_show_mca_params=all (environment)
[capitanata:17176] mpi_show_mca_params_file= (default)
[capitanata:17176] mpi_preconnect_all=false (default)
[capitanata:17176] mpi_have_sparse_group_storage=false (default)
[capitanata:17176] mpi_use_sparse_group_storage=false (default)
[capitanata:17176] mpi_cuda_support=false (default)
[capitanata:17176] mpi_built_with_cuda_support=false (default)
[capitanata:17176] mpi_add_procs_cutoff=0 (default)
[capitanata:17176] mpi_dynamics_enabled=true (default)
[capitanata:17176] async_mpi_init=false (default)
[capitanata:17176] async_mpi_finalize=false (default)
[capitanata:17176] mpi_abort_delay=0 (default)
[capitanata:17176] mpi_abort_print_stack=false (default)
[capitanata:17176] ompi_timing=false (default)
[capitanata:17176] hook= (default)
[capitanata:17176] hook_base_verbose=error (default)
[capitanata:17176] rte= (default)
[capitanata:17176] rte_base_verbose=error (default)
[capitanata:17176] hwloc= (default)
[capitanata:17176] hwloc_base_verbose=error (default)
[capitanata:17176] hwloc_base_mem_alloc_policy=none (default)
[capitanata:17176] hwloc_base_mem_bind_failure_action=warn (default)
[capitanata:17176] hwloc_base_binding_policy= (default)
[capitanata:17176] hwloc_base_bind_to_core=false (default)
[capitanata:17176] hwloc_base_bind_to_socket=false (default)
[capitanata:17176] hwloc_base_report_bindings=false (default)
[capitanata:17176] hwloc_base_cpu_list= (default)
[capitanata:17176] hwloc_base_slot_list= (default)
[capitanata:17176] hwloc_base_cpu_set= (default)
[capitanata:17176] hwloc_base_use_hwthreads_as_cpus=false (default)
[capitanata:17176] hwloc_base_topo_file= (default)
[capitanata:17176] memcpy= (default)
[capitanata:17176] memcpy_base_verbose=error (default)
[capitanata:17176] memchecker= (default)
[capitanata:17176] memchecker_base_verbose=error (default)
[capitanata:17176] backtrace= (default)
[capitanata:17176] backtrace_base_verbose=error (default)
[capitanata:17176] timer= (default)
[capitanata:17176] timer_base_verbose=error (default)
[capitanata:17176] timer_require_monotonic=true (default)
[capitanata:17176] event= (default)
[capitanata:17176] event_base_verbose=error (default)
[capitanata:17176] event_external_event_include=poll (default)
[capitanata:17176] opal_event_include=poll (default)
[capitanata:17176] shmem= (default)
[capitanata:17176] shmem_base_verbose=error (default)
[capitanata:17176] shmem_mmap_priority=50 (default)
[capitanata:17176] shmem_mmap_enable_nfs_warning=true (default)
[capitanata:17176] shmem_mmap_relocate_backing_file=0 (default)
[capitanata:17176] shmem_mmap_backing_file_base_dir=/dev/shm (default)
[capitanata:17176] reachable= (default)
[capitanata:17176] reachable_base_verbose=error (default)
[capitanata:17176] opal_cr_verbose=0 (default)
[capitanata:17176] ft_cr_enabled=false (default)
[capitanata:17176] opal_cr_enable_timer=false (default)
[capitanata:17176] opal_cr_enable_timer_barrier=false (default)
[capitanata:17176] opal_cr_timer_target_rank=0 (default)
[capitanata:17176] opal_cr_is_tool=false (default)
[capitanata:17176] opal_cr_signal=10 (default)
[capitanata:17176] opal_cr_debug_sigpipe=false (default)
[capitanata:17176] opal_cr_tmp_dir=/tmp/user/1000 (default)
[capitanata:17176] orte_base_help_aggregate=true (default)
[capitanata:17176] orte_tmpdir_base=/tmp/user/1000 (environment)
[capitanata:17176] orte_local_tmpdir_base= (default)
[capitanata:17176] orte_remote_tmpdir_base= (default)
[capitanata:17176] orte_top_session_dir=/tmp/user/1000/ompi.capitanata.1000
(environment)
[capitanata:17176]
orte_jobfam_session_dir=/tmp/user/1000/ompi.capitanata.1000/pid.17167
(environment)
[capitanata:17176] orte_no_session_dirs= (default)
[capitanata:17176] orte_create_session_dirs=true (default)
[capitanata:17176] orte_execute_quiet=false (default)
[capitanata:17176] orte_report_silent_errors=false (default)
[capitanata:17176] orte_debug=false (default)
[capitanata:17176] orte_debug_verbose=-1 (default)
[capitanata:17176] orte_debug_daemons_file=false (default)
[capitanata:17176] orte_debug_daemons=false (default)
[capitanata:17176] orte_progress_thread_debug=-1 (default)
[capitanata:17176] orte_leave_session_attached=false (default)
[capitanata:17176] orte_output_debugger_proctable=false (default)
[capitanata:17176] orte_debugger_test_daemon= (default)
[capitanata:17176] orte_debugger_test_attach=false (default)
[capitanata:17176] orte_debugger_check_rate=0 (default)
[capitanata:17176] orte_do_not_launch=false (default)
[capitanata:17176] orte_daemon_spin=false (default)
[capitanata:17176] orte_daemon_fail=-1 (default)
[capitanata:17176] orte_daemon_fail_delay=0 (default)
[capitanata:17176] orte_startup_timeout=0 (default)
[capitanata:17176] orte_base_user_debugger=totalview @mpirun@ -a @mpirun_args@
: ddt -n @np@ -start @executable@ @executable_argv@ @single_app@ : fxp @mpirun@
-a @mpirun_args@ (default)
[capitanata:17176] orte_default_hostfile=/etc/openmpi/openmpi-default-hostfile
(default)
[capitanata:17176] orte_default_dash_host= (default)
[capitanata:17176] orte_node_regex= (default)
[capitanata:17176] orte_keep_fqdn_hostnames=false (default)
[capitanata:17176] orte_retain_aliases=false (default)
[capitanata:17176] orte_hostname_cutoff=1000 (default)
[capitanata:17176] orte_hostname_alias_index=1 (default)
[capitanata:17176] orte_xml_output=false (default)
[capitanata:17176] orte_tag_output=false (default)
[capitanata:17176] orte_xml_file= (default)
[capitanata:17176] orte_timestamp_output=false (default)
[capitanata:17176] orte_show_resolved_nodenames=false (default)
[capitanata:17176] orte_launch_agent=orted (default)
[capitanata:17176] orte_fork_agent= (default)
[capitanata:17176] orte_allocation_required=false (default)
[capitanata:17176] orte_map_stddiag_to_stderr=false (default)
[capitanata:17176] orte_map_stddiag_to_stdout=false (default)
[capitanata:17176] orte_xterm= (default)
[capitanata:17176] orte_report_launch_progress=false (default)
[capitanata:17176] orte_report_events= (default)
[capitanata:17176] orte_enable_recovery=false (default)
[capitanata:17176] orte_max_restarts=0 (default)
[capitanata:17176] orte_abort_on_non_zero_status=true (default)
[capitanata:17176] orte_allowed_exit_without_sync=false (default)
[capitanata:17176] orte_report_child_jobs_separately=false (default)
[capitanata:17176] orte_stat_history_size=1 (default)
[capitanata:17176] orte_no_vm=false (default)
[capitanata:17176] orte_max_vm_size=-1 (default)
[capitanata:17176] orte_set_default_slots=cores (default)
[capitanata:17176] orte_display_alloc=false (default)
[capitanata:17176] ras_base_display_alloc=false (default)
[capitanata:17176] orte_display_devel_alloc=false (default)
[capitanata:17176] ras_base_display_devel_alloc=false (default)
[capitanata:17176] orte_soft_locations=false (default)
[capitanata:17176] orte_daemon_cores= (default)
[capitanata:17176] orte_coll_transports=fabric,ethernet (default)
[capitanata:17176] orte_mgmt_transports=oob (default)
[capitanata:17176] orte_timeout_for_stack_trace=30 (default)
[capitanata:17176] orte_fwd_mpirun_port=false (default)
[capitanata:17176] pmix_server_uri= (default)
[capitanata:17176] orte_strip_prefix= (default)
[capitanata:17176] schizo= (default)
[capitanata:17176] schizo_base_verbose=error (default)
[capitanata:17176] schizo_base_personalities= (default)
[capitanata:17176] ess=pmi (environment)
[capitanata:17176] ess_base_verbose=error (default)
[capitanata:17176] ess_base_stream_buffering=default (default)
[capitanata:17176] orte_ess_jobid=856686593 (environment)
[capitanata:17176] orte_ess_vpid=0 (environment)
[capitanata:17176] orte_ess_num_procs=2 (default)
[capitanata:17176] ess_base_forward_signals= (default)
[capitanata:17176] ess_hnp_forward_signals= (default)
[capitanata:17176] pmix=^s1,s2,cray,isolated (environment)
[capitanata:17176] pmix_base_verbose=error (default)
[capitanata:17176] pmix_base_async_modex=false (default)
[capitanata:17176] pmix_base_collect_data=true (default)
[capitanata:17176] pmix_base_exchange_timeout=-1 (default)
[capitanata:17176] pmix_ext2x_silence_warning=false (default)
[capitanata:17176] state= (default)
[capitanata:17176] state_base_verbose=error (default)
[capitanata:17176] state_base_check_fds=false (default)
[capitanata:17176] errmgr= (default)
[capitanata:17176] errmgr_base_verbose=error (default)
[capitanata:17176] errmgr_default_app_priority=1000 (default)
[capitanata:17176] routed= (default)
[capitanata:17176] routed_base_verbose=error (default)
[capitanata:17176] routed_radix=64 (default)
[capitanata:17176] oob= (default)
[capitanata:17176] oob_base_verbose=error (default)
[capitanata:17176] oob_base_num_progress_threads=0 (default)
[capitanata:17176] oob_tcp_peer_limit=-1 (default)
[capitanata:17176] oob_tcp_peer_retries=2 (default)
[capitanata:17176] oob_tcp_sndbuf=0 (default)
[capitanata:17176] oob_tcp_rcvbuf=0 (default)
[capitanata:17176] oob_tcp_if_include= (default)
[capitanata:17176] oob_tcp_if_exclude= (default)
[capitanata:17176] oob_tcp_static_ipv4_ports= (default)
[capitanata:17176] oob_tcp_dynamic_ipv4_ports= (default)
[capitanata:17176] oob_tcp_disable_ipv4_family=false (default)
[capitanata:17176] oob_tcp_keepalive_time=300 (default)
[capitanata:17176] oob_tcp_keepalive_intvl=20 (default)
[capitanata:17176] oob_tcp_keepalive_probes=9 (default)
[capitanata:17176] oob_tcp_retry_delay=0 (default)
[capitanata:17176] oob_tcp_max_recon_attempts=10 (default)
[capitanata:17176] oob_ud_min_qp=8 (default)
[capitanata:17176] oob_ud_max_qp=32 (default)
[capitanata:17176] oob_ud_recv_buffers=512 (default)
[capitanata:17176] oob_ud_send_buffers=512 (default)
[capitanata:17176] oob_ud_peer_retries=5 (default)
[capitanata:17176] oob_ud_peer_timeout=800000 (default)
[capitanata:17176] oob_ud_max_send_sge=1 (default)
[capitanata:17176] oob_ud_max_recv_sge=2 (default)
[capitanata:17176] oob_ud_max_send_wr=4096 (default)
[capitanata:17176] oob_ud_max_recv_wr=4096 (default)
[capitanata:17176] oob_ud_max_inline_data=0 (default)
[capitanata:17176] rml= (default)
[capitanata:17176] rml_base_verbose=error (default)
[capitanata:17176] rml_base_max_retries=3 (default)
[capitanata:17176] grpcomm= (default)
[capitanata:17176] grpcomm_base_verbose=error (default)
[capitanata:17176] grpcomm_direct_priority=85 (default)
[capitanata:17176] orte_cr_verbose=0 (default)
[capitanata:17176] dfs= (default)
[capitanata:17176] dfs_base_verbose=error (default)
[capitanata:17176] op= (default)
[capitanata:17176] op_base_verbose=error (default)
[capitanata:17176] allocator= (default)
[capitanata:17176] allocator_base_verbose=error (default)
[capitanata:17176] allocator_bucket_num_buckets=30 (default)
[capitanata:17176] rcache= (default)
[capitanata:17176] rcache_base_verbose=error (default)
[capitanata:17176] rcache_base_vma_tree_items_min=2048 (default)
[capitanata:17176] rcache_base_vma_tree_items_max=16384 (default)
[capitanata:17176] rcache_base_vma_tree_items_inc=2048 (default)
[capitanata:17176] rcache_grdma_print_stats=false (default)
[capitanata:17176] mpool= (default)
[capitanata:17176] mpool_base_verbose=error (default)
[capitanata:17176] mpool_hugepage_priority=50 (default)
[capitanata:17176] mpool_hugepage_page_size=2097152 (default)
[capitanata:17176] bml= (default)
[capitanata:17176] bml_base_verbose=error (default)
[capitanata:17176] bml_r2_show_unreach_errors=true (default)
[capitanata:17176] btl=self,tcp (environment)
[capitanata:17176] btl_base_verbose=error (default)
[capitanata:17176] btl_base_include= (default)
[capitanata:17176] btl_base_exclude= (default)
[capitanata:17176] btl_base_warn_component_unused=1 (default)
[capitanata:17176] btl_self_free_list_num=0 (default)
[capitanata:17176] btl_self_free_list_max=64 (default)
[capitanata:17176] btl_self_free_list_inc=8 (default)
[capitanata:17176] btl_self_exclusivity=65536 (default)
[capitanata:17176] btl_self_flags=send,put,get,inplace (default)
[capitanata:17176] btl_self_atomic_flags= (default)
[capitanata:17176] btl_self_rndv_eager_limit=131072 (default)
[capitanata:17176] btl_self_eager_limit=1024 (default)
[capitanata:17176] btl_self_get_limit=18446744073709551615 (default)
[capitanata:17176] btl_self_get_alignment=0 (default)
[capitanata:17176] btl_self_put_limit=18446744073709551615 (default)
[capitanata:17176] btl_self_put_alignment=0 (default)
[capitanata:17176] btl_self_max_send_size=16384 (default)
[capitanata:17176] btl_self_rdma_pipeline_send_length=2147483647 (default)
[capitanata:17176] btl_self_rdma_pipeline_frag_size=2147483647 (default)
[capitanata:17176] btl_self_min_rdma_pipeline_size=2147484671 (default)
[capitanata:17176] btl_self_latency=0 (default)
[capitanata:17176] btl_self_bandwidth=100 (default)
[capitanata:17176] btl_tcp_links=1 (default)
[capitanata:17176] btl_tcp_if_include= (default)
[capitanata:17176] btl_tcp_if_exclude=lo,sppp (default)
[capitanata:17176] btl_tcp_free_list_num=8 (default)
[capitanata:17176] btl_tcp_free_list_max=-1 (default)
[capitanata:17176] btl_tcp_free_list_inc=32 (default)
[capitanata:17176] btl_tcp_sndbuf=0 (default)
[capitanata:17176] btl_tcp_rcvbuf=0 (default)
[capitanata:17176] btl_tcp_endpoint_cache=30720 (default)
[capitanata:17176] btl_tcp_use_nagle=0 (default)
[capitanata:17176] btl_tcp_port_min_v4=1024 (default)
[capitanata:17176] btl_tcp_port_range_v4=64511 (default)
[capitanata:17176] btl_tcp_progress_thread=0 (default)
[capitanata:17176] btl_tcp_warn_all_unfound_interfaces=false (default)
[capitanata:17176] btl_tcp_exclusivity=100 (default)
[capitanata:17176]
btl_tcp_flags=send,put,inplace,need-ack,need-csum,hetero-rdma (default)
[capitanata:17176] btl_tcp_atomic_flags= (default)
[capitanata:17176] btl_tcp_rndv_eager_limit=65536 (default)
[capitanata:17176] btl_tcp_eager_limit=65536 (default)
[capitanata:17176] btl_tcp_put_limit=18446744073709551615 (default)
[capitanata:17176] btl_tcp_put_alignment=0 (default)
[capitanata:17176] btl_tcp_max_send_size=131072 (default)
[capitanata:17176] btl_tcp_rdma_pipeline_send_length=131072 (default)
[capitanata:17176] btl_tcp_rdma_pipeline_frag_size=2147482624 (default)
[capitanata:17176] btl_tcp_min_rdma_pipeline_size=196608 (default)
[capitanata:17176] btl_tcp_latency=0 (default)
[capitanata:17176] btl_tcp_bandwidth=0 (default)
[capitanata:17176] btl_tcp_disable_family=0 (default)
[capitanata:17176] btl_tcp_bandwidth_eth0=100 (default)
[capitanata:17176] btl_tcp_latency_eth0=100 (default)
[capitanata:17176] btl_tcp_bandwidth_eth0:0=100 (default)
[capitanata:17176] btl_tcp_latency_eth0:0=100 (default)
[capitanata:17176] pml= (default)
[capitanata:17176] pml_base_verbose=error (default)
[capitanata:17176] pml_base_bsend_allocator=basic (default)
[capitanata:17176] pml_ob1_verbose=0 (default)
[capitanata:17176] pml_ob1_free_list_num=4 (default)
[capitanata:17176] pml_ob1_free_list_max=-1 (default)
[capitanata:17176] pml_ob1_free_list_inc=64 (default)
[capitanata:17176] pml_ob1_priority=20 (default)
[capitanata:17176] pml_ob1_send_pipeline_depth=3 (default)
[capitanata:17176] pml_ob1_recv_pipeline_depth=4 (default)
[capitanata:17176] pml_ob1_max_rdma_per_request=4 (default)
[capitanata:17176] pml_ob1_max_send_per_range=4 (default)
[capitanata:17176] pml_ob1_unexpected_limit=128 (default)
[capitanata:17176] pml_ob1_use_all_rdma=false (default)
[capitanata:17176] pml_ob1_allocator=bucket (default)
[capitanata:17176] coll= (default)
[capitanata:17176] coll_base_verbose=error (default)
[capitanata:17176] coll_basic_priority=10 (default)
[capitanata:17176] coll_basic_crossover=4 (default)
[capitanata:17176] coll_inter_priority=40 (default)
[capitanata:17176] coll_inter_verbose=0 (default)
[capitanata:17176] coll_libnbc_priority=10 (default)
[capitanata:17176] coll_libnbc_ibcast_skip_dt_decision=true (default)
[capitanata:17176] coll_self_priority=75 (default)
[capitanata:17176] coll_sm_priority=0 (default)
[capitanata:17176] coll_sm_control_size=4096 (default)
[capitanata:17176] coll_sm_fragment_size=8192 (default)
[capitanata:17176] coll_sm_comm_in_use_flags=2 (default)
[capitanata:17176] coll_sm_comm_num_segments=8 (default)
[capitanata:17176] coll_sm_tree_degree=4 (default)
[capitanata:17176] coll_sm_info_num_procs=4 (default)
[capitanata:17176] coll_sm_shared_mem_used_data=548864 (default)
[capitanata:17176] coll_spacc_priority=5 (default)
[capitanata:17176] coll_spacc_verbose=0 (default)
[capitanata:17176] coll_sync_priority=50 (default)
[capitanata:17176] coll_sync_barrier_before=0 (default)
[capitanata:17176] coll_sync_barrier_after=0 (default)
[capitanata:17176] coll_tuned_priority=30 (default)
[capitanata:17176] coll_tuned_init_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_init_chain_fanout=4 (default)
[capitanata:17176] coll_tuned_alltoall_small_msg=200 (default)
[capitanata:17176] coll_tuned_alltoall_intermediate_msg=3000 (default)
[capitanata:17176] coll_tuned_use_dynamic_rules=false (default)
[capitanata:17176] coll_tuned_dynamic_rules_filename= (default)
[capitanata:17176] coll_tuned_allreduce_algorithm_count=6 (default)
[capitanata:17176] coll_tuned_allreduce_algorithm=ignore (default)
[capitanata:17176] coll_tuned_allreduce_algorithm_segmentsize=0 (default)
[capitanata:17176] coll_tuned_allreduce_algorithm_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_allreduce_algorithm_chain_fanout=4 (default)
[capitanata:17176] coll_tuned_alltoall_algorithm_count=6 (default)
[capitanata:17176] coll_tuned_alltoall_algorithm=ignore (default)
[capitanata:17176] coll_tuned_alltoall_algorithm_segmentsize=0 (default)
[capitanata:17176] coll_tuned_alltoall_algorithm_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_alltoall_algorithm_chain_fanout=4 (default)
[capitanata:17176] coll_tuned_alltoall_algorithm_max_requests=0 (default)
[capitanata:17176] coll_tuned_allgather_algorithm_count=7 (default)
[capitanata:17176] coll_tuned_allgather_algorithm=ignore (default)
[capitanata:17176] coll_tuned_allgather_algorithm_segmentsize=0 (default)
[capitanata:17176] coll_tuned_allgather_algorithm_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_allgather_algorithm_chain_fanout=4 (default)
[capitanata:17176] coll_tuned_allgatherv_algorithm_count=6 (default)
[capitanata:17176] coll_tuned_allgatherv_algorithm=ignore (default)
[capitanata:17176] coll_tuned_allgatherv_algorithm_segmentsize=0 (default)
[capitanata:17176] coll_tuned_allgatherv_algorithm_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_allgatherv_algorithm_chain_fanout=4 (default)
[capitanata:17176] coll_tuned_alltoallv_algorithm_count=3 (default)
[capitanata:17176] coll_tuned_alltoallv_algorithm=ignore (default)
[capitanata:17176] coll_tuned_barrier_algorithm_count=7 (default)
[capitanata:17176] coll_tuned_barrier_algorithm=ignore (default)
[capitanata:17176] coll_tuned_bcast_algorithm_count=7 (default)
[capitanata:17176] coll_tuned_bcast_algorithm=ignore (default)
[capitanata:17176] coll_tuned_bcast_algorithm_segmentsize=0 (default)
[capitanata:17176] coll_tuned_bcast_algorithm_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_bcast_algorithm_chain_fanout=4 (default)
[capitanata:17176] coll_tuned_reduce_algorithm_count=7 (default)
[capitanata:17176] coll_tuned_reduce_algorithm=ignore (default)
[capitanata:17176] coll_tuned_reduce_algorithm_segmentsize=0 (default)
[capitanata:17176] coll_tuned_reduce_algorithm_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_reduce_algorithm_chain_fanout=4 (default)
[capitanata:17176] coll_tuned_reduce_algorithm_max_requests=0 (default)
[capitanata:17176] coll_tuned_reduce_scatter_algorithm_count=4 (default)
[capitanata:17176] coll_tuned_reduce_scatter_algorithm=ignore (default)
[capitanata:17176] coll_tuned_reduce_scatter_algorithm_segmentsize=0 (default)
[capitanata:17176] coll_tuned_reduce_scatter_algorithm_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_reduce_scatter_algorithm_chain_fanout=4 (default)
[capitanata:17176] coll_tuned_gather_algorithm_count=4 (default)
[capitanata:17176] coll_tuned_gather_algorithm=ignore (default)
[capitanata:17176] coll_tuned_gather_algorithm_segmentsize=0 (default)
[capitanata:17176] coll_tuned_gather_algorithm_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_gather_algorithm_chain_fanout=4 (default)
[capitanata:17176] coll_tuned_scatter_algorithm_count=3 (default)
[capitanata:17176] coll_tuned_scatter_algorithm=ignore (default)
[capitanata:17176] coll_tuned_scatter_algorithm_segmentsize=0 (default)
[capitanata:17176] coll_tuned_scatter_algorithm_tree_fanout=4 (default)
[capitanata:17176] coll_tuned_scatter_algorithm_chain_fanout=4 (default)
[capitanata:17176] osc= (default)
[capitanata:17176] osc_base_verbose=error (default)
[capitanata:17176] osc_pt2pt_no_locks=false (default)
[capitanata:17176] osc_pt2pt_buffer_size=8192 (default)
[capitanata:17176] osc_pt2pt_receive_count=4 (default)
[capitanata:17176] osc_rdma_no_locks=false (default)
[capitanata:17176] osc_rdma_acc_single_intrinsic=false (default)
[capitanata:17176] osc_rdma_acc_use_amo=true (default)
[capitanata:17176] osc_rdma_buffer_size=32768 (default)
[capitanata:17176] osc_rdma_max_attach=32 (default)
[capitanata:17176] osc_rdma_aggregation_limit=1024 (default)
[capitanata:17176] osc_rdma_priority=101 (default)
[capitanata:17176] osc_rdma_locking_mode=two_level (default)
[capitanata:17176] osc_rdma_btls=openib,ugni,uct,ucp (default)
[capitanata:17176] osc_rdma_mtls=psm2 (default)
[capitanata:17176] osc_rdma_backing_directory=/dev/shm (default)
[capitanata:17176] osc_sm_backing_directory=/dev/shm (default)
MPI_Init call ok
My rank is = 0
number of procs is = 2
MPI_Init call ok
My rank is = 1
number of procs is = 2
MPI_Finalize call ok, returned 0
MPI_Finalize call ok, returned 0
... but in this case we are skipping the openib module altogether, which is
the one on which it locks.
Bye
Giacomo
--
_________________________________________________________________
Giacomo Mulas <giacomo.mu...@inaf.it>
_________________________________________________________________
INAF - Osservatorio Astronomico di Cagliari
via della scienza 5 - 09047 Selargius (CA)
tel. +39 070 71180255
mob. : +39 329 6603810
_________________________________________________________________
"When the storms are raging around you, stay right where you are"
(Freddy Mercury)
_________________________________________________________________
