<div dir="ltr"><div dir="ltr"><br></div>What do you mean by logical partition? For 2 partitions it a single slice and for 4 partitions it is a plus shape slice partitioning. The computation is decreasing continuously but communication time is increasing from 0.69% to 8.9% of the total time from 2 to 4 processes. I am using MPI_Neighbor_alltoallw for exchanging data after forming distributed graph topology.<br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, May 8, 2020 at 8:34 PM Zhou, Hui <<a href="mailto:zhouh@anl.gov">zhouh@anl.gov</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">





<div lang="EN-US">
<div class="gmail-m_6053049382010016384WordSection1">
<p class="MsoNormal">I would first analyze the logical partition and the effects on computation and communications. Do they continuously change from 2 process and up or is there a bump?<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<div>
<div>
<div>
<p class="MsoNormal">-- <br>
Hui Zhou<u></u><u></u></p>
</div>
</div>
</div>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<div style="border-right:none;border-bottom:none;border-left:none;border-top:1pt solid rgb(181,196,223);padding:3pt 0in 0in">
<p class="MsoNormal"><b><span style="font-size:12pt;color:black">From: </span></b><span style="font-size:12pt;color:black">hritikesh semwal via discuss <<a href="mailto:discuss@mpich.org" target="_blank">discuss@mpich.org</a>><br>
<b>Reply-To: </b>"<a href="mailto:discuss@mpich.org" target="_blank">discuss@mpich.org</a>" <<a href="mailto:discuss@mpich.org" target="_blank">discuss@mpich.org</a>><br>
<b>Date: </b>Thursday, May 7, 2020 at 11:19 PM<br>
<b>To: </b>"<a href="mailto:discuss@mpich.org" target="_blank">discuss@mpich.org</a>" <<a href="mailto:discuss@mpich.org" target="_blank">discuss@mpich.org</a>><br>
<b>Cc: </b>hritikesh semwal <<a href="mailto:hritikesh.semwal@gmail.com" target="_blank">hritikesh.semwal@gmail.com</a>><br>
<b>Subject: </b>[mpich-discuss] Speed up issue with CFD solver.<u></u><u></u></span></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Hello,<u></u><u></u></p>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">I am developing a parallel CFD solver for unstructured grids with finite volume explicit time integration method and the global mesh count is 97336 cells. I am trying to get the speed up results of my code but something strange is happening.
 Following are my timing results after the second time step with the different number of processors;<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">2 processors- 182.284 seconds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">4 processors-  251.7035 seconds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">8 processors- 190.8578 seconds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">16 processors- 129.7989 seconds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">24 processors- 121.0303 seconds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal">32 processors- 111.3772 seconds<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">I am not getting why there is a sharp rise in time from 2 processors to 4 processors and after that, it is decreasing. I had run the same code 2 weeks ago and at that time the results were different from the present results and time was
 continuously decreasing at that time. Could someone please help me with this matter by suggesting the probable cause/s of this behaviour?<u></u><u></u></p>
</div>
<div>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
<div>
<p class="MsoNormal">Thank you.<u></u><u></u></p>
</div>
</div>
</div>
</div>

</blockquote></div></div>