<div dir="ltr">Hi,<br><br>We have been interested in persisting the profiling data in the CDS archive with the intention of improving the application's warmup time. <br>And now that the premain branch is here that does save profile data along with AOT, we started playing with the premain branch to understand its impact on the performance.<br><br>Our setup uses Springboot Petclinic [0] application and the CDS and shared code archives are generated in a manner similar to this script [1].<br>Our training run only covers the application startup phase. That means at each step we start the application and shut it down without putting any load on it.<br><br>Using the archives thus generated I have done few experiments on my local system. In these experiments the application is bound to two cpus.<br>The baseline for comparing the results is the case where the CDS archive does not have any profiling data and there is no shared code archive.<div>The "premain" configuration refers to using a shared code archive and a CDS archive with training data.<br><br>Here are some initial results:<br><br>1. Startup: It is heartening to see start-up time improve by almost 11%.<br><br>baseline       10.2s<br>premain         9.1s<div><br></div><div>2. Warmup: <div>This test measures the warmup time by applying load using 1 jmeter thread to get an idea of the ramp-up time to reach the peak throughput. </div><div>The load is applied for the duration of 300 seconds. The graph [2] for aot+profiling configuration shows interesting behavior.<br>In the initial period premain is ramping up faster than the baseline. Then the slope of the curve for premain reduces significantly and a couple of dips are also seen. Finally the throughput stabilizes.<br>It shows a drastic difference in the warmup time of the application when running with the "premain" config.<br><br>3. Peak throughput: Last experiment is to measure peak throughput. It starts with a warm-up phase of 180 seconds using 1 jmeter thread. After the warmup phase the load is applied with 10 jmeter threads for a duration of 5 mins.<br>Last two minutes of throughput is considered for measurement. The graph [3] for this test shows almost a 10% drop in the throughput compared to the baseline.<br><br><br>I am sure others would have done similar testing.  My questions are:<div><br>1. Are these results on the expected lines?<br>2. Are these tests using the CDS and the shared code (or cached code) archives in the expected manner.<br>3. Warmup time with the premain branch looks pretty bad which is surprising. Is there any trick I missed in my tests? Is there anything else that needs to be done to get better warmup time?<br>4. What is the point of creating a new static archive? Shouldn't the applications just create the dynamic archive?<br>5. I am also wondering if there is any design doc that can be shared that explains the AOT compilation strategy adopted in the premain branch?<br><br>I have placed my scripts here [4] in case anyone wants to use them to run these tests (you need to build the Petclinic app before using these scripts).<br><br></div><div>Please feel free to share your thoughts.<br><br>[0] <a href="https://github.com/spring-projects/spring-petclinic">https://github.com/spring-projects/spring-petclinic</a><br>[1] <a href="https://github.com/openjdk/leyden/blob/d960fb15258cc99a1bf7f0b1e94bd8be06605aad/test/hotspot/jtreg/premain/lib/premain-run.sh#L70-L101">https://github.com/openjdk/leyden/blob/d960fb15258cc99a1bf7f0b1e94bd8be06605aad/test/hotspot/jtreg/premain/lib/premain-run.sh#L70-L101</a><br>[2] <a href="https://github.com/ashu-mehra/leyden-perf/blob/main/spring/fd82682/tput-t1.svg">https://github.com/ashu-mehra/leyden-perf/blob/main/spring/fd82682/tput-t1.svg</a><br>[3] <a href="https://github.com/ashu-mehra/leyden-perf/blob/main/spring/fd82682/tput-t10.svg">https://github.com/ashu-mehra/leyden-perf/blob/main/spring/fd82682/tput-t10.svg</a></div><div>[4] <a href="https://github.com/ashu-mehra/leyden-perf">https://github.com/ashu-mehra/leyden-perf</a></div><div><br></div><div>Thanks,<br clear="all"><div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr">- Ashutosh Mehra</div></div></div></div></div></div></div></div>