<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Consolas;
        panose-1:2 11 6 9 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
pre
        {mso-style-priority:99;
        mso-style-link:"HTML Preformatted Char";
        margin:0in;
        font-size:10.0pt;
        font-family:"Courier New";}
span.HTMLPreformattedChar
        {mso-style-name:"HTML Preformatted Char";
        mso-style-priority:99;
        mso-style-link:"HTML Preformatted";
        font-family:Consolas;}
span.EmailStyle23
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="blue" vlink="purple" style="word-wrap:break-word">
<div class="WordSection1">
<p class="MsoNormal">One other thing that would be worth checking is your Java version.  ASpace needs 1.8 so if you have earlier that could be an issue too<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> Steele, Henry <br>
<b>Sent:</b> Thursday, September 15, 2022 10:39 AM<br>
<b>To:</b> archivesspace_users_group@lyralists.lyrasis.org<br>
<b>Subject:</b> RE: [External] [Archivesspace_Users_Group] Performance tuning<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Hey there.  I am definitely not the most qualified person on this listserv to answer your question, but I can share what we’ve done in our instances and my experience with this, and what I’ve learned over the years.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">First the number of indexer threads should be keyed the number of CPU cores you have on a given machine.  You list 7—is that how many cores you have?<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">The Java XMX is the Java heap size.  Your value seems quite high, unless you have that much RAM available for the application.  You can check on your server by running the command “free” or checking with your IT department.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Another key thing to note if you are running version 2.7.1: there is a bug in older versions of ASpace that means that the application does not respect the *<b>solr</b>* log level you have in your config file.   I had to find a workaround
 for this by changing the log level at the server level in Java settings for Solr.   This of course isn’t an issue in recent releases because solr isn’t part of ASpace anymore anyway.   But the effect of this bug without altering server settings is that the
 logs are really noisy with solr stuff and this can impact performance.  If you think this may be an issue for you, reach out to me and I’ll send you a document for how to change the solr log level at the server level.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Hope things improve for you! <o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0in 0in 0in">
<p class="MsoNormal"><b>From:</b> <a href="mailto:archivesspace_users_group-bounces@lyralists.lyrasis.org">
archivesspace_users_group-bounces@lyralists.lyrasis.org</a> <<a href="mailto:archivesspace_users_group-bounces@lyralists.lyrasis.org">archivesspace_users_group-bounces@lyralists.lyrasis.org</a>>
<b>On Behalf Of </b>Cowing [he], Jared<br>
<b>Sent:</b> Tuesday, September 13, 2022 12:33 PM<br>
<b>To:</b> <a href="mailto:archivesspace_users_group@lyralists.lyrasis.org">archivesspace_users_group@lyralists.lyrasis.org</a><br>
<b>Subject:</b> [External] [Archivesspace_Users_Group] Performance tuning<o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<p class="MsoNormal">Hi all, <o:p></o:p></p>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">I'm currently working with our campus IT to identify the cause(s) of a degradation in performance that we've been seeing. I'm relatively new to our library and to ArchivesSpace generally, but I've been told it's been slowing bit by bit
 for a few years, and the problem has escalated just in the past few weeks. Neither full re-indexes nor our nightly re-starts seem to help.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">I'm aware of <a href="https://archivesspace.github.io/tech-docs/provisioning/tuning.html">
this page on tuning</a>, which has been quite helpful in addition to suggestions already posted to this list. We're hopeful that moving to external Solr with our next upgrade will also help (currently on 2.7.1), but are still trying other measures just in case
 it doesn't. While we look more into general best practices for tuning our hosting environment, I'd also like to check with all of you to see if there are common issues that are more specific to ArchivesSpace that we have overlooked and should focus our attention
 on.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Here are a few of our key settings. Our Java memory variables are below. I get the sense that they are higher than average, is that so?<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">ASPACE_JAVA_XMX="-Xmx16144m"<br>
ASPACE_JAVA_XSS="-Xss8m"<br>
<br>
Indexer settings from config.rb:<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">AppConfig[:indexer_records_per_thread] = 25<br>
AppConfig[:indexer_thread_count] = 7<br>
AppConfig[:indexer_solr_timeout_seconds] = 300 <o:p></o:p></p>
<pre><span style="font-size:10.5pt;color:black"><o:p> </o:p></span></pre>
<p class="MsoNormal">And copied from our innodb settings:<br>
innodb_file_per_table<br>
innodb_flush_method=O_DIRECT<br>
innodb_log_file_size=1G<br>
innodb_buffer_pool_size=8G<br>
symbolic-links=0<br>
max_allowed_packet=128M<br>
open_files_limit=9182 <o:p></o:p></p>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">I appreciate any tips on what we ought to be looking for. I know it's hard to give advice from afar when each institution's situation is different, but thought it worth asking in case anything jumped out before we turn to technical support.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Thanks,<o:p></o:p></p>
</div>
<p class="MsoNormal">-- <o:p></o:p></p>
<div>
<div>
<p><b>Jared Cowing</b><span style="color:#323E4F"> </span><b><span style="color:black">|</span></b><span style="color:#323E4F">
</span><span style="color:#999999">Systems Librarian</span><span style="color:#323E4F">
</span><b><span style="color:black">| </span></b><span style="color:#999999">he/him</span><br>
<u><a href="https://library.williams.edu/" target="_blank"><span style="color:#9900FF">W</span><span style="font-size:7.5pt;color:#9900FF">ILLIAMS</span><span style="color:#9900FF"> C</span><span style="font-size:7.5pt;color:#9900FF">OLLEGE</span><span style="color:#9900FF">
 L</span><span style="font-size:7.5pt;color:#9900FF">IBRARIES</span></a></u><span style="color:#17365D">  </span><b><span style="color:black">|</span></b><span style="color:#17365D">
</span><span style="color:#999999">Williamstown, MA </span><b><span style="color:black">| </span></b><span style="color:#999999">(413)597-3061</span><o:p></o:p></p>
</div>
</div>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<table class="MsoNormalTable" border="0" cellspacing="0" cellpadding="0" align="left" width="100%" style="width:100.0%">
<tbody>
<tr>
<td style="background:#00A0D2;padding:5.0pt 2.0pt 5.0pt 2.0pt"></td>
<td width="100%" style="width:100.0%;background:#E5F5FA;padding:5.0pt 4.0pt 5.0pt 12.0pt">
<div>
<p class="MsoNormal" style="mso-element:frame;mso-element-frame-hspace:2.25pt;mso-element-wrap:around;mso-element-anchor-vertical:paragraph;mso-element-anchor-horizontal:column;mso-height-rule:exactly">
<b><span style="color:#222222">Caution:</span></b><span style="color:#222222"> This message originated from outside of the Tufts University organization. Please exercise caution when clicking links or opening attachments. When in doubt, email the TTS Service
 Desk at <a href="mailto:it@tufts.edu">it@tufts.edu</a> or call them directly at 617-627-3376.
<o:p></o:p></span></p>
</div>
</td>
</tr>
</tbody>
</table>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</body>
</html>