<html><body>
<p><font size="2" face="sans-serif">Hi Yuri,</font><br>
<br>
<font size="2" face="sans-serif">- EPrints 3.1.2 or 3.1.12?</font><br>
<font size="2" face="sans-serif">- I don't think the large row counts of the two tables are a problem - such counts are quite common.</font><br>
<font size="2" face="sans-serif">- Our experience is that the indexer rather is slowed down by too many entries in the event table, especially if there are some which are ancient (several weeks or months old). See Manage records &gt; Tasks . Removing old tasks will help a lot.</font><br>
<br>
<font size="2" face="sans-serif">Best regards,</font><br>
<br>
<font size="2" face="sans-serif">Martin</font><br>
<br>
<font size="2" face="sans-serif">--</font><br>
<font size="2" face="sans-serif">Dr. Martin Brändle</font><br>
<font size="2" face="sans-serif">Zentrale Informatik</font><br>
<font size="2" face="sans-serif">Universität Zürich</font><br>
<font size="2" face="sans-serif">Stampfenbachstr. 73</font><br>
<font size="2" face="sans-serif">CH-8006 Zürich</font><br>
<br>
<font size="2" face="sans-serif">mail: martin.braendle@id.uzh.ch</font><br>
<font size="2" face="sans-serif">phone: +41 44 63 56705</font><br>
<font size="2" face="sans-serif">fax: +41 44 63 54505</font><br>
<font size="2" face="sans-serif"><a href="http://www.zi.uzh.ch">http://www.zi.uzh.ch</a></font><br>
<br>
<img width="16" height="16" src="cid:1__=4EBBF5DDDFA401F58f9e8a93df9@lotus.uzh.ch" border="0" alt="Inactive hide details for Yuri ---03/02/2016 09:58:47---Hi all!   I've a big problem with the eprints indexer (Eprint 3.1.2). I"><font size="2" color="#424282" face="sans-serif">Yuri ---03/02/2016 09:58:47---Hi all! &nbsp; I've a big problem with the eprints indexer (Eprint 3.1.2). I was</font><br>
<br>
<font size="1" color="#5F5F5F" face="sans-serif">Von:        </font><font size="1" face="sans-serif">Yuri &lt;yurj@alfa.it&gt;</font><br>
<font size="1" color="#5F5F5F" face="sans-serif">An:        </font><font size="1" face="sans-serif">&quot;EPrints.org Technical List&quot; &lt;eprints-tech@ecs.soton.ac.uk&gt;</font><br>
<font size="1" color="#5F5F5F" face="sans-serif">Datum:        </font><font size="1" face="sans-serif">03/02/2016 09:58</font><br>
<font size="1" color="#5F5F5F" face="sans-serif">Betreff:        </font><font size="1" face="sans-serif">[EP-tech] &nbsp;indexer stalls</font><br>
<font size="1" color="#5F5F5F" face="sans-serif">Gesendet von:        </font><font size="1" face="sans-serif">eprints-tech-bounces@ecs.soton.ac.uk</font><br>
<hr width="100%" size="2" align="left" noshade style="color:#8091A5; "><br>
<br>
<br>
<tt><font size="2">Hi all!<br>
<br>
 &nbsp;I've a big problem with the eprints indexer (Eprint 3.1.2). I was <br>
looking for a high load problem in our server and discovered that, even <br>
with no http requests or other process running, the load was above 1.<br>
<br>
The indexer was also at Ss state, so sleeping and log (with an increased <br>
log level) showed it was not doing any operation in the past days. Then <br>
I shut down the indexer and the high load disappeared.<br>
<br>
I think the problem could be my eprint__rindex which has 33 millions <br>
rows and eprint__index has 3 million rows. So I think what happens is <br>
that mysql issue some kernel calls, because I can see that, when the log <br>
stops to be updated with new operations), the wa (i/o waiting) is above <br>
50% for a lot of time.<br>
<br>
Then the indexer stop doing indexing and load is high (above 2 or 3) <br>
with an high wa (I/O).<br>
<br>
Now I've stopped the indexer and running it as the webserver user <br>
(www-data) with --once and --notdeamon and stopping it when stalling. <br>
Then I run it again and so on (the index_queue has still 4000 rows to <br>
process).<br>
<br>
Any idea on how to solve this problem?<br>
<br>
Question: which part of Eprints now is responsible to add an entry in <br>
the index_queue table?<br>
*** Options: </font></tt><tt><font size="2"><a href="http://mailman.ecs.soton.ac.uk/mailman/listinfo/eprints-tech">http://mailman.ecs.soton.ac.uk/mailman/listinfo/eprints-tech</a></font></tt><tt><font size="2"><br>
*** Archive: </font></tt><tt><font size="2"><a href="http://www.eprints.org/tech.php/">http://www.eprints.org/tech.php/</a></font></tt><tt><font size="2"><br>
*** EPrints community wiki: </font></tt><tt><font size="2"><a href="http://wiki.eprints.org/">http://wiki.eprints.org/</a></font></tt><tt><font size="2"><br>
*** EPrints developers Forum: </font></tt><tt><font size="2"><a href="http://forum.eprints.org/">http://forum.eprints.org/</a></font></tt><tt><font size="2"><br>
</font></tt><br>
</body></html>