[CLOSE] 6641: Starke Festplatten-Aktivitaet aber private ...

Hier finden YaCy User Hilfe wenn was nicht funktioniert oder anders funktioniert als man dachte. Bei offensichtlichen Fehlern diese bitte gleich in die Bugs (http://bugs.yacy.net) eintragen.
Forumsregeln
In diesem Forum geht es um Benutzungsprobleme und Anfragen für Hilfe. Wird dabei ein Bug identifiziert, wird der thread zur Bearbeitung in die Bug-Sektion verschoben. Wer hier also einen Thread eingestellt hat und ihn vermisst, wird ihn sicherlich in der Bug-Sektion wiederfinden.

[CLOSE] 6641: Starke Festplatten-Aktivitaet aber private ...

Beitragvon Quix0r » Di Feb 02, 2010 7:20 pm

... und Crawler sind alle - bis auf den nicht abschaltbaren Limit/Global Crawler - abgeschaltet.

Waehrend die Node in diesem Zustand war, ist mir folgendes aufgefallen:
Code: Alles auswählen
************* Start Thread Dump Tue Feb 02 19:19:25 CET 2010 *******************

YaCy Version: 0.93/6641
Assigned   Memory = 3817799680
Used       Memory = 3266990160
Available  Memory = 550809520


THREADS WITH STATES: BLOCKED

Thread= Thread-52266 id=171254 BLOCKED
at de.anomic.search.MetadataRepository.load(MetadataRepository.java:121) [if (urlHash == null) return null;]
at de.anomic.search.Segment$ReferenceCleaner.run(Segment.java:461)


Thread= storeDocumentIndex_pool-1-thread-29 id=112 BLOCKED
Thread= storeDocumentIndex_pool-1-thread-30 id=114 BLOCKED
at de.anomic.search.MetadataRepository.store(MetadataRepository.java:136) [Row.Entry oe = (urlIndexFile == null) ? null : urlIndexFile.get(entry.hash().getBytes());]
at de.anomic.search.Segment.storeDocument(Segment.java:324)
at de.anomic.search.Switchboard.storeDocumentIndex(Switchboard.java:1715)
at de.anomic.search.Switchboard.storeDocumentIndex(Switchboard.java:1697)
at sun.reflect.GeneratedMethodAccessor12.invoke(Unknown Source)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:616)
at net.yacy.kelondro.workflow.InstantBlockingThread.job(InstantBlockingThread.java:103)
at net.yacy.kelondro.workflow.AbstractBlockingThread.run(AbstractBlockingThread.java:66)
at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:471)
at java.util.concurrent.FutureTask$Sync.innerRun(FutureTask.java:334)
at java.util.concurrent.FutureTask.run(FutureTask.java:166)
at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1110)
at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:603)
at java.lang.Thread.run(Thread.java:636)

Den DBCleaner habe ich mittlerweile gestoppt, der schien nur durch was anderes blockiert zu sein. Hmmm, hab mal testweise dazu swap deaktiviert, keine Aenderung. Weiterhin hat er starke Ladeaktivitaeten, was auch immer er macht. Vielleicht kein RAM?

Dies ist passiert, seitdem ich folgende GC-Einstellungen verwende:
-XX:ParallelGCThreads=2 -XX:MaxPermSize=45m -XX:ReservedCodeCacheSize=25m -Djava.awt.headless=true


Auch mit diesen Einstellungen passiert gleiches:
-XX:+UseSerialGC -XX:ParallelGCThreads=2 -XX:MaxPermSize=45m -XX:ReservedCodeCacheSize=25m -Djava.awt.headless=true


Und diese Einstellungen crashen Java nach manchmal laengerer oder kuerzerer Zeit:
-XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:ParallelGCThreads=2 -XX:MaxPermSize=45m -XX:ReservedCodeCacheSize=25m


Edit: Etwas aufgraeumt. :roll:
Zuletzt geändert von Quix0r am Do Sep 23, 2010 4:22 am, insgesamt 2-mal geändert.
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld

Re: SVN 6641: Starke Festplatten-Aktivitaet aber private Peer?

Beitragvon Lotus » Di Feb 02, 2010 10:16 pm

Hier ist wieder so viel drin, dass es schwierig ist zu erkennen was wesentlich ist. Wahrscheinlich nur der Blocked Thread.

Zum Res. Observer hier weiter: viewtopic.php?p=19001#p19001
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg

Re: SVN 6641: Starke Festplatten-Aktivitaet aber private Peer?

Beitragvon Quix0r » Di Feb 02, 2010 10:33 pm

@Lotus: Hab aufgeraeumt. Shame on me. :D
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld


Zurück zu Fragen und Antworten

Wer ist online?

Mitglieder in diesem Forum: Bing [Bot] und 3 Gäste