urls.table Fragmentierung

Ideen und Vorschläge sind willkommen.

urls.table Fragmentierung

Beitragvon Lotus » Mi Jun 17, 2009 12:41 pm

Bei mir ist die jeweils letze urls.*.table extrem stark fragmentiert und dadurch dauert der Start sehr lange.
Vielleicht ist ja ein blob geeignet oder schon geplant.
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg

Re: urls.table Fragmentierung

Beitragvon Quix0r » Mi Jun 17, 2009 1:08 pm

Soweit ich weiss, plant Orbiter das schon. Ich meine erst nach dem LT09.
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld

Re: urls.table Fragmentierung

Beitragvon Orbiter » Mi Jun 17, 2009 1:39 pm

das würde ich schon lange mal gemacht haben, bin nur nie dazu gekommen. Das Thema wird aber immer wichtiger, weil ich mehr annotierte attribute in den metadaten haben will, und die in die alte Struktur nicht passen.
Orbiter
 
Beiträge: 5792
Registriert: Di Jun 26, 2007 10:58 pm
Wohnort: Frankfurt am Main

Re: urls.table Fragmentierung

Beitragvon Quix0r » Mi Jun 17, 2009 1:42 pm

Ist keine Entschuldigung noetig, Orbiter. :) Ich kenne das von mir selbst auch... :/ Einfach zu viel auf dem Radar.
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld

Re: urls.table Fragmentierung

Beitragvon Lotus » Mi Jun 17, 2009 7:52 pm

Ich habe hier vielleicht mal einen Verstärker
Code: Alles auswählen
Fragmente       Dateigröße      Am stärksten fragmentierte Dateien
5,740           2.00 GB         \Dokumente und Einstellungen\David\YaCy\DATA\INDEX\freeworld\TEXT\METADATA\urls.20090525185614265.table
605             94 MB           \Dokumente und Einstellungen\David\YaCy\DATA\PLASMADB\urlNoticeLimitStack9.db
572             82 MB           \Dokumente und Einstellungen\David\YaCy\DATA\INDEX\freeworld\TEXT\METADATA\urls.20090617124519171.table
567             4 MB            \Dokumente und Einstellungen\David\YaCy\DATA\RANKING\GLOBAL\014_othercr

othercr wird der Verzeichnis-Index vom Dateisystem sein (9000 Dateien)
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg


Zurück zu Wunschliste

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 1 Gast

cron