Frage LURL-DB

Hier finden YaCy User Hilfe wenn was nicht funktioniert oder anders funktioniert als man dachte. Bei offensichtlichen Fehlern diese bitte gleich in die Bugs (http://bugs.yacy.net) eintragen.
Forumsregeln
In diesem Forum geht es um Benutzungsprobleme und Anfragen für Hilfe. Wird dabei ein Bug identifiziert, wird der thread zur Bearbeitung in die Bug-Sektion verschoben. Wer hier also einen Thread eingestellt hat und ihn vermisst, wird ihn sicherlich in der Bug-Sektion wiederfinden.

Frage LURL-DB

Beitragvon LA_FORGE » Di Okt 18, 2016 4:26 am

Hi,

in welcher Datei wird denn die LURL-DB gespeichert?


Viele Grüße

LA_FORGE
LA_FORGE
 
Beiträge: 559
Registriert: Sa Okt 11, 2008 5:24 pm

Re: Frage LURL-DB

Beitragvon luc » Mi Okt 19, 2016 1:37 pm

Hi LA_FORGE, are you asking because you saw this kind of message in YaCy logs : "double in: LURL-DB, oldDate = ...".

This message was left mistakenly unchanged : since 2013, it appears the LURL-DB (or "ZURL data structure") has been removed (see this commit) and the information is now in the Solr index.

Best regards
luc
 
Beiträge: 294
Registriert: Mi Aug 26, 2015 1:04 am

Re: Frage LURL-DB

Beitragvon LA_FORGE » Mi Okt 19, 2016 1:43 pm

Hi Luc,

thank you very much. Is there a query to overwrite all the values of this specific date field in Solr? I'm unable to recrawl because the date in this solr field is to new.

Greetings

LA_FORGE
LA_FORGE
 
Beiträge: 559
Registriert: Sa Okt 11, 2008 5:24 pm

Re: Frage LURL-DB

Beitragvon luc » Mi Okt 19, 2016 2:16 pm

LA_FORGE, what kind of operation are you performing? Recrawl job, advanced crawl ? Instead of overwriting all load date fields it would be preferable to adjust the filtering query...
luc
 
Beiträge: 294
Registriert: Mi Aug 26, 2015 1:04 am

Re: Frage LURL-DB

Beitragvon LA_FORGE » Do Okt 20, 2016 7:02 am

I'm using the new recrawl feature at the page 'IndexReIndexMonitor_p.html' but the last crawl date is a few hours ago so I want to force a recrawl without respecting the last crawl date.
LA_FORGE
 
Beiträge: 559
Registriert: Sa Okt 11, 2008 5:24 pm

Re: Frage LURL-DB

Beitragvon luc » Do Okt 20, 2016 11:34 am

Ok, did you noticed the recrawl feature has a date filter you can customize with the "Edit Solr Query" field?
Instead of the default "fresh_date_dt:[* TO NOW/DAY-1DAY]", you can use for example "fresh_date_dt:[* TO NOW/HOUR]" or even "fresh_date_dt:*".

You will find even more options in the Solr documentation page "Working with Dates".
luc
 
Beiträge: 294
Registriert: Mi Aug 26, 2015 1:04 am


Zurück zu Fragen und Antworten

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 1 Gast