[closed] Private Peer [...]

Hier finden YaCy User Hilfe wenn was nicht funktioniert oder anders funktioniert als man dachte. Bei offensichtlichen Fehlern diese bitte gleich in die Bugs (http://bugs.yacy.net) eintragen.
Forumsregeln
In diesem Forum geht es um Benutzungsprobleme und Anfragen für Hilfe. Wird dabei ein Bug identifiziert, wird der thread zur Bearbeitung in die Bug-Sektion verschoben. Wer hier also einen Thread eingestellt hat und ihn vermisst, wird ihn sicherlich in der Bug-Sektion wiederfinden.

[closed] Private Peer [...]

Beitragvon Quix0r » So Jan 31, 2010 11:51 am

Folgende Situation konnte ich hier mit aktuellem Code (SVN 6631) mehrfach reprozuieren (bitte dies Schritt-Fuer-Schritt selber tun):
- Erstmal muss die Node laufen, dann faellt das Konfigurieren leichter
- Dann muessen alle Crawler gestoppt werden (dass der Limit aka. Global Crawler nicht gestoppt werden kann, habe ich hier geschildert)
- Der Peer wird unter Netzwerkkonfiguration (http://127.0.0.1:8080/ConfigNetwork_p.html) auf Robinson-Mode und privaten Peer geschaltet -> speichern!
- Danach wird neugestartet. (Sehr wichtiger Schritt, um es zu verstehen, was hier vielleicht kaputt sein kann)
- Sollten Einige Blobs vorhanden sein, so werden diese nach dem Bootvorhang der Node gemergt, was aber wie hier beschrieben nur mit viel RAM bei grossen zu mergenden Blobs klappt.
- Ist die abgeschlossen, so pausiert die Node, solange auch lokal nicht gesucht wird, nur der Plattenplatz wird regelmaessig gecheckt und die "Cronjobs" (Bookmarks) laufen an, hier habe ich aber keine eingerichtet
- Nun stellt man unter Netzwertkkonfiguration die Node auf P2P-Mode (obere Auswahl) um -> speichern!
- Dabei habe ich alles aktiviert und zugelassen, jedoch nicht geblacklistete URLs!), dazu am Ende ein Screenshot
- Wenige Sekunden spaeter geht es mit den Remote-Crawls los und im Logbuch sind sie nebst DHT-Transfers auch zu sehen
- Nun wird die Node gleich wieder auf Robinson und "privater Peer" zurueckgestellt -> speichern!

Erwarteter Zustand:
Es sollten wieder wie vorher nur der Plattenplatz geprueft und die "Bookmark-Cronjobs" geprueft werden

Was aber tatsaechlich passiert:
Es kommen folgende Meldungen im Logfile:
I 2010/01/31 11:50:54 PLASMA crawlReceipt: RECEIVED RECEIPT from MwHZfrc_hyBK:connectica/0.93006617 for URL rYk9QoEA_DWB:http://www.some-url.invalid


Woran liegt das? Diese kommen nach einem weiteren Neustart aber nicht mehr? Feature? :)

Edit: Titel geaendert. :)
Dateianhänge
screenshot-20100131_1147.png
Meine Einstellungen fuer P2P
screenshot-20100131_1147.png (27.83 KiB) 545-mal betrachtet
Zuletzt geändert von Quix0r am Di Feb 02, 2010 4:06 pm, insgesamt 2-mal geändert.
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld

Re: PLASMA crawlReceipt: RECEIVED RECEIPT from .....

Beitragvon Lotus » So Jan 31, 2010 12:57 pm

Wesentlich ist offenbar:
1) du verschickst remote crawls
2) du stellst auf private peer
3) du bekommst noch die restlichen remote crawl receipts
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg

Re: PLASMA crawlReceipt: RECEIVED RECEIPT from .....

Beitragvon Quix0r » So Jan 31, 2010 1:01 pm

Genau. :) Das ist dann die Kurzfassung von meiner langen Version.
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld

Re: PLASMA crawlReceipt: RECEIVED RECEIPT from .....

Beitragvon Lotus » So Jan 31, 2010 1:03 pm

Ich habe das auch gerade mal umgestellt:
Komisch finde ich, dass es Private Peer heißt, aber ein Peer-Ping durchgeführt wird. Edit: wird nicht durchgeführt, ich habe es nur einmalig beobachtet.

Der Titel für diesen Thread müsste heißen "Private Peer [...]".
Zuletzt geändert von Lotus am So Jan 31, 2010 1:25 pm, insgesamt 1-mal geändert.
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg

Re: Private Peer [...]

Beitragvon Quix0r » So Jan 31, 2010 1:11 pm

Das mit den ankommenden Crawl-Receipts ist ja noch wo okay, da ich diese wohl (?) zu Hauf rausgeschickt habe. Kann das wer bestaetigen, dass seit einigen Stunden viele Remote-Crawls von meinem Peer free-search kommen? Die "Toplogie" (Netzwerkauswahl, ob Freeworld, Intranet, etc.) ist bei mir auf Free-World. Vielleicht ist dort wo was krum... (Konflikt zwischen privatem Peer und Free-World meine ich).

Und ich habe mal den Titel angepasst... ;)
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld

Re: Private Peer [...]

Beitragvon Lotus » Di Feb 02, 2010 10:42 am

Fix in 6640
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg

Re: Private Peer [...]

Beitragvon Quix0r » Di Feb 02, 2010 12:23 pm

Ich teste das gleich mal aus. Dazu muessen vorher Remote-Crawl-Anfragen angenommen werden, etwas gecrawlt werden lassen (Remote Crawler aktiv oder nicht teste ich auch gleich dabei) und dann einfach auf privaten Peer (Robinson) umstellen.

Momentan startet die Node noch. Ich editiere dann diesen Beitrag wenn ich Ergebnisse habe.

Edit: Scheint zu klappen?
Code: Alles auswählen
I 2010/02/02 12:31:28 PLASMA crawlReceipt: RECEIVED RECEIPT from 31AWTMnyRz__:KIT01-12-replicator/0.9300664 for URL VzpWoQPXLEsZ:http://www.ratgeber-sex.com/cora-aus-big-brother-in-aller-munde-915.html
I 2010/02/02 12:31:28 PLASMA crawlReceipt: RECEIVED RECEIPT from 31AWTMnyRz__:KIT01-12-replicator/0.9300664 for URL EtG1iQ-qLH6B:http://www.deliver24.de/lieferservice-k%C3%B6ln-rondorf-50997-pizza-bestellen.html
I 2010/02/02 12:31:28 APICALL /ConfigNetwork.html?acceptCrawlLimit=300&save=Save&cluster.peers.yacydomain=localpeer.yacy&cluster.mode=privatepeer&crawlResponse=on&indexDistributeWhileIndexing=on&peertags=*&indexReceiveBlockBlacklist=on&indexDistributeWhileCrawling=on&network=robinson
I 2010/02/02 12:31:28 INDEX-TRANSFER-DISPATCHER Index transfer of 3 words [hOuRWTwwagVd .. JOuZKlmcTx__] and 213 URLs to peer KIT01-08-100201-oneil:QZxR-0XnH___ in 1 seconds successful (1 words/s)
I 2010/02/02 12:31:28 INDEX-TRANSFER-DISPATCHER Transfer finished of chunk to target QZxR-0XnH___/KIT01-08-100201-oneil
I 2010/02/02 12:31:28 INDEX-TRANSFER-DISPATCHER STORE: Chunk JOuZKlmcTx__ has FINISHED all transmissions!
I 2010/02/02 12:31:29 INDEX-TRANSFER-DISPATCHER Index transfer of 2 words [cVYlligKAmT- .. sVYpdMs5Zd__] and 63 URLs to peer apfelmaennchen:u2dbX3tbx1__ in 1 seconds successful (1 words/s)
I 2010/02/02 12:31:29 INDEX-TRANSFER-DISPATCHER Transfer finished of chunk to target u2dbX3tbx1__/apfelmaennchen
I 2010/02/02 12:31:29 INDEX-TRANSFER-DISPATCHER starting new index transmission request to sVYpdMs5Zd__
I 2010/02/02 12:31:30 INDEX-TRANSFER-DISPATCHER Index transfer of 2 words [cVYlligKAmT- .. sVYpdMs5Zd__] and 63 URLs to peer Infokrieger:wkic5mC7nm5I in 0 seconds successful (6 words/s)
I 2010/02/02 12:31:30 INDEX-TRANSFER-DISPATCHER Transfer finished of chunk to target wkic5mC7nm5I/Infokrieger
I 2010/02/02 12:31:30 INDEX-TRANSFER-DISPATCHER starting new index transmission request to sVYpdMs5Zd__
I 2010/02/02 12:31:30 INDEX-TRANSFER-DISPATCHER Index transfer of 2 words [cVYlligKAmT- .. sVYpdMs5Zd__] and 63 URLs to peer vaisheshika:xY5gLzZqjn6d in 0 seconds successful (6 words/s)
I 2010/02/02 12:31:30 INDEX-TRANSFER-DISPATCHER Transfer finished of chunk to target xY5gLzZqjn6d/vaisheshika
I 2010/02/02 12:31:30 INDEX-TRANSFER-DISPATCHER STORE: Chunk sVYpdMs5Zd__ has FINISHED all transmissions!
I 2010/02/02 12:31:31 PLASMA Rejecting RWIs from peer wHrdx1jjKu__:KIT-liebel-091207/0.9300664. Granted is false
I 2010/02/02 12:31:34 PLASMA Rejecting RWIs from peer 31AWTMnyRz__:KIT01-12-replicator/0.9300664. Granted is false
I 2010/02/02 12:31:41 YACY yacyClient.transferRWI error:Connection timed out
I 2010/02/02 12:31:41 INDEX-TRANSFER-DISPATCHER Transfer failed of chunk to target oTnUcDzX9sC5/anon: no connection from transferRWI
I 2010/02/02 12:31:41 INDEX-TRANSFER-DISPATCHER STORE: Chunk gVYpdMs5Zd__ has failed to transmit index; marked peer as busy
I 2010/02/02 12:31:41 INDEX-TRANSFER-DISPATCHER starting new index transmission request to gVYpdMs5Zd__
I 2010/02/02 12:31:41 INDEX-TRANSFER-DISPATCHER Index transfer of 2 words [cVYlligKAmT- .. gVYpdMs5Zd__] and 90 URLs to peer KIT01-11-thor:qkUQkPecJP__ in 0 seconds successful (6 words/s)
I 2010/02/02 12:31:41 INDEX-TRANSFER-DISPATCHER Transfer finished of chunk to target qkUQkPecJP__/KIT01-11-thor
I 2010/02/02 12:31:41 INDEX-TRANSFER-DISPATCHER STORE: Chunk gVYpdMs5Zd__ has FINISHED all transmissions!
I 2010/02/02 12:31:45 PLASMA Rejecting RWIs from peer S7HcnHI9AS__:Tweegy-NL/0.93006635. Granted is false
I 2010/02/02 12:31:47 PLASMA Rejecting RWIs from peer 0X4-2lXytzsb:dlc-eco/0.9300655. Granted is false
I 2010/02/02 12:31:52 APICALL /ConfigNetwork.html?acceptCrawlLimit=300&save=Save&indexReceive=on&indexDistribute=on&cluster.peers.yacydomain=localpeer.yacy&cluster.mode=privatepeer&crawlResponse=on&indexDistributeWhileIndexing=on&peertags=*&indexReceiveBlockBlacklist=on&indexDistributeWhileCrawling=on&network=p2p
I 2010/02/02 12:31:52 PLASMA crawlReceipt: RECEIVED RECEIPT from WpJKapwi-R__:KIT02-03-rubberduck/0.9300657 for URL TlsT5A3RO3Mb:http://www.cubahotelreservation.com/de/hotel.asp?hotel_code=SCTSMMeliaguillermo
I 2010/02/02 12:31:53 PLASMA crawlReceipt: RECEIVED RECEIPT from qkUQkPecJP__:KIT01-11-thor/0.9300664 for URL Oc1gOO3mY0sB:http://www.infobank-mtk.de/mtk_suche/003/zk_eschborn_de.html
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld

Re: Private Peer [...]

Beitragvon Lotus » Di Feb 02, 2010 3:49 pm

Ja, scheint zu funktionieren. Zum Glück wird nun ein Apicall geloggt, da sehen wir was gemacht wird. ;-)
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg

Re: Private Peer [...]

Beitragvon Quix0r » Di Feb 02, 2010 3:54 pm

Wie meinst du das? Soll ich mehr Log anhaengen?
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld

Re: Private Peer [...]

Beitragvon Lotus » Di Feb 02, 2010 3:58 pm

Nein, der Thread kann nun mit [closed] in die Bug-Ecke geschoben werden. ;-)
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg

Re: [closed] Private Peer [...]

Beitragvon Quix0r » Di Feb 02, 2010 4:16 pm

Okay, dann hat mich nur das Zwinkern verwirrt. :( Aber vielleicht stehe ich auch heute etwas auf dem Schlauch. :D
Quix0r
 
Beiträge: 1345
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld


Zurück zu Fragen und Antworten

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 3 Gäste