Warum crawlt yacy nicht weiter

Hier finden YaCy User Hilfe wenn was nicht funktioniert oder anders funktioniert als man dachte. Bei offensichtlichen Fehlern diese bitte gleich in die Bugs (http://bugs.yacy.net) eintragen.
Forumsregeln
In diesem Forum geht es um Benutzungsprobleme und Anfragen für Hilfe. Wird dabei ein Bug identifiziert, wird der thread zur Bearbeitung in die Bug-Sektion verschoben. Wer hier also einen Thread eingestellt hat und ihn vermisst, wird ihn sicherlich in der Bug-Sektion wiederfinden.

Warum crawlt yacy nicht weiter

Beitragvon ww1com » So Dez 18, 2011 6:37 am

System Compaq server dl360 72 GB Scsi 1 GB Ram

Folgendes Problem

Der crawlt bei 3,5 Mio. links nicht weiter

Warum ist das so, vielleicht will ich nur 1GB Ram habe
Zuletzt geändert von ww1com am Fr Dez 23, 2011 4:47 pm, insgesamt 1-mal geändert.
ww1com
 
Beiträge: 80
Registriert: Mo Jul 05, 2010 12:43 pm
Wohnort: Essen

Re: Warum crawlt yacy nicht weiter

Beitragvon Lotus » Mi Dez 21, 2011 9:06 pm

Wie sieht die Warteschlange aus?
3,5 Millionen Links sind kein Limit.
Es könnte auch ein, dass dazu ein Hinweis im Log steht. http://localhost:8090/ViewLog_p.html (rot oder orange)
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg

Re: Warum crawlt yacy nicht weiter

Beitragvon ww1com » Mi Dez 21, 2011 9:30 pm

ich weiss jetzt auch nicht warum nach 3.5 Mio
der crawlter aufhört. jetzt ist das Problem dazugekommen das ich debian neu intsaliert habe.

Danach habe ich die http://yacy-websuche.de/wiki/index.php/De:DebianInstall
liste erweitert


mit
# Mehr unter http://www.yacy-websuche.de/wiki/index. ... ianInstall
deb http://debian.yacy.net ./

in der
/etc/apt/sources.list
jetzt habe ich mit apt-get install yacy versucht alles neu zu installieren

aber bei ein punkt macht mein server mit der installlataion nicht mehr weiter . " wo ???"

Info Instal von debian
peer cd
sources.list
erweitert für yacy
und mit apt-get install insalliert

sehe

apt-get update
apt-get install yacy

wer kann helfen


PS. An die Programmieren von yacy einmal versuchen... peer menu zu Kopieren und zurück zukopieren hald als ein backup
ww1com
 
Beiträge: 80
Registriert: Mo Jul 05, 2010 12:43 pm
Wohnort: Essen

Re: Warum crawlt yacy nicht weiter

Beitragvon Lotus » Do Dez 22, 2011 7:32 pm

Ich habe das Debian-Paket gerade zum ersten mal installiert und nach dieser Anleitung hat es bei mir geklappt. (Ubuntu 10.04)

Wo liegt nun eigentlich das Problem?
YaCy lässt sich nicht installieren?
Was mach der Crawl?
Lotus
 
Beiträge: 1699
Registriert: Mi Jun 27, 2007 3:33 pm
Wohnort: Hamburg

Re: Warum crawlt yacy nicht weiter

Beitragvon ww1com » Fr Dez 23, 2011 4:38 pm

habe jetzt mal neu installiert
und der server bleibt bei Erstelle Home-Verzeichnis »/var/lib/yacy« nicht.
!!!!!!!!!!!!!!!!! stehen.......................
Lege neuen Benutzer »yacy« (UID 264) mit Gruppe »yacy« an ...
Erstelle Home-Verzeichnis »/var/lib/yacy« nicht.
ww1com
 
Beiträge: 80
Registriert: Mo Jul 05, 2010 12:43 pm
Wohnort: Essen

Re: Warum crawlt yacy nicht weiter

Beitragvon Owz » Mi Jan 04, 2012 11:05 pm

Hab vor 5 Jahren als ich noch Windosen-Nutzer war *schande über mich* schon mal mit Yacy gespielt.

Jetzt wollte ich das noch mal aus Probieren und zwar gleich auch meinem Root-Server. Leider bleibt die Installation hängen und zwar wie beim Vorredner:

Code: Alles auswählen
21,9MB wurden in 14s heruntergeladen (1.516kB/s)                               
Vorkonfiguration der Pakete ...
Wähle vormals abgewähltes Paket yacy.
(Lese Datenbank ... 58797 Dateien und Verzeichnisse sind derzeit installiert.)
Entpacke yacy (aus .../yacy_1.01.9087_all.deb) ...
Verarbeite Trigger für ureadahead ...
Richte yacy ein (1.01.9087) ...
Lege Gruppe »yacy« (GID 265) an ...
Fertig.
Lege Systembenutzer »yacy« (UID 264) an ...
Lege neuen Benutzer »yacy« (UID 264) mit Gruppe »yacy« an ...
Erstelle Home-Verzeichnis »/var/lib/yacy« nicht.

Dann passiert nichts mehr!

Ubuntu-Server 64Bit 10.04.3
Owz
 
Beiträge: 4
Registriert: Mi Nov 28, 2007 12:38 pm

Re: Warum crawlt yacy nicht weiter

Beitragvon ww1com » Do Jan 05, 2012 5:47 am

die gleich sache wie bei mir. Und wird nicht weiter installiert..

Schade auch.
ww1com
 
Beiträge: 80
Registriert: Mo Jul 05, 2010 12:43 pm
Wohnort: Essen

Re: Warum crawlt yacy nicht weiter

Beitragvon Quix0r » Do Jan 05, 2012 7:17 am

Ihr koennte beide alternativ den TAR-Ball solange ziehen und dabei den yacy-User benutzen. Das spaetere Wechseln zum Debian-Paket sollte dann (rein theoretisch) klappen.

Dazu muss folgendes auf dem Server getan werden:
Code: Alles auswählen
# root werden:
sudo su
# Benutzer 'yacy' werden: (geht nur ueber root werden!)
su yacy
# Bitte unbedingt schauen, ob die Datei "startYACY.sh" existiert:
# In's Verzeichnis von YaCy wechseln:
cd /var/lib/yacy/
# gibt dies eine Fehlermeldung aus, ist enweder nichts entpackt, oder YaCy ist noch ein Verzeichnis weiter entpackt, einfach mit "ls -l" nachsehen und dort reinwechseln:
ls -l startYACY.sh
# YaCy stoppen und warten, bis es sich beendet hat: (falls eine Instanz doch aus irgent welchen Gruenden laeuft, immer sicher gehen, dass sie beendet ist!)
./stopYACY.sh
# Eine Eben zurueck, da der TAR-Ball ein Verzeichnis "yacy" bereits enthaelt:
cd ..
# diesen dann erstmal ziehen:
wget http://yacy.net/release/yacy_v1.01_20111207_9000.tar.gz
# ... und entpacken: (abwarten)
tar xzf yacy_v1.01_20111207_9000.tar.gz
# Das Entapcken muss ueber die bestehenden Dateien geschehen!
# gibt nichts aus, dann ist die Datei weg:
rm yacy_v1.01_20111207_9000.tar.gz
# Das schwierigste ist geschafft, nun wieder YaCy starten:
cd yacy && ./startYACY.sh

Ich habe diese Anleitung ohne Kenntnisse vom Debian-Paket erstellt, da ich selber auf meinem Server den Tar-Ball im $HOME-Verzeichnis eines normalen Benutzers verwende.

Du kannst auch alternativ das so machen, wie ich es mache:
- Debian-Paket entfernen (mit Konfiguration)
- Tar-Ball als normalen User (NICHT ROOT!) verwenden
- Immer Ueber /ConfigUpdate_p.html die Updates runterladen und installieren lassen (automatisch habe ich nicht gerne)
Quix0r
 
Beiträge: 1347
Registriert: Di Jul 31, 2007 9:22 am
Wohnort: Krefeld

Re: Warum crawlt yacy nicht weiter

Beitragvon ww1com » Do Jan 05, 2012 2:19 pm

Weiss auch nicht warum. Es geht nicht bei mir




Code: Alles auswählen
login as: ww1com
ww1com@192.168.0.26's password:
Linux yacy 2.6.26-2-686 #1 SMP Wed Sep 21 04:35:47 UTC 2011 i686

The programs included with the Debian GNU/Linux system are free software;
the exact distribution terms for each program are described in the
individual files in /usr/share/doc/*/copyright.

Debian GNU/Linux comes with ABSOLUTELY NO WARRANTY, to the extent
permitted by applicable law.
Last login: Thu Jan  5 14:06:07 2012 from ww1com.fritz.box
ww1com@yacy:~$ deluser yacy
-bash: deluser: command not found
ww1com@yacy:~$ delusr yacy
-bash: delusr: command not found
ww1com@yacy:~$ deluser
-bash: deluser: command not found
ww1com@yacy:~$ deluser yacy
-bash: deluser: command not found
ww1com@yacy:~$ adduser jo1jo
-bash: adduser: command not found
ww1com@yacy:~$ su
Passwort:
yacy:/home/ww1com# adduser yacy
adduser: Der Benutzer »yacy« existiert bereits.
yacy:/home/ww1com# deluser yacy
Entferne Benutzer »yacy« ...
Warning: group `yacy' has no more members.
Fertig.
yacy:/home/ww1com# adduser yacy
Lege Benutzer »yacy« an ...
Lege neue Gruppe »yacy« (1001) an ...
Lege neuen Benutzer »yacy« (1001) mit Gruppe »yacy« an ...
Erstelle Home-Verzeichnis »/home/yacy« ...
Kopiere Dateien aus »/etc/skel« ...
Geben Sie ein neues UNIX-Passwort ein:
Geben Sie das neue UNIX-Passwort erneut ein:
passwd: Passwort erfolgreich geändert
Ã
ndere Benutzerinformationen für yacy
Geben Sie einen neuen Wert an oder drücken Sie ENTER für den Standardwert
        Vollständiger Name []: joerg holstein
        Raumnummer []:
        Telefon geschäftlich []:
        Telefon privat []:
        Sonstiges []:
Is the information correct? [Y/n] y
yacy:/home/ww1com# su yacy
yacy@yacy:/home/ww1com$ cd /var/lib/yacy/
yacy@yacy:/var/lib/yacy$ dir
addon                gpl.txt      ranking              stopYACY.bat
AUTHORS              htroot       readme.txt           stopYACY.command
bin                  killYACY.sh  reconfigureYACY.sh   stopYACY.sh
build.properties     langstats    SETTINGS             updateYACY.sh
build.xml            lib          skins                yacy.badwords.example
ChangeLog            libbuild     source               yacy.logging
COPYRIGHT            locales      startYACY.bat        yacy.stopwords
defaults             LOG          startYACY_debug.bat  yacy.yellow
getWin32MaxHeap.bat  NOTICE       startYACY.sh
yacy@yacy:/var/lib/yacy$ ls -l startYACY.sh
-rwxr-xr-x 1 root root 6100  7. Dez 01:12 startYACY.sh
yacy@yacy:/var/lib/yacy$ ./stopYACY.sh
grep: ../DATA/SETTINGS/yacy.conf: Datei oder Verzeichnis nicht gefunden
grep: ../DATA/SETTINGS/yacy.conf: Datei oder Verzeichnis nicht gefunden
Please wait until the YaCy daemon process terminates [wget]
You can monitor this with 'tail -f DATA/LOG/yacy00.log' and 'fuser log/yacy00.lo                                             g'
yacy@yacy:/var/lib/yacy$ cd ..
yacy@yacy:/var/lib$ dir
apt                  initramfs-tools  urandom
aptitude             initscripts      usbutils
defoma               ispell           vim
dhcp3                libuuid          x11
dictionaries-common  logrotate        yacy
dpkg                 misc             yacy_v1.01_20111207_9000.tar.gz
yacy@yacy:/var/lib$ cd yacy
yacy@yacy:/var/lib/yacy$ dir
addon                gpl.txt      ranking              stopYACY.bat
AUTHORS              htroot       readme.txt           stopYACY.command
bin                  killYACY.sh  reconfigureYACY.sh   stopYACY.sh
build.properties     langstats    SETTINGS             updateYACY.sh
build.xml            lib          skins                yacy.badwords.example
ChangeLog            libbuild     source               yacy.logging
COPYRIGHT            locales      startYACY.bat        yacy.stopwords
defaults             LOG          startYACY_debug.bat  yacy.yellow
getWin32MaxHeap.bat  NOTICE       startYACY.sh
yacy@yacy:/var/lib/yacy$ startyacy.bat
bash: startyacy.bat: command not found
yacy@yacy:/var/lib/yacy$ startYACY.bat
bash: startYACY.bat: command not found
yacy@yacy:/var/lib/yacy$ ./stopYACY.sh
grep: ../DATA/SETTINGS/yacy.conf: Datei oder Verzeichnis nicht gefunden
grep: ../DATA/SETTINGS/yacy.conf: Datei oder Verzeichnis nicht gefunden
Please wait until the YaCy daemon process terminates [wget]
You can monitor this with 'tail -f DATA/LOG/yacy00.log' and 'fuser log/yacy00.lo                                             g'
yacy@yacy:/var/lib/yacy$ wget http://yacy.net/release/yacy_v1.01_20111207_9000.t                                             ar.gz
--2012-01-05 14:15:30--  http://yacy.net/release/yacy_v1.01_20111207_9000.tar.gz
Auflösen des Hostnamen »yacy.net«.... 81.169.145.169, 2a01:238:20a:202:1091::                                             145
Verbindungsaufbau zu yacy.net|81.169.145.169|:80... verbunden.
HTTP Anforderung gesendet, warte auf Antwort... 200 OK
Länge: 24699243 (24M) [application/x-tar]
yacy_v1.01_20111207_9000.tar.gz: Keine Berechtigung

Kann nicht nach »yacy_v1.01_20111207_9000.tar.gz« schreiben (Keine Berechtigun                                             g).
yacy@yacy:/var/lib/yacy$ wget http://yacy.net/release/yacy_v1.01_20111207_9000.t                                             ar.gz
--2012-01-05 14:15:51--  http://yacy.net/release/yacy_v1.01_20111207_9000.tar.gz
Auflösen des Hostnamen »yacy.net«.... 81.169.145.169, 2a01:238:20a:202:1091::                                             145
Verbindungsaufbau zu yacy.net|81.169.145.169|:80... verbunden.
HTTP Anforderung gesendet, warte auf Antwort... 200 OK
Länge: 24699243 (24M) [application/x-tar]
yacy_v1.01_20111207_9000.tar.gz: Keine Berechtigung

Kann nicht nach »yacy_v1.01_20111207_9000.tar.gz« schreiben (Keine Berechtigun                                             g).
yacy@yacy:/var/lib/yacy$ tar xzf yacy_v1.01_20111207_9000.tar.gz
tar: yacy_v1.01_20111207_9000.tar.gz: Kann open nicht ausführen: Datei oder Ver                                             zeichnis nicht gefunden
tar: Nicht behebbarer Fehler: Programmabbruch.
tar: Child returned status 2
tar: Fehler beim Beenden, verursacht durch vorhergehende Fehler.
yacy@yacy:/var/lib/yacy$ rm yacy_v1.01_20111207_9000.tar.gz
rm: Entfernen von âyacy_v1.01_20111207_9000.tar.gzâ nicht möglich: Datei oder V                                             erzeichnis nicht gefunden
yacy@yacy:/var/lib/yacy$ cd ..
yacy@yacy:/var/lib$ rm yacy_v1.01_20111207_9000.tar.gz
rm: reguläre Datei (schreibgeschützt) âyacy_v1.01_20111207_9000.tar.gzâ entfer                                             nen? j
rm: Entfernen von âyacy_v1.01_20111207_9000.tar.gzâ nicht möglich: Keine Berech                                             tigung
yacy@yacy:/var/lib$ wget http://yacy.net/release/yacy_v1.01_20111207_9000.tar.gz                                             --2012-01-05 14:16:33--  http://yacy.net/release/yacy_v1.01_20111207_9000.tar.gz
Auflösen des Hostnamen »yacy.net«.... 81.169.145.169, 2a01:238:20a:202:1091::                                             145
Verbindungsaufbau zu yacy.net|81.169.145.169|:80... verbunden.
HTTP Anforderung gesendet, warte auf Antwort... 200 OK
Länge: 24699243 (24M) [application/x-tar]
yacy_v1.01_20111207_9000.tar.gz.1: Keine Berechtigung

Kann nicht nach »yacy_v1.01_20111207_9000.tar.gz.1« schreiben (Keine Berechtig                                             ung).
yacy@yacy:/var/lib$ chmod yacy 777
chmod: Ungültiger Modus: âyacyâ
âchmod --helpâ gibt weitere Informationen.
yacy@yacy:/var/lib$ chmod 777 yacy
chmod: Beim Setzen der Zugriffsrechte für âyacyâ: Die Operation ist nicht erlau                                             bt
yacy@yacy:/var/lib$ rm yacy_v1.01_20111207_9000.tar.gz
ww1com
 
Beiträge: 80
Registriert: Mo Jul 05, 2010 12:43 pm
Wohnort: Essen

Re: Warum crawlt yacy nicht weiter

Beitragvon Orbiter » Do Jan 05, 2012 2:31 pm

wenn der Plattenplatz zu klein ist pausiert der Crawler automatisch. Wieviel ist noch frei?
Orbiter
 
Beiträge: 5798
Registriert: Di Jun 26, 2007 10:58 pm
Wohnort: Frankfurt am Main

Re: Warum crawlt yacy nicht weiter

Beitragvon ww1com » Do Jan 05, 2012 2:59 pm

habe 73 GB Scsi Festpllate 1 GB Ram am Start davon 10 GB Als swap

mit apt-get install
macht die installation nicht weiter sehe oben.

Jetzt habe ich versuch die
"Dazu muss folgendes auf dem Server getan werden:" sehe oben"

Aber Ich komme da nicht weiter.

Über putty kann ich dich mal heute abend mal rein lassen. Kannst du mal nach schauen warum
es nicht weiter installiert.

Bin aber erst ab 21.00 22.00 zuhause. Kannst peer forum nachricht schreiben dann bekommst du von mir ein zugang
ww1com
 
Beiträge: 80
Registriert: Mo Jul 05, 2010 12:43 pm
Wohnort: Essen

Re: Warum crawlt yacy nicht weiter

Beitragvon Orbiter » Do Jan 05, 2012 3:02 pm

?
df -h .
Orbiter
 
Beiträge: 5798
Registriert: Di Jun 26, 2007 10:58 pm
Wohnort: Frankfurt am Main

Re: Warum crawlt yacy nicht weiter

Beitragvon ww1com » Mo Jan 09, 2012 1:13 pm

login as: ww1com
ww1com@ww1net.de's password:
Access denied
ww1com@ww1net.de's password:
Linux yacy 2.6.26-2-686 #1
The programs included with the Debian GNU/Linux system are free software;
the exact distribution terms for each program are described in the
individual files in /usr/share/doc/*/copyright.

Debian GNU/Linux comes with ABSOLUTELY NO WARRANTY, to the extent
permitted by applicable law.
Last login: Sun Jan 8 17:41:47 2012
ww1com@yacy:~$ su
Passwort:
yacy:/home/ww1com# df -h
Dateisystem GröÃe Benut Verf Ben% Eingehängt auf
/dev/cciss/c0d0p2 59G 915M 55G 2% /
tmpfs 506M 0 506M 0% /lib/init/rw
udev 10M 604K 9,5M 6% /dev
tmpfs 506M 0 506M 0% /dev/shm
yacy:/home/ww1com#
ww1com
 
Beiträge: 80
Registriert: Mo Jul 05, 2010 12:43 pm
Wohnort: Essen


Zurück zu Fragen und Antworten

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 2 Gäste

cron