Mailer-Project Community

Derzeit betreibe ich eine YaCy-Node free-search1 und free-search2. Bis jetzt lief diese auch ganz gut, nur scheint sie heute Nacht irgentwie abgestürzt zu sein.

Ich gucke mir das heute Abend mal in Ruhe an, woran das liegen kann. Vielleicht ist auch ein Update wieder von Nöten.

PS: Der Suchlink ist von der P2P-basierten Suchmaschine YaCy und ist meine Node. Die IP kann sich mal ändern! Bitte dann es erneut hier versuchen.

Musste leider den gesamten Index loeschen und von vorne beginnen. Nun schnurrt sie zwar wieder vor sich hin. Allerdings kann ich mich nicht mehr einloggen und jegliche Zugriffe danach werden im Logfile mit den folgenden Zeilen quittiert:

Quote

SERVER ACCES FROM x.x.x.x DENIED
SERVER SLOWING DOWN ACCESS FOR BRUTE-FORCE PREVENTION FROM x.x.x.x ATTEMPT x

Sogar von localhost wird dies damit quittiert. Irgent etwas ist entweder total verstellt oder es hat sich ein Bug eingeschlichen.

Okay, schon wohl ein Bug gewesen zu sein. Momentan laeuft sie etwas lahm, liegt wohl an den vielen, intensiven Crawls, aber scheint zu laufen. Allerdings passiert nun etwas merkwuerdiges auf meinem Router:

In der /etc/security/limits.conf habe ich 20480 als Soft-Limit und 65535 als Hard-Limit fuer maximal gleichzeitig verwendbare Datei-Descriptoren angegeben. Diese Einstellungen scheint Linux dezeit zu ignorieren??? Ich bekomme immer 1024, was eindeutig zu wenig ist.

Hmm, hab ich irgentwie gefixt bekommen... Jedenfalls läuft die Node wieder gut weiter. Aber weiterhin teilweise noch etwas lahm.

Wieder steht die Node und die Crawls sind voll. Löschen werde ich sie nicht, da wieder 7 Mio. Links dann erneut gecrawlt werden müssten. Ist wohl alles noch recht labil.

Tja, und abermals stehen die Crawls. Ich musste nun beide Nodes vom Netz nehmen - hoffentlich nur temporaer - da beide nicht mehr starten wollen. Das Support- und Dev-Team von YaCy habe ich mittlerweile ausfuehrlich im Forum Bugs eingestellt. Hoffentlich fixen die das bald mal...

Die installierte Revision 6246 (6247 ist aktuell verfügbar) scheint wohl wieder zu laufen. Bitte bookmarkt nicht den Link mit der IP oder bucht irgent welche RSS-Feeds. Die IP ist eine dynamische von Arcor (Zensurprovider!) und kann sich ändern. Ich werde mir bald aber selber dynamisches DNS basteln.

Ist wieder ausgefallen und bleibt es auch vermutlich länger. Nicht nur, weil mein Hauptrechner platt ist, sondern weil es noch immer zu viele Verbindunsabbrüche gibt und der Load beim Crawlen zu heftig ist.

Hab alles gelöscht, was YaCy ist, nur noch der kleine 80x15-Button unten im Footer erinnert daran. Schade, schade. Aber war nötig.