Alle Beiträge von Thomas Süß

Probleme mit Strato….

sind behoben, alle Dienste und Webseiten sind wieder unter den gewohnten Adressen erreichbar.

Perspektivisch werden wir uns von Strato trennen, die Art und Weise wie die Abschaltung der Domäne vorgenommen wurde, der gesamte „Support“ war eher abschreckend. Eine Dokumentation der Ereignisse findet man im YaCy Forum Wenn man keine Kunden haben möchte, kann man das doch offen kommunizieren…

Thomas

yacy.net Down – Probleme mit Strato

Seit gestern Abend – dem 10.03.2014 – sind die YaCy Homepage und alle mit yacy.net verknüpften Dienste nicht erreichbar. Wir sind bemüht schnellstmöglich Abhilfe zu schaffen, es dauert aber noch ein paar Stunden bis alle Dienste wieder wie gewohnt zur Verfügung stehen.
Für den zugriff auf die YaCy Homepage verwenden Sie bitte http://yacy.de , nicht direkt erreichbar sind aktuell noch folgende Dienste:

– Wiki
– Suchportal
– Bugtracker

Über alternetive DNS-Einträge/IP-Adressen sind wieder erreichbar:

– YaCy Homepage http://yacy.de
– Bugtracker – http://mantis.tokeek.de/my_view_page.php

Thomas

YaCy-Demo/Suchportal

Heute mal einiges zum Thema YaCy Suchportal, ich bitte um eure Meinungen, Kritik, unterstützung…Ich bin der Meinung das ein öffentlich erreichbarer Demo-Server/Portal für das Projekt wichtig ist – aus zwei Gründen:

– man kann Interessenten sofort eine URL nennen zum ausprobieren
– für das Projekt wichtig als Refernenz und zum Erfahrung sammeln im Praxisbetrieb/großen Datenmengen
– kann als Referenz-Server Server für andere Projekte verwendet werden aus YaCy Daten abgreifen.

Aktuell läuft die YaCy – Instanz auf einem Root Server bei Hetzner, dieser hat 12GB Ram, 2 x 750GB Raid 1, Intel i920, die JVM hat knapp über 6GB zugewiesenen Speicher – wenn man von 12 GB 30% übrig lassen will für das OS und FiIecaching wird es also irgendwann eng…Dazu kommt das ich der JVM heute mehr Speicher zuweisen muss, die KISTE mach oommg…out of heap Speicher…

Daher folgende Fragen:

Hat noch jemand einen Root Server, auf dem YaCy läuft, den wir als Server in einer „Hochverfügbarkeitslösung“ mit einbauen dürfen? Voraussetzung ist das der Server noch min. 1 Jahr läuft, und ähnlich leistungsfähig ist wie der aktuelle. Bzw. sponsert uns jemand einen weiteren Server für 1 Jahr?

Sponsert/hat jemand eine VM übrig auf dem wir ein nginx installieren und konfigurieren können – kostet so ca. 8 Euro Monat – ebenso hier mindestens 1 Jahr Sponsoring/Bereitstellung

Update des bestehenden Servers, dieser kostet aktuell 41 Euro Monat – die ich aus eigener Tasche zahle, das ist ok und soll auch so bleiben.
Ich könnte nun einen Server mit 48GB Ram, 2x 750GB HD und i920 für 57€/Monat bekommen – also 16 Euro mehr als jetzt. Ist jemand bereit diese 16 Euro für 1 Jahr zu übernehmen (192 €) ?

Für alle Szenarien gilt das ich gern bei Installation/Konfiguration/Wartung helfe/bzw. das übernehmen kann. Bei interesse also bitte E-mail an mich – th-suess@gmx.de –

YaCy 1.4 Release veröffentlicht

Pünktlich zu den Chemnitzer Linux-Tagen wurde YaCy 1.4 veröffentlicht, es wurden viele Bugs gefixt und die Apache Solr Integration weiter vorangetrieben. Weitere wichtige Änderungen:

Geschwindigkeit

Bei der Suche wird beim sammeln der Ergebnisse ein Fortschrittsbalken angezeigt – auf den Chemnitzer Linux-Tagen habe ich Michael gefragt ob diese Funktion noch enthalten ist – er ist nur noch sehr selten zu sehen… die Suche wurde um ein vielfaches schneller.

Qualität

Die Qualität der Suchergebnisse wurde verbessert. Dies ist das Ergebnis der immer weitergehenden Solr Integration. Solr wird nicht nur bei der lokalen Suche verwendet, auch die Remote-Suche verwendet Solr inzwischen. Die Integration ist noch nicht komplett abgeschlossen, aber jetzige Stand der Integration steigert die Relevanz und Geschwindigkeit der Suchergebnisse erheblich.

Hier sind einige weitere Details über die wichtigsten Änderungen in YaCy 1.4:

  • der Standart Suchprozess wurde einem komplettem Re-Design unterzogen, viele umfassende Tests wurden durchgeführt um Probleme bei der Solr Integration zu beheben. Die normale (local) Suche ist jetzt sehr schnell – vor allem im Portal Modus – aber auch die Geschwindigkeit  der P2P Suche wurde deutlich gesteigert.
  • Das Ranking wurde stark verbessert, YaCy unterstützt jetzt die Solr-Boost Funktionen, es wurden weitere Felder hinzugefügt mit denen man das Ranking detailliert steuern kann. All diese Ranking-Funktionen sind weitgehend konfigurierbar. Dafür wurde das zugehörige Servlet um die neuen Möglichkeiten erweitert (siehe RankingSolr_p.html). 
  • Es gibt mehrere Ranking-Schematas, eines für die Standart Internet Suche, eines für sort-by-Datum und eines für Intranet-Suchanfragen – dieses wird automatisch benutzt wenn ein Site-Operator verwendet wird.
  • Verbesserung der Geschwindigkeit beim Indexieren
  • Bug-Fixes für einige Speicherlecks, die allgemeine Speicherauslastung sollte jetzt niedriger sein.
  • Viele kleinere Bugfixes.  

YaCy-Suche für den Chemnitzer Linuxtag

Screen_Search_Linuxtag2013small

Mit YaCy kann man auf einfache Art und Weise Intra/Internetseiten die keine Suchfunktion aufweisen durchsuchbar machen. Der Webauftritt der Chemnitzer Linux-Tage (CLT) ist ein gutes Beispiel dafür. Wie findet man schnell eine Folie zu einem Vortrag, welche Projekte waren 2008 vertreten ??? – Alles Dinge die eine Suchfunktion schnell zu Tage fördert. Also schnell mal eine eigene YaCy-Instanz aufgesetzt und die Webseite des CLT komplett mit dem YaCy-Webcrawler indexiert. Das Ergebnis seht Ihr hier. Also fröhliches Suchen……  Die Suche nach OTRS, gefiltert nach PDF Dokumenten findet sehr lesenswerte Ergebnisse.

YaCy und die Chemnitzer Linux-Tage 2013

logo

YaCy ist natürlich auch 2013 wieder auf dem Chemnitzer Linuxtag zu finden, wir haben dieses Jahr einen sehr guten Platz für unseren Stand bekommen – alle Neugierigen sind herzlich eingeladen uns in Chemnitz zu besuchen.Wir werden unter anderem eine „Schlüsselfertige“ YaCy-Seach Appliance präsentieren, damit wollen wir zeigen was YaCy wirklich kann – und in welcher Geschwindigkeit.  Ansonsten gibt es natürlich auch außerhalb von YaCy viel zu sehen, die Liste der Aussteller ist (wie immer) beeindruckend.