Grub Next Generation este un sistem web crawling distribuit (clienti / servere), care ajută la construirea și menținerea liberă (ca în libertate) index de pe Web. Aceasta este independent, serverul de încărcare configurabil scris în C # (Mono)
Căutare este parte a infrastructurii fundamentală a Internetului. Și, este în prezent rupt.
De ce este rupt? Acesta este rupt pentru același motiv pentru care software-ul de proprietate este întotdeauna rupt: lipsa de libertate, lipsa de comunitate, lipsa de responsabilitate, lipsa de transparență. Aici, vom începe să se schimbe toate astea.
Grub a inceput in 2000, cu un concept simplu de distribuire parte a conductei de proces de căutare: crawling. Într-un fel, am fost un pic înainte de timpul nostru, dar intenția noastră, atunci a fost ceea ce este acum. Vrem să ajute căutare fix.
Acum, cu ajutorul Wikia, membri ai comunității, colaboratori, iar dezvoltatorii Open Source a venit din nou timpul nostru. Vino să fie parte din ceva mai mare. Ajută-ne schimba lumea
Ce este nou în această versiune:.
- bug fix cu nu ștergerea directoare temporare
- unele optimizare cod
Ce este nou în versiunea 0.9:
- Manipularea bine .pid fișierul
- bug fix cu încărcare accident pe erori de conexiune pentru Solr
- mai bine încărca fișiere .arc
- bug fix cu serverul de oprire / repornire
Ce este nou în versiunea 0.8.6:
- API Server actualizat
- verifica daca lucrări Uploader de fișier .pid
- bug fix cu serverul accident la dosar listarea
- adăugat informațiile despre cantitatea și mărimea totală a fișierelor în timpul listare directoare
- opțiune adăugată pentru listare director dezactiva prin HTTP
- adăugat suport pentru metodele de compresie: bzip2 și Zip
Ce este nou în versiunea 0.8.5:.
- Setarea opțiunilor de server prin intermediul API a fost stabilită
- Serverul acum codifică corect URL-uri pentru HTTP GET cereri.
- s-au făcut unele optimizări de cod.
Ce este nou în versiunea 0.8.4:
- opțiunea de a lucra direct pe disc în loc de a folosi adăugat memorie
- adăugat cec pentru tipul de conținut pentru a URL in fisiere .arc
- adăugat / descărcare
- bug fix cu serverul accident la cerere PUT nevalidă
- unele optimizare cod
Opțiune pentru a seta viteza de conectare limita pentru încărcare
Ce este nou în versiunea 0.8.3:
- bug fix cu serverul accident pe primite .arc invalid fișier
- adăugată pentru max permis MB pentru un URL în fișierele opțiune pentru a configura dimensiunea de good.arc și bad.arc fișierele adăugate .arc
- adăugat
- adăugat telecomanda (configura / oprire / repornire)
- adăugat ClamAV C # înveliș
- unele optimizare cod
Opțiune pentru a configura limita
Opțiunea de a interzice conexiune prin IP sau nume de utilizator
Ce este nou în versiunea 0.8.1:
- bug fix cu încărcare accident pe invalid HTML tag META
- bug fix cu încărcare accident pe date nevalide în fișier
- bug fix cu încărcare accident pe connect pentru Solr
- bug fix cu serverul accident pe invalid cod de stare HTTP în fișierul .arc
- bug fix cu serverul accident pe conexiune prematur închis
- adăugat scriere Solr numai aceste pagini care pot fi convertite la UTF-8
- adăugat elimina toate caracterele de control de la Solr UpdateXML
Ce este nou în versiunea 0.6:
- cod curățarea și refactoring
- muta încărcarea și verificarea .arc fișiere de program separat
- bug fix cu clienții conectați COUNT
- răspuns server de fixat pe cerere POST nevalidă
- bug fix cu serverul accident pe copie dosar nu existent
- bug fix cu serverul accident pe fișiere nefinalizate descărca
- fix bug # 377: Connection devine resetare în loc de închis după disc de eroare complet
- adăugat conexiuni simplu log
- adăugat
Opțiune pentru a muta fișiere de pe disc .arc (nu numai la Hadoop)
Ce este nou în versiunea 0.5:.
- Aceasta este prima versiune beta li>
- a fost adăugat suport de compresie LZMA.
- API serverului a fost extins.
- Verificarea corectitudinii de fișiere trimise .arc fost îmbunătățit.
- cod de optimizare a fost realizată.
Comentariile nu a fost găsit