Grub Next Generation upload server

Grub Next Generation è un sistema web di scansione distribuita (client / server), che aiuta a costruire e mantenere la connessione (come in libertà), indice del Web. Questo è standalone, configurabile upload server scritto in C # (Mono)
La ricerca è parte dell'infrastruttura fondamentale di Internet. E, è attualmente rotto.
Perché è rotto? Si è rotto per la stessa ragione che il software proprietario è sempre rotto: mancanza di libertà, la mancanza di comunità, mancanza di responsabilità, mancanza di trasparenza. Qui, si inizierà a cambiare tutto questo.
Grub ha iniziato nel 2000 con un semplice concetto di distribuzione di una parte della pipeline processo di ricerca: ricerca per indicizzazione. In un certo senso, siamo stati un po 'prima del nostro tempo, ma la nostra intenzione poi era quello che è oggi. Vogliamo aiutare la ricerca correzione.
Ora, con l'aiuto di Wikia, membri della comunità, contributori, e gli sviluppatori Open Source è giunto di nuovo il nostro tempo. Venite a far parte di qualcosa di più grande. Vieni aiutarci a cambiare il mondo

Cosa c'è di nuovo in questa versione:.

• bug con non eliminazione directory temporanee
• qualche ottimizzazione del codice

Cosa c'è di nuovo nella versione 0.9:

• una migliore maneggevolezza .pid file
• bug con schianto uploader in caso di errore di connessione a Solr
• meglio caricare .arc file
• bug con il server di stop / restart

Cosa c'è di nuovo nella versione 0.8.6:

• API server aggiornato
• controllare se funziona uploader di file di .pid
• bug con il server crash elenco di file
• informazioni sulla quantità e la dimensione totale dei file aggiunti durante le directory di elenco
• aggiunta opzione per disabilitare la voce di directory tramite HTTP
• ha aggiunto il supporto per i metodi di compressione: BZip2 e Zip

Cosa c'è di nuovo nella versione 0.8.5:.

• Impostazione delle opzioni del server tramite l'API è stata fissata
• Il server ora codifica correttamente gli URL per richieste HTTP GET.
• sono state apportate alcune ottimizzazioni del codice.

Cosa c'è di nuovo nella versione 0.8.4:

• possibilità di lavorare direttamente su disco invece di usare aggiunto memoria
• controllo per tipo di contenuto aggiunto per URL nei file .Arc

Opzione per impostare il limite di velocità di connessione per il caricamento
• aggiunge / scaricare
• bug con il server schianto su richiesta PUT non valida
• qualche ottimizzazione del codice

Cosa c'è di nuovo nella versione 0.8.3:

• bug con il server crash ricevuto .arc non valida file

Opzione per configurare limite
• aggiunto per max consentito MB per un URL in file .Arc opzione per configurare le dimensioni dei file good.arc e bad.arc aggiunto

Possibilità di vietare connessione IP o nome utente
• aggiunto
• aggiunto telecomando (configurare / stop / restart)
• aggiunto involucro ClamAV C #
• qualche ottimizzazione del codice

Cosa c'è di nuovo nella versione 0.8.1:

• bug con schianto uploader su invalido META tag HTML
• bug con schianto uploader su dati non validi in file
• bug con schianto uploader alla connessione a Solr
• bug con il server crash valido codice di stato HTTP nel file di .arc
• bug con il server schianto sulla connessione prematuramente chiuso
• aggiunto scrittura a Solr solo queste pagine che possono essere convertiti in UTF-8
• aggiunto rimuovere tutti i caratteri di controllo da Solr UpdateXML

Cosa c'è di nuovo nella versione 0.6:

• pulizia del codice e refactoring
• mossa uploading e di controllo .arc file programma separato
• bug con conteggio client connessi
• risposta server fisso su richiesta POST non valida
• bug con il server crash copia file non esistente
• bug con il server crash file incompiute scaricare
• bug # 377: connessione viene azzerato invece di chiuso dopo errore di disco pieno
• aggiunto log semplici connessioni

Possibilità di spostare .arc file su disco (non solo per Hadoop)
• aggiunto

Cosa c'è di nuovo in versione 0.5:.

• Questa è la prima versione beta
• è stato aggiunto il supporto di compressione LZMA.
• L'API del server è stato esteso.
• Verifica della correttezza dei file inviati .arc è stata migliorata.
• Ottimizzazione del codice è stato fatto.