Le mie tecnologie di Data Mining sono all'avanguardia, e posso fornire varie soluzioni per lo spidering del web, oppure anche della propria macchina o di una rete aziendale.
IL mio spider attuale è altamente personalizzabile nelle strategie di spidering, e può essere utilizzato a vari scopi, inoltre non è solo uno spider, ma è anche un indicizzatore per parole chiavi, ed è dotato di un motore di ricerca in grado di utilizzare gli indici creati dall' indicizzatore.
Inoltre il mio spider, nella versione attuale è in grado di funzionare in concorrenza ed in maniera distribuita su una rete di computer, il che lo rende idoneo anche per raccogliere informazioni in larga scala sul web, anche gli indici possono essere distribuiti su una rete di calcolatori, e questo significa che teoricamente il mio spider potrebbe benissimo essere usato per sviluppare un motore di ricerca reale in grado di indicizzare miliardi di pagine.
IL motore di ricerca incorporato nello spider, è disponibile anche come script in Php, ed è in grado di utilizzare gli indici creati dall'indicizzatore dello spider, per creare liste di risultati ordinate per rilevanza, ovvero è possibile cercare negli indici ed avere i risultati ordinati per importanza.
Inoltre l'ordinamento nelle ricerche viene effettuato una sola volta, grazie al salvataggio delle ricerche già effettuate in una cache delle ricerche, e anche questa cache è distribuibile su una rete.
|