Spider per verifica BL

[kru]

Spider per verifica BL

Ciao, ragazzi.

Adesso la sparo grossa, ma vediamo...

Come si realizza uno spider che analizza uno o più domini/url alla ricerca di uno specifico link?

In linea di massima, mi interesserebbe sapere come creare il "motore" dello spider, cioè la parte che scansiona il sito... come quello presente nelle directory, che verifica se nell'url immesso effettivamente è stato inserito il link.

Riuscite a spiegarmelo?

[digital.daigor]

nn so se è copiraytato, ma il codice di teccno mostra bene come fare

[kru]

@Digital Daigor said:

nn so se è copiraytato, ma il codice di teccno mostra bene come fare

Grazie per l'informazione

Non credo abbia copyright, dato che è Open Source, in ogni caso mi interessa vedere come funziona la cosa, poi lo script me lo creo da me.