HI,
Habe heut aus purem Interesse mal einen Web Spider angefangen.
Dacht das könnte man ja als gemeinschaftsprojekt ausbauen. Was daras letztendlich wird ist ja offen. Aktuell kann ich es mir sehr gut als Benchmark für multi kern cpus (da für jede url ein thread erstellt wird) oder die internet verbindung oder man könnte eine suchmaschiene draus machen oder oder oder. Aktuell spidert es nach mailadressen kann man aber beliebig erweitern auf bilder ganze webseiten und und und.
Nebenbei : Mailadressen habe ich nicht aus interesse an den adressen sondern wegen der einfachheit der implementierung ausgewählt.
Christian hat geschrieben:Nebenbei : Mailadressen habe ich nicht aus interesse an den adressen sondern wegen der einfachheit der implementierung ausgewählt.
Das hätte ich jetzt auch gesagt
Klingt aber wirklich interessant. mit welchen Komponenten arbeitest du? Ich denk ja mal teilweise mit Synapse, oder?
Falls bedarf besteht und es zu einem Gemeinschaftsprojekt wird, kann ich auch gern noch ein entsprechendes Forum aufmachen, falls gewünscht.
Ja, wer einen account haben möchte mailt mir bitte eiren wunschbenutzernamen und wunschpasswort ich werde es dort auch in ein extra verzeichnis packen so das wir auch mehrere Projkete darüber verwalten könn(t)en
Verein
Links
