Bot przeszukujący wyszukiwarkę

Question

Witam wszystkich, stanąłem wobec dość poważnego problemu i nie mam pojęcia jak sie z nim uporać chodzi mi tutaj bardzie o to jak zacząć po później pewnie poleci. Do rzeczy potrzebuje napisać bota , spidera jak zwał tak zwał chodzi  o program przeszukujący strony www pod kontem konkretnej frazy, na co zwarcic uwagę pisząc takie coś, w jakim języku czy PHP się do tego nadejdę w ogóle jak to ugryźć . Ktoś coś podpowie.

Answer 1

W php cięzko .. wypadało by tu wątki odpalić.

Comments

Ok co polecasz ?

---

jave/c#

Kolega robi coś podobnego.  W wątkach przeszukuje strony, spisuje frazy i potem przez RMI gdzieś to tam przepuszcza na indekser.

---

Czy java w wersji script sie do tego nada?

---

what what what? :D:D

---

Czy w javascripcie to zrobię wykorzystując web workers jako wątki ?

---

lol..."java w wersji script" - śmiechowe