1. rozwiązanie: strona używa google-owego „site:” i wyświetlająca wyniki stamtąd. Jedynym problemem jest google-owe captcha, które wyświetla się dla bardziej skomplikowanych wyszukań, choć chyba przy zwykłym „site:” nie jest to częste, poza tym to wręcz banał.
2. rozwiązanie: program crawluje stronę szukając linków do reszty podstron, poczytaj jak zbudować web crawlera w języku którego się uczysz.