Tworzenie robotów sieciowych - jaki język wybrać

pytanie zadane 27 maja 2016 w PHP przez Else Stary wyjadacz (12,260 p.)

Witam,

zaczynam pisać nową aplikację internetową, ale mam kilka ważnych pytań. Zamierzam napisać robota, albo skrypt, który potrafiłby przeszukać daną stronę i na podstawie algorytmu wybrać interesującą mnie zawartość i zapisywać ją w bazie danych.Oto pytania:

1. Czy w języku PHP można napisać coś takiego (moje umiejętności w php to takie 7/10, programuje w php 3 lata)?

2. Czy istnieją biblioteki do PHP, które mogą mi pomóc (słyszałem o Curl)

3. Jeżeli się nie da nie opłaca pisać czegoś takiego w php, to w czym? Widziałem, że jest książka na ten temat z Heliona oparta o Perla, ale jest pewnie nieaktualna bo z 2009 roku.

Proszę o pomoc, bo aktualnie bardzo zainteresował ten temat i chciałbym się w tym kierunku teraz rozwijać.

Dzięki za przeczytanie, Else.

1 odpowiedź

odpowiedź 27 maja 2016 przez Comandeer Guru (607,960 p.)

ad. 1) Jeśli oceniasz swoją znajomość PHP na 7/10, to to pytanie nie miało prawa paść…

ad. 2) cURL to narzędzie do obsługi żądań HTTP i nie ma nic wspólnego z PHP – oprócz tego, że PHP ma jego obsługę wbudowaną. Od siebie polecę Guzzle, które opakowuje cURL-a.

W sumie napisałem wieki temu prosty parser stron w PHP, może Ci się przyda → https://github.com/Auditr/Scraper