Pobieranie treści stron w trybie non-block

Question

Potrzebuję jakieś biblioteki/sposobu, na pobieranie danych z serwera. Ma się to wykonywać asynchronicznie w trybie non-blocking, mieć obsługe ssl i follow location. Tak, bym mógł otworzyć dowolną strone w php, tak samo jak za pomocą przeglądarki.

Samemu próbowałem zrobić wrappera: https://bitbucket.org/xandros15/simplehttp (nie ma jeszcze parsowania uri)
niestety, używając stream_socket_client po wysłaniu requesta na serwer ssl mija okolo 20s zanim dostanę odpowiedz, czyli 20* dlużej niż normalnym fopen + stream_get_contents.

Z góry mówie, że react odpada. Po pierwsze nie podoba mi się jego system, po drugie nie ma follow location. 

Answer 1

Szedłbym w kierunku https://github.com/Auditr/Scraper czyli Guzzle

Alternatywnie: moduł request pod node.

No i nie wiem, czy cURL by nie dał rady.

Comments

Próbowałem używać guzzle, bez powodzenia. Za dużo musiałbym dorobić by to miało jakikolwiek sens, a nie bawi mnie szukanie w kodzie guzzla (podejmowałem wiele prób). Node nie tyle, co odpada, co musiałoby być jedną z ostateczniści. Nie chcę używać wielu platform, jeśli tego nie muszę.

Answer 2

Znalazłem od taka biblioteke: https://github.com/stil/curl-easy

Dokładnie chodziło mi o coś takiego, jak w tym przykładzie: https://github.com/stil/curl-easy#single-request-without-blocking

Musiałbym jeszcze posprawdzać pare rzeczy i ewentualnie rozszerzyć to o PSR-7, jesli będzie taka możliwość.

Chyba że macie jakieś inne, podobne propozycje.

Comments

Dalej wydaje mi się, że Guzzle takie coś oferuje… http://docs.guzzlephp.org/en/latest/faq.html#can-guzzle-send-asynchronous-requests

---

Ale nie w trybie non-block. Po wywołaniu wait() czekam aż program polaczy się z każdym z hostów i przetworzy dane. Potrzebuję, by program nie blokował się nawet w trakcie czekania na połączenie.

Answer 3

Przy szperaniu po sieci znalazłem, ale jeszcze nie testowałem:

https://icicle.io/ oraz http://amphp.org/

Źródło: https://www.youtube.com/watch?v=dk-D3g2MD2U