Listowanie folderu z url'a

Question

Zastanawiam się jak mogę (i czy w ogóle mogę) zrobić listing folderu, znając jego URL. Chodzi mi mniej więcej o coś takiego (kod oczywiście nie zadziała, tylko obrazuje o co mi chodzi).

os.listdir("www.stronka.com/folder")

Trzeba do tego użyć jakiejś biblioteki? Może requests?

 

Answer 1

tak - requests

from bs4 import BeautifulSoup
import requests

url = 'http://cdimage.debian.org/debian-cd/8.2.0-live/i386/iso-hybrid/'
ext = 'iso'

def listFD(url, ext=''):
    page = requests.get(url).text
    print page
    soup = BeautifulSoup(page, 'html.parser')
    return [url + '/' + node.get('href') for node in soup.find_all('a') if node.get('href').endswith(ext)]

for file in listFD(url, ext):
    print file

 

przykład ze stackoverflow: http://stackoverflow.com/questions/11023530/python-to-list-http-files-and-directories