Jak napisać testerkę kodu?

Question

Hej!

Powiedzmy, że mam program, którego działanie chcę sprawdzić i drugi program np. jakiś BruteForce, który wiem, że daje dobre wyniki. W jaki sposób najprościej mogę napisać testerkę, która dla jakichś konkretnych danych wejściowych porówna output obu kodów i wypisze jakiś komunikat jeśli dla którychś danych wyniki będą się różnić?

Pozdrawiam,

:)

Answer 1

Jeśli są to programy tekstowe - czyli uruchamia się je z lini komend (z podanymi parametrami) i czytają dane z klawiatury a wyniki wypisują na ekran to można zrobić skrypt w Perl/Python/Ruby/PHP/Bash/itp.

Jeśli program jest okienkowy to dużo więcej roboty - chyba, że znajdziesz program, który potrafi kontrolować widgety w innym programie okienkowym.

---

Przykładowo przy testowaniu stron internetowych stosuje się program Selenium, który potrafi kontrolować przeglądarkę Firefox i Chrome - potrafi także symulować przeglądakę w pamięci bez wyświetlania na ekranie.

Comments

Chodziło mi o zwykłe tekstowe, a jak mniej więcej taki skrypt miałby wyglądać / jak miałby działać? Znam trochę Python'a ale nigdy czegoś takiego nie pisałem.

---

W Pythonie jest moduł subprocess a w nim kilka funkcji do uruchamiania zewnętrznych programów i wraca to co program wypisał na ekran. Trzeba o nich poczytać i wybrać właściwą.

Przykładowo wylistowanie katalogu wywołanie w Windows
(nie używam Windows więc dokładnie nie sprawdzę)

import subprocess

wynik = subprocess.call( ['dir', 'c:\\'] )
print(wynik)

To samo w Linux (to mogłem sprawdzić)

import subprocess

wynik = subprocess.call( ['ls', '-al', '/'] )
print(wynik)

Jeśli program czeka na wpisanie czegoś z klawiatury to powinna być możliwość przesłania tego z pliku lub ze zmiennej Pythona (tak aby program myślał, że to idzie z klawiatury) ale to musiał byś poszukać już w internecie.
 

---

Istnieje też taki prosty sposób na proste testy - np. w pliku klawiatura.txt umieszcza się to co normalnie trzeba by było wpisywac z klawiatury a wynik można zapisać w pliky wynik.txt

testowy_program < klawiatura.txt  > wynik.txt

W ten sposób można wielokrotnie wywoływać bez potrzeby wpisywania ręcznie na klawiaturze tych samych danych a wynik zapisac do pliku i porównać z innym za pomoca programów do porównywania zawartości plików - pod Linux jest np. diff

Answer 2

Dobra mam taki pomysł (na testerkę w C++):

Stwórz tą aplikację, która wywoła program z użyciem np. funkcji std::system. Przygotuj też sobie dwa pliki: jeden będzie przechowywał wyjście, a drugi wejście (np. input.txt, output.txt). W pliku input.txt przygouj dane wejściowe dla Twojego programu. Wywołując program z użyciem std::system przekierujesz strumienie stdout i stdin z "ekranu" do tych plików (stdout -> output.txt, stdin -> input.txt). Na Windows, taki program wywołasz tak:

std::system("TWOJA_APLIKACJA < input.txt > output.txt");

U mnie to zadziałało. Dodatkowo możesz też przekierować stderr  dopisując "2>&1 errors.log".

Potem Twój program testujący pobierze output z odpowidniego pliku i będzie robił z nim co chce.

To tyle. Testowałem to u siebie na kompie i działało :)

Tu masz jeszcze o przekierowywaniu: https://en.wikipedia.org/wiki/Redirection_%28computing%29