Bardzo możliwe, że visual przy każdej "kompilacji" kodu uruchamia od nowa środowisko pythona, dlatego tak długo się uruchamia. Możliwe że da się tak ustawić, by podczas otwierania samego projektu środowisko uruchamiało się, ale nie wiem jak, nie korzystam z VSCode do pythona za często. Antywirus też może być tego powodem, ponieważ analizuje każde uruchomienie programu. W tym przypadku dałbym cały folder z twoimi projektami jako wyjątek w antywirusie aby ten nie analizował co się tam dzieje