Każde activity i fragment powinien być odpowiedzialny za jedną rzecz, jeśli chcesz mieć wiele funkcjonalności na jednym ekranie to robisz activity (odpowiedzialne za obslugiwanie/przełączanie/cokolwiek fragmentow) i fragmenty umieszczasz w tym activity i każdy z nich robi swoją rzecz. Nie należy dawać kilka layoutów luzem do activity i obsługiwać je jednym activity.
Jeśli nie o to ci chodziło to opisz dokładniej bo dałeś mało informacji.