Jep, bez greške, to će raditi.
Patch panel i da staviš, opet trebaš switch. Patch panel nije ništa drugo nego produžni za utp kabel, da se lakše iskordinira/organizira spajanje.
Switch ti treba pristup internetu (IP adresu), a dalje sve slažeš na njemu. Ili još bolje, glupi switch, i nemaš nikakvih radova.