Salut,
Je ne connais pas la AliceBox mais vérifie si elle fait routeur. Si oui, tu connectes simplement un switch derrière et tes PCs sur le switch. Si non, achète un routeur, branche la AliceBox sur le port WAN de ce routeur et tes PCs sur les ports LANs du routeur (en général, les routeurs grands publics possèdent un switch intégré).
Pour ce qui est du matériel conseillé, n'importe quel petit switch fera l'affaire. Au niveau des routeurs, linksys ou netgear (avec une préférence pour le premier).
Tu peux faire ce que tu as dit en dernier, à condition d'avoir 2 cartes réseaux sur le premier ordinateur et qu'après avoir partagé la connexion ce premier PC soit toujours allumé.
A choisir, préfère quand même la première solution plus simple et propre.