El único problema que te vas a encontrar es el de tener modem.
Primero de nada lo que has de hacer es montarte la red local y que funcione correctamente. Esto lo puedes hacer con el asistente del Win XP o configurarla manualmente. Yo aconsejo hacerlo manual. Le das una IP a cada ordenador y ya está. Hay muchos manuales x internet que te lo explican paso a paso.
Luego el ordenador que se conecta a internet será la puerta de enlace para que los demás se puedan conectar.
Problema: Que al tener modem deberás tener ese PC encendido para poder tener internet.
Soluciónes:
1. Comprate un router para poder tener internet en cualquier PC
2. Hay un adaptador de d-link (no se como se el modelo) que te enruta un modem con una red local (incluso wireless) o sea que si no has comprado las tarjetas de red igual te interesa montarte una wireless