Thomson speedtouch + modem cable motorola sb4200

Hola tengo auna , bueno ahora ono a dos megas con el modem cable motorola sb4200 , y tengo aparcado un router speedtouch 510 , me gustaria , despues de buscar y no encontrar ,una solucion para conectar dos ordenadores en red y usar el router para ello andome salida par el modem cable, parece que es sencillo pero si alguien me lo puede explicar estaria agradecido.
Tengo XP en los dos ordenadores , ahora uso la salida del USB y la de red del modemcable para tener los dos conectados a internet , pero claro esta me gustaria tener los dos conecatdos tambien en red.
gracias por adelantado.