Configurar router di-604 con modem zxdsl 831 II

Hola. Soy neófito en el tema de adsl. Mi consulta es la siguiente: Tengo un Modem adsl modelo ZXDSL 831 II, el cual permite navegar ok en internet al conectarle un PC con WinXP SP2 a través del tipo de conexión de banda ancha PPPoE. Deseo conectar simultáneamente a internet otro PC idéntico al anterior y para ello, el ISP me sugirió adquirir un router. Compré un router marca DLink modelo DI-604, mas al conectar a este dispositivo tanto el modem como los dos PC's de acuerdo a las instrucciones, no puedo acceder a internet, a pesar de que los PC's comparten recursos sin problemas. En qué estoy equivocado? Como configuro correctamente Router - Modem - PC's para que tanto WAN como LAN funcionen ok? Muchas gracias de antemano por la ayuda que puedan ofrecerme.