настройка интернета через D-Link DSL-2540U ADSL2+4-port ethernet router на два компа

Вобщем дело было так. Купили себе роутер D-Link DSL-2540U ADSL2+4-port ethernet router, в темах о роутерах не особо разбираюсь, так как не имела еще с этим дел. Интернет у нас идет не через телефон и модем как таковой нам не требуется, сеть идет непосредственно через провод сетевой (типа Лановского). Столкнулась с такими проблемами:
1. Действуя через установочный диск и делая все пошагово как там написано, оно мне выдает, что не находит модема (но на кой он мне нужен???)
2. Решила пойти другим путем, думаю дрова установлю через Диспетчер устройств, а не распознается наш аппарат....
3. Прочитала, что через Веб можно настроить - но тут и загвоздка - я то могу там потыкать на кнопочки, но я не понимаю, что нажимаю.
4. Решила ничего не устанавливать, ведь вышло при этом так - мой комп видит инет, пользуется им даже))), а второй комп его не видит и все тут.
5. Решила позвонить провайдеру непосредственно, мы с ним настраивали-настраивали, он мне говорит, что видит только эффект, как будто не роутер используется а свитч, то есть оба компа видит, но инет может подключить только к одному из них.

А теперь вопрос: учитывая тот весьма важный факт, что в тематике подключения интернета к нескольким компьютерам я очень маленький чайник, объясните мне простым русским языком, что делать?? Как настроить и возможно ли это вообще? Буду очень благодарна за ответы.