Да, правильно понимаешь, можно и так. В сервер надо установить две сетевые карты. Одна будет смотреть в модем, вторая - в маршрутизатор. На первой будет адрес и настройки для работы в сети провайдера, на второй - твои адрес, как настроишь. Маршрутизатор в данном случае будет выступать как свич, т.е. к порту wan подключать ничего не надо. Если на нем включены какой-то файрвол или правила, надо отключить. А на клиентах пропишешь в кач-ве всех твоих сервисов - ip сервера. Заходить на сервер удаленно можно по ssh с помощью putty, на внутренний ip, только надо настроить и разрешить соответствующие службы на самом сервере.