1) настраиваешь соответствующим образом модем.
2) втыкаешь его и остальные компьютеры в сети в свич (если нет, то думаю в ближайшем магазине он стоит порядка 10-20$).
3) настраиваешь сетевое подключение на компьютерах следующим образом (если например адрес роутера 192.168.1.1/24):
ip: 192.168.1.x - (где x любое число от 2 до 254).
маска подсети: 255.255.255.0
основной шлюз: 192.168.1.1
адресс dns-сервера можешь узнать например в суппорте провайдера, или использовать любой бесплатный.