тебе нужно поставить на маршрутизатор обычный прокси-сервер, суди по модельке проблем не будет.
если не хочешь - ставь на один из компов прокси, и выкинь маршрутизатор.