при включённом первом компе? если ДА, тогда простой расшарой соединения на 1 компе, второй (после отработки мастера настройки сети) подцепится автоматом

если комп к которому подключён модем бывает выключен, тогда Вам нужен либо ADSL роутер (типа D-Link <DSL-504G> или Zyxel P-660HT EE), либо просто свитч. всё зависит от типа соединения с Вашим провайдером.
второй вариант конечно более практичен