Prosta odpowiedź: nie, nie możecie grać razem. To, które nie będzie hostem, będzie raz po razie wywalane z gry. Wspólny internet to nie problem, jedynie ping wam będzie skakał od czasu do czasu.
Wydaje mi się że to zbędne, ale na wszelki wypadek: żeby założyć serwer, musisz odblokować dwa konkretne porty - jak to zrobić, dowiesz się z tematu w dziale WB-Multiplayer. Serwer niededykowany jest darmowy, ale stoi tylko wtedy, gdy gra na nim host - gdy ten wychodzi, serwer pada.