Som #1 kort siger, ja, der vil blive mere fart.
Dog er der et krav, at din PC og Server er i samme IP segment og de ikke er i hvert sit IP segment, altså på et routet netværk, som din router ville gøre, hvilket jeg næppe tror.
Din PC og Server kommunikere direkte med hinanden, uden om routeren, derfor vil du opnå en meget højere hastighed.