nö...
du musst beiden mit nem kabelverbinden und am besten gibst du beiden ne feste ip...; dem windowsrechner kannst du dann sagen, dass man andere pcs über ihn ins WWW können, linux muss dann windows ip als gateway gesagt bekommen

wenn du dass nicht willst, kannst auch einen proxy installieren, der dann ins WWW verbindung hat; beim linux server trägst du dann die ip des windows rechner als proxy adresse ein

dann sollte es gehen...