Это плохо, но ничего страшного и так тоже можно.
Если порт закрыт - не будет входящих соединений и желающие скачивать у вас или раздавать вам не смогут к вам подключиться. Соединения будут возможны только исходящие, к тем потенциальным партнёрам по обмену, у которых порт открыт. На скорость же установленного соединения закрытость порта не влияет.