退了老头门会影响剧情推进吗？

开局进了老头门，然后立即去扶摇子那退了再入了其它门派，但是老头还是时不时蹦出来。