Deine Ausführungen sind richtig, berücksichtigen aber nur die SRT im flachen Raum und Zeitdilatation durch hohe Geschwindigkeit. Beim Flug um ein schweres Objekt sähe die Sache schon anders aus. Als nicht nur theoretisch durchführbare Möglichkeit wäre der Flug um einen (möglichst kalten) weißen Zwerg anzuführen. Man könnte z.B. einen WZ in unserer "Nachbarschaft" ansteuern, recht hoch beschleunigen und auf eine stabile Umlaufbahn einschwenken, die bei den Geschwindigkeiten freilich recht eng wäre. Ein Neutronenstern geht übrigens nicht, strahlt zu "hart". Nach einigen Umdrehungen könnte man wieder ausschwenken und zurück fliegen.
Zum Bremsen und beschleunigen würde sich unterstützend ein Sonnensegel gut eignen. Das Problem bei solchen Flügen sehe ich eher im interstellaren Gas und Staub und mit harter kosmischer Strahlung, die bei den Geschwindikeiten ja noch härter wird.