浦島太郎とタイムトラベル

本読んでて気になったのだけど、浦島太郎の逸話？ができた時代、まだ相対性理論もない時代なのに、どうして浦島太郎がタイムトラベル(しかも時間が本人だけ遅く流れている)という設定が作れたのだろうか。

浦島太郎の逸話が発生した時代について後で調べたい