自鯖のipv6対応つかれた…
osで設定するだけでなく
Nginx, sshd側でも設定が必要だった
最初はファイヤーウォールがブロックしてると思ってたけど、無効化しても同じでping6が通ったことから、原因が分かり解決に至った