特定のipアドレスからのアクセスをブロックする方法はありますか？

VPSパネル上の機能として特定IPをブロックするものはないのでパケットフィルター設定を無効として、別途ファイアウォールで特定のIPアドレスをブロックするなどが可能かと思います。
下記マニュアルに記載がありますが、パケットフィルターの設定とファイアウォールは重複して動作する可能性があるようなのでご注意ください。

■参考：パケットフィルターの設定について
https://vps.xserver.ne.jp/support/manual/man_server_port.php