xml形式のサイトマップを自動生成してくれるプラグインをインストールしました。
XML Sitemap Generator for WordPressが一般的なようでしたので、これを採用。
管理ページのプラグイン検索で、「sitemap」とキーワードを入れて検索。
数種類のプラグインリストが表示されましたが、やはり人気度も高い「XML Sitemap Generator for WordPress 3.1.9」を自動インストール。

インストールが完了すると、管理ページのメニュー>設定に
「XML-Sitemap」というメニューが表示されます。
このプラグインについて、事前に調べていたときは日本語化について、いろいろ設定方法が書かれていましたが、バージョン3.1.9は、自動インストールのみ行なっただけで、設定画面も日本語化されており、不自由は感じませんでした。
また、このサーバ環境では、FTPにてパーミッションなどの変更も必要ありませんでした。