httpsで設定してもhttpのURLでアクセスができます。
そこでhttpのURLでアクセスしてもhttpsに全てのページがリダイレクトされるように設定します。
.htaccessファイルに次のコードを追加することにより、
すべてのHTTPトラフィックをHTTPSに簡単にリダイレクトできます。
こちらのサイトでは1行目に記入しています。
RewriteEngine On
RewriteCond %{HTTPS} off
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R=301]
RewriteCond %{HTTPS} off
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R=301]
Xserverで簡単インストールをした場合は「public_html」のフォルダに格納されています。
public_html/.htaccess
また下記のフォルダと同じようなところにあると思いますのでftpソフトなどで確認をしてみてください。
public_html/wp-includes/
public_html/wp-content/
public_html/wp-admin/
慣れていない方は.htaccessのファイルをコピーして、試してみたほうが良いでしょう。