概要
WebPitaの観測により、Claude（claude.ai）がXserver上のサブフォルダURLを取得できない現象を確認しました。
なお、同一サイトのトップページは正常に取得できます。
また、本現象はWebPitaだけでなく、複数のXserver利用サイトでも再現しています。
本レポートでは、観測結果と確認内容を記録します。
なお、Xserver以外のサーバー（例：アルファメール）ではサブフォルダーも正常に読み込む事ができました。
本件の回答がXserverより届きました。詳細は以下です
https://www.webpita.com/labo/claude_xserver_auto_block_response.html
観測内容
Xserverを利用した複数のWebサイトで確認をした。
Claudeとのチャット中にURLを指定し、当該ページの内容を取得するよう依頼したところ、以下の結果となりました。
取得失敗(サブフォルダ)
https://www.webpita.com/labo/webPitaLabo_list.html
Claudeはページ取得に失敗し、内容を取得できませんでした。
取得成功（トップページとルート配置のHTML）
https://www.webpita.com/webpita.html同じドメインであっても、トップページは正常に取得できました。
この結果から、少なくとも今回確認した事例では、サブフォルダ配下のURLで取得に失敗し、トップページでは取得できることが確認されました。
その他の現象
- トップページは取得できる
- 取得できないのはサブフォルダのみである
- wordPress、通常のWebサイトの両方で同じ現象を確認した
- 他社のサーバー（例：アルファメール）ではサブフォルダを取得できた
- Xserver本体（https://www.xserver.ne.jp/）はサブフォルダーも含めて取得できた
確認事項
対象サイトについて以下を確認しました。
- curlによる取得は正常
- robots.txtによる制限なし
- .htaccessによるアクセス制限なし
- 一般ブラウザから正常に閲覧可能
- ChatGPTから正常に取得可能
- Geminiから正常に取得可能
そのため、一般的なアクセス制限やrobots.txt設定が原因である可能性は低いと考えられます。
考察
今回確認した現象では、Claudeのチャット機能によるURL取得のみで問題が発生しました。
また、WebPita以外の複数のXserver利用サイトでも同様の現象を確認していることから、単一サイトの設定に起因する問題ではない可能性があります。
一方で、全てのサブフォルダURLで発生するのか、あるいは特定条件下でのみ発生するのかは確認できていません。
現時点では、ClaudeのWeb取得機能、ネットワーク経路、サーバー環境との組み合わせなどが関係している可能性がありますが、原因を特定するための十分な情報は得られていません。
そのため、本レポートは観測事実を記録するものであり、特定のサービスや事業者に原因があると断定するものではありません。
まとめ
2026年6月時点において、Claudeのチャット機能では、サブフォルダ配下のURLを取得できない現象が確認されました。
一方で、同一サイトのトップページは正常に取得できています。
また、管理者が確認した複数のXserver利用サイトでも同様の現象を確認しています。
現時点では原因は不明ですが、ClaudeのURL取得機能と特定のサーバー環境との組み合わせによって発生する可能性があります。
WebPitaでは今後もAIによるWebアクセスの観測を継続し、新たな事実や変化が確認された場合は本ページへ追記を行います。
2026-06-18に本件の回答がXserverより届きました。詳細は以下です
https://www.webpita.com/labo/claude_xserver_auto_block_response.html