robots.txt チェッカー

URLを入力するとrobots.txtを取得・解析します。クロール許可/拒否の設定を一覧表示。