robots.txt生成
ブロックするパスを行単位で入力するとrobots.txtファイルを生成します。User-agent指定、全体ブロック、サイトマップURLに対応し、すべてブラウザ内で処理されます。
入力
結果
よくある質問
robots.txt는 어디에 두나요?
사이트 루트(https://example.com/robots.txt)에 있어야 합니다. 하위 경로에 둔 파일은 크롤러가 읽지 않습니다.
robots.txt로 페이지를 완전히 숨길 수 있나요?
아니요. 크롤링을 '요청'하는 신사협정일 뿐 접근을 막지 못하며, 외부 링크가 있으면 색인될 수도 있습니다. 완전히 숨기려면 인증이나 noindex 메타 태그를 사용하세요.
AI 크롤러도 차단할 수 있나요?
User-agent에 GPTBot, CCBot, Google-Extended 같은 이름을 지정한 블록을 각각 추가하면 됩니다. 이 도구로 각 블록을 만들어 이어 붙이세요.
関連ツール
Markdown目次生成
Markdown文書の見出し(#)からGitHubスタイルのアンカーリンク付き目次を自動生成します。処理はすべてブラウザ内で行われます。
URLエンコーダー
URL에 쓸 수 없는 한글·특수문자를 퍼센트 인코딩하거나 원래 문자로 되돌립니다.
IPサブネット計算機 (CIDR)
CIDR表記(例: 192.168.1.0/24)からネットワーク・ブロードキャストアドレス、ホスト範囲、サブネットマスク、使用可能ホスト数を計算します。すべてブラウザ内で処理されます。
chmod計算機
Linuxのファイル権限をチェックボックスで選ぶと8進数(755)と記号(rwxr-xr-x)表記を計算します。8進数からの逆変換にも対応します。
Cronパーサー
Cron 표현식을 필드별로 해석하고 다음 실행 시각 5개를 계산합니다.
テキスト比較 (Diff)
두 텍스트를 줄 단위로 비교해 추가·삭제된 부분을 색으로 표시합니다.