検索エンジンのクロールを制御するための適切な形式のrobots.txtファイルを生成。ボットを選択し、許可/禁止ルールを設定、サイトマップを追加し、即座にダウンロード。純クライアントサイド、プライバシー安全。