テスト用でレンタルサーバーを借りたのですが
googleに検索されたくないのでrobots.txtをディレクトリ直下に置いて
User-Agent: * Disallow: /
と記載しました。
各htmlの中には
<meta name="robots" content="index,follow" />
が入ったままなのですが、これも
<meta name="robots" content="noindex,follow" />
に変更しなければいけませんか?
本環境に上げるとき編集し忘れそうなのでここはそのままにしたいのですが、影響はありますか?
気になる質問をクリップする
クリップした質問は、後からいつでもMYページで確認できます。
またクリップした質問に回答があった際、通知やメールを受け取ることができます。
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。
回答3件
0
followではなくnofollowではないでしょうか。
- [
Meta robots noindex/nofollow/noarchiveタグの使い方](https://www.suzukikenichi.com/blog/how-to-use-meta-noindex-nofollow-noarchive/)
本環境に上げるとき編集し忘れそうなのでここはそのままにしたいのですが、影響はありますか?
何を懸念されているのか分かりかねますが、テストと本番をわける必要があるのでしたら、例えば、テスト環境にはベーシック認証をかけるなどするのもありとは思います。
投稿2018/06/20 06:36
総合スコア80850
0
ベストアンサー
googleに検索されたくないのでrobots.txtをディレクトリ直下に置いて
Google の事は Google に聞きましょう。
<meta name="robots" content="index,follow" />
HTML
1<meta name="robots" content="index,follow" />
Google はこのタグを認識しません。
インデックスされるのは、何もしなければインデックスされるのが既定動作だからです。
なお、上記ページでGoogleは次のように説明しています。
重要: noindex ディレクティブが有効に機能するようにするために、robots.txt ファイルでページをブロックしないでください。ページが robots.txt ファイルでブロックされると、クローラは noindex ディレクティブを認識しません。そのため、たとえば他のページからリンクされていると、ページは検索結果に引き続き表示される可能性があります。
robots.txt
robots.txt の指示はディレクティブのみ
robots.txt ファイル内の指示は、サイトにアクセスするクローラの動作に対し強制力はなく、サイトにアクセスするクローラへのディレクティブとして機能します。Googlebot などの信頼できるウェブクローラは robots.txt ファイルの指示に従いますが、他のクローラも従うとは限りません。そのため、ウェブクローラから情報を継続して保護するには、サーバー上の非公開ファイルをパスワードで保護する方法など、他のブロック方法を利用することをおすすめします。
信頼できないbotは robots.txt を無視します。
また、botでなく、対人目線で見ても、URLを知られたら誰でもアクセス可能というのは、ブロック手段としては致命的な欠点になります。
Re: hati3693 さん
投稿2018/06/21 11:59
総合スコア18162
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。
0
投稿2018/06/21 11:30
総合スコア3523
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。
2018/06/22 05:13
2018/06/22 05:38
2018/06/22 05:42
2018/06/22 05:48
あなたの回答
tips
太字
斜体
打ち消し線
見出し
引用テキストの挿入
コードの挿入
リンクの挿入
リストの挿入
番号リストの挿入
表の挿入
水平線の挿入
プレビュー
質問の解決につながる回答をしましょう。 サンプルコードなど、より具体的な説明があると質問者の理解の助けになります。 また、読む側のことを考えた、分かりやすい文章を心がけましょう。
バッドをするには、ログインかつ
こちらの条件を満たす必要があります。
2018/06/22 05:16
2018/06/22 05:25
2018/06/22 05:44