サーバー ディレクトリをパスワードで保護して URL をブロックする

Google 検索の検索結果に表示したくない機密情報や非公開のコンテンツがある場合、非公開の URL の表示をブロックする最も簡単で最も効果的な方法は、サイト サーバー上のパスワードで保護されたディレクトリにその URL を保存することです。Googlebot などのとするウェブクローラはすべて、パスワードで保護されたディレクトリ内のコンテンツにアクセスできません。

Apache Web Server を使用している場合は、.htaccess ファイルを編集することで、サーバー上のディレクトリをパスワードで保護できます。ウェブ上には、この操作を簡単に行うためのツールが多数あります。

Apache HTTP Server（アパッチ エイチティーティーピー サーバ）は、世界中でもっとも多く使われているWebサーバソフトウェアであり、大規模な商用サイトから自宅サーバまで幅広く利用されている。単にApacheとも称されている。
開発は、Apacheソフトウェア財団のApache HTTPサーバプロジェクトで行われている。Apache Licenseの下でソースコードが公開および配布されており、代表的なオープンソースソフトウェアの一つである(Wikipedia)