Googleがウェブサイト管理に欠かせない「robots.txt」のインターネット標準化を推進 - GIGAZINE

2019/07/02 55 users robots.txt GIGAZINE Bing クローラー

Googleやbingといった検索エンジンがさまざまなサイトの情報を検索できるのは、クローラーと呼ばれるボットが自動的にサイトを巡回するおかげ。このクローラーによるサイト巡回をサイトの管理者側で制御するために必要なのが「robots.txt」と呼ばれるテキストファイルです。20年以上使われながらも正式に標準化されてい... 続きを読む

コレに決定！　ニシノ式ネット生活快適レシピ - Webブラウザ「Firefox」を拡張してさらに使いやすく！

2007/02/09 273 users Firefox アドオン Fire コレ 筆者

無料のWebブラウザ「Firefox」には、機能を拡張できる便利なアドオンが数多く公開されている。これらのアドオンを使うことで、サイト巡回がかなり快適になるのだ。また、アドオンを選んで好みのWebブラウザに仕上げられるというのも面白い。というわけで今回は、筆者が「これは必須！」、「とっても便利！」と感じたFirefoxのアドオンを紹介していこう。 ■ これだけは入れておきたい！　オススメのFire... 続きを読む