Lamiyi

Limit Point Softwareは、Mac OS X向けBlue Crab 4.9.18のリリースを発表しました。Blue
Crabでは、HTML、PDF、グラフィック、ビデオ、ファイルアーカイブなど、あらゆるコンテンツをダウンロードできるほか、フィルタリング機能を使って特定の種類のファイルのみをダウンロードすることも可能です。例えば、Blue Crabが検出したJPEG画像のみ、あるいはPDFのみを保存するといった設定も可能です。

主な機能:
* 強力な URL 抽出アルゴリズムにより、このタイプの他の製品と比較して、非常に完全なダウンロードが実現します。
* URL の再リンクを介してオフラインで閲覧するために、またはハード ドライブ上に仮想コピーを作成するために、つまり Web サイトをそのままバックアップするために、Web サイトをダウンロードできます。
* HTTP および HTTPS プロトコルとサーバー領域の両方をサポートします。詳細な Grabber ウィンドウには、サーバーの HTTP ヘッダー応答フィールドが表示されます
。 * オプションで、自分の Web ブラウザーまたは Blue Crabs 独自の Web ウィンドウを使用して、クロールされた Web ページを表示します
。 * クロール対象を最初のドメインだけに制限することも、プログラムがオフサイト URL に「迷い込む」ことを許可することもできます。
* Blue Crab は、パスと検索引数を含む「動的な」URL を再マップして、結果として得られるディスク ファイルをオフラインでナビゲートできるようにすることができます。
* イメージ URL を JPEG ファイル (または Quicktime でサポートされているその他のグラフィック ファイル タイプ) に変換して、自分で 1 回のスクリーンショットを撮るだけでは不可能な、Web ページの完全な画像を作成します。
* Blue Crab は、他のアプリケーションから利用できるサービス メニュー項目として URL イメージング機能を提供します。 *
URL は、ファイルまたはクリップボードにイメージ化できます。
* 組み込みのディレクトリ検索では、見つかったファイルが階層リストとして表示され、エントリはダブルクリック
可能です。 * 「バッチ ウィンドウ」を使用すると、独自のファイル リストをダウンロードできます。 URL をバッチ ウィンドウにドラッグ アンド ドロップするか、HTML ファイルまたはテキスト ファイルからインポートするだけです。
* 「画像のみ」モードで取得すると、画像ファイルのみがダウンロードされます。オプションで結果を「フラット化」する (つまり、すべての画像を 1 つのフォルダにまとめる) ことができます。
* 再利用可能な構成設定により、取得、保存、またはクロールの対象を制御できます。
* サイズ、日付、ファイルの種類、またはコンテンツでフィルタリングできます。
* ファイル名、拡張子、またはパスでフィルタリングできます
。 * 頻繁にクロールする Web サイトを保存するためのブックマーク ウィンドウが
あります。 * フォームの送信をサポートしているため、ログイン ページからクロールを開始できます。
* より正確なダウンロードのために Cookie をサポートしています。
* URL の階層表示で構成されるサイト マップを生成します。このマップは、オプションで拡張子でフィルタリングできます。
* 電子メール アドレスを検索します
。 * カスタマイズ可能なユーザー エージェント (スプーフィング) により、プラットフォーム固有の Web サイトをダウンロードできます。
* 長時間のクロール中に Blue Crab の進行状況に関する電子メール通知をオプションで受信できます。
* プログラムがバックグラウンドで実行されている場合、ドックのバッジにより視覚的なフィードバックまたは進行状況が表示されます。

Blue Crabは、単一のURLから開始し、見つかったテキストページ（HTML、CSSなど）上のリンクをたどってサイトを巡回します。Blue Crabは開始URLのドメインから外れることはないため、Web全体をダウンロードすることはありません。さらに、URLの一部に一致する文字列を指定することで、Blue Crabの対象を特定のWebサイトのサブセットに制限することもできます。また、各グラバーウィンドウには便利な「フォルダ内に保存」オプションがあり、開始URLと同じパスで始まるURLのみをクロール対象とすることができます。

Blue Crabには「Media Grabber」という特別な機能があり、ウェブサイト上のグラフィック、動画、PDFだけを簡単にダウンロードできます。画像を検索すると、ダウンロード中にミニスライドショーを表示できます。また、ダウンロードディレクトリを「フラット化」するオプション（ダウンロードしたすべての画像を1つのフォルダにまとめる）と、サーバー上のフォルダ構造を維持するオプション（ウェブサイト全体をオフラインで閲覧するためにダウンロードする場合と同様）も用意されています。

Blue Crabは、ウェブサイトをクロールするための2種類の「グラバー」を備えています。1つ目はBlue Crabの初期のグラバータイプであったため「クラシック」と呼ばれ、Mac OSが提供するURLダウンロードのオリジナルメソッドを使用します。クラシックグラバーは、非常に詳細な進行状況統計情報、特にサーバーのHTTPレスポンスヘッダーをログ形式で表示します（サーバータイプなどの情報を提供します）。

代替の「クイック」グラバーは新しいタイプで、「1ページダウンロード」グラバーと「メディア」グラバーのベースとなっています。「クイック」という名称は、このグラバーが新しいMac OSテクノロジーを採用し、クラシックバージョンほど詳細な進捗状況の統計情報を提供しないことに由来しています。ベンチマークテストでは、最大20%高速化できます。また、特定のウェブサイトでは、あるタイプのグラバーが他のタイプよりも優れた結果をもたらす場合があります。

ウェブサイトをクロールする代わりに、独立したURLのコレクションをダウンロードしたい場合もあります。例えば、ウェブを閲覧中に、例えば研究プロジェクトに関連するPDFや画像を見つけたとします。バッチダウンローダーを使えば、URLをバッチダウンロードウィンドウにドラッグするだけで、まとめてダウンロードできます。完了したら、「開始」ボタンをクリックするだけで、一括ダウンロードが開始されます。

最後に、Blue Crab はサーバーに優しいという点です。一度に処理する URL は 1 つだけで、事前に設定した時間間隔でリソースを取得するように設定できます。このようなプログラムがウェブサイトのコンテンツをすべてダウンロードすることでウェブサイトに与える負荷を考えると、長い時間をかけて少しずつダウンロードするのが妥当でしょう。（ウェブログを見たことがある人なら、Google のようなロボットが非常に断続的にダウンロードしていることに気付くでしょう。）

ブルークラブの様々な特徴を簡単にご紹介するミニツアーをご用意しております。ツアーにご参加ご希望の方は、ウェブサイトをご覧ください。

価格と提供時期：
Blue Crabはわずか25米ドルで提供され、最初の10日間は全機能を試用できます。Blue Crabは、割引価格で様々なバンドル製品の一部としてもご利用いただけます。例えば、Blue Crabは、一括メール送信ツールのMailingsとパーソナル検索エンジンのBoolean Searchとバンドルされています。

続きを読む