Ahrefsは、検索マーケティングの専門家のために大量のデータを収集、処理、保存しています。
検索エンジンと同様に、24時間365日、ウェブ全体をクロールし、生きたウェブサイトに関する情報(互いにどのようにリンクしているか、検索結果でどのようなキーワードでランクされているかなど)をペタバイト(1PB = 1000TB)規模で保存します。
また、バックエンドのインフラも自慢の一つです。既存のソリューションでは、私たちが運用するデータ量に対応できなかったため、ソフトウェアインフラの大半は社内で構築しました。
AhrefsBotはCloudflare Radarの「検索エンジン最適化」カテゴリで最もアクティブなウェブクローラーです。また、世界で3番目にアクティブなウェブクローラーでもあります。
一分一秒、私たちは這い上がる
があるのですが
ページ
キーバリューデータベースの行数
Rank | Bot | Owner | Category |
---|---|---|---|
1 | GoogleBot | Search Engine Crawler | |
2 | BingBot | Microsoft | Search Engine Crawler |
3 | DataDog Synthetic Bot | DataDog | Monitoring & Analytics |
4 | AhrefsBot | Ahrefs | Search Engine Optimization |
5 | Qualys | Qualys | Search Engine Crawler |
6 | YandexBot | Yandex | Search Engine Crawler |
7 | PetalBot | Huawei | Search Engine Crawler |
8 | Google AdsBot | SAdvertising & Marketing | |
9 | Google Image Proxy | Page Preview | |
10 | Google Images | Search Engine Crawler |
Botをリクエスト数でランキング。2023年4月時点のデータ提供
私たちのコンテンツインデックスは、基本的にコンテンツ検索エンジンであるコンテンツエクスプローラーの動力源となっています。
コンテンツインデックス総サイズ
14.7B
ページ
このツールは、見込み客がオンラインで何を探しているかを調べるためのキーワードリサーチツール、キーワードエクスプローラーを駆動します。
キーワードインデックス総サイズ
16.2B
キーワード
検索クエリと、そのクエリが上位のページに送る検索トラフィックの量のデータベースです。サイトエクスプローラーの検索トラフィックの推定に役立ちます。
世界最大のライブバックリンクインデックスで、15~30分ごとに新鮮なデータで更新されます。このインデックスは、Site Explorerのバックリンクデータを強化し、当社独自の指標を算出するために使用されています: Ahrefs Rank、Domain Rating、URL Ratingの算出に使用されます。
外部バックリンク履歴
35.0T
レコード