有効期限切れドメインのニッチを検出する方法と1万個のドメインを一晩で分類した方法

有効期限切れドメイン市場は、ウェブサイト考古学と投機的投資が出会う奇妙なコーナーです。毎日、何千ものドメインが有効期限を切れます。所有者が更新を忘れたり、プロジェクトが継続する価値がないと判断したり、単に他のベンチャーに進んだりするためです。これらのドメインは公開プールに戻り、標準価格で誰でも登録できるようになります。これらの有効期限切れドメインの一部が価値があり、時には非常に価値があるようにするのは、彼らが持っている歴史です。5年間人気のあるヘルスブログをホストしていたドメインは、他のヘルスウェブサイトからのバックリンクを蓄積し、検索エンジンで健康ニッチのドメイン権限を構築し、健康ニッチでトピック関連性を確立しました。そのドメインが有効期限を切れて誰かが新しいヘルスウェブサイトを構築するためにそれを登録した場合、新しいサイトは蓄積されたSEO価値の一部を継承します。バックリンクはまだドメインを指しています。ドメイン権限は新しいコンテンツがなければ時間とともに減衰しますが、一晩でゼロにリセットされることはありません。

これは有効期限切れドメイン投資戦略の基礎であり、重要な産業になっています。ドメイン投資家は毎日有効期限切れドメインのリストをスキャンし、強力なバックリンクプロフィール、高いドメイン権限スコア、スパムやペナルティがない歴史を持つ名前を探しています。最高の有効期限切れドメインは、検索エンジンの存在に新しいウェブサイトの頭を得たいビジネスおよびSEOプロフェッショナルに数千ドルで売却できます。しかし、利益のあるドメイン投資を高価な推測から分離する重要な要件があります。有効期限切れドメインは意図された使用のニッチと一致する必要があります。金融ウェブサイトから100個のバックリンクを持つドメインは、ファイナンスブログを構築する誰かにとって金です。料理ウェブサイトを構築する誰かにとっては無価値です。バックリンクは無関係なニッチから来ており、トピック権限はカテゴリを横断して移行しないためです。

有意義な規模で運営しているドメイン投資家にとっての課題は、有効期限切れドメインリストに毎日数千のエントリが含まれており、各ドメインのニッチを手動でチェックすることは物理的に不可能です。ウェイバックマシンにアクセスして各ドメインが何をホストしていたかを確認し、キャッシュされたコンテンツを読み、バックリンク錨テキストを分析し、各ドメインのニッチ決定を行うことに5〜10分かかります。そのペースでは、1日に100個のドメイン処理することでさえ、フルタイムの仕事です。1日のドロップリストでは確実に本当に価値のあるジェムをいくつか見つけるために必要な10000個のドメイン数は、8時間1日を働く1人の人のために約3ヶ月かかります。ドメインチェッカーとそのニッチ検出エンドポイントは、この3ヶ月間の手動プロセスを単一の一晩バッチ実行に折りたたむために構築されました。

ドメインニッチ検出の仕組み

detect-nicheエンドポイントは、ドメイン名とその関連メタデータを分析して、トピックカテゴリに分類します。分類は複数の信号に基づいています。ドメイン名自体は、最初で最も明らかな信号です。「fitness」、「workout」、「gym」などの単語を含むドメインは、その強いニッチの強い語彙指示があります。しかし、ドメイン名は略語、創造的、または完全に抽象的です（「Zapier」や「Shopify」のようなブランド名を考えてください。語彙ニッチ信号を運びません）、名前だけでは信頼できる分類に不十分です。

履歴コンテンツデータは2番目の信号を提供します。ウェイバックマシンと同様のウェブアーカイブは、アクティブな人生の間にドメインがホストした内容のスナップショットを保存します。これらのアーカイブされたページのテキストコンテンツ、ページタイトル、メタ説明、および見出し構造を分析することは、その方法で、ドメイン名が何を示唆するかに関係なく、前のウェブサイトのトピック焦点を高い信頼度で明らかにします。アーカイブされたページが「抵当金利」、「ホームエクイティ」、「リファイナンシングオプション」について議論するドメインは、明らかに個人財務ニッチにあります。この履歴コンテンツ分析は、最も信頼できる分類信号ですが、計算上最も費用がかかるため、他の信号に基づいて初期スクリーニングに合格したドメイン用に予約されています。

バックリンク錨テキスト分析は3番目の信号を提供します。他のウェブサイトがドメインにリンクするときに使用するテキストは、より広いウェブがそのドメインのコンテンツを知覚した方法を反映しています。ドメインへのバックリンクの大多数が「ビーガンレシピ」、「植物ベースの料理」、「乳製品の代替品」に関連する錨テキストを使用する場合、ドメインのニッチはドメイン名自体が何かジェネリックであっても、ビーガン専門化を持つ食べ物です。この信号は、サブニッチ分類を検出するのに特に価値があり、一般的な食品ドメインとビーガン固有の食品ドメイン、または一般的なテクノロジードメインとサイバーセキュリティ固有のドメイン間を区別します。

これらの信号の組み合わせは、信頼スコアを持つニッチ分類を生成します。3つの信号すべてが同意するドメインは、信頼度の高いレーティングを受け取ります。名前が1つのニッチを示唆するが、コンテンツとバックリンクが別のドメインを示唆するドメインは、矛盾する信号に関する注記を含む信頼度が低いレーティングを受け取ります。不十分なデータを持つドメイン（アーカイブされたコンテンツなし、バックリンク数、一般的な名前）は、利用可能な信号に基づいて分類を受け取り、低信頼度の推定値として明確にマークされています。このニュアンスのあるアプローチは、高信頼ニッチ分類は投資含意が推測とは非常に異なるため、システムを投資決定に実際に有用にするものです。

1晩で1万個のドメイン

10000個のドメインの一晩バッチ処理は、アプローチ全体を検証した運用テストでした。ドメインは毎日のドロップリストから来ました。これは削除サイクルを完了し、登録可能になろうとしているドメインの公開フィードです。目標は、ニッチ検出エンドポイントを通じてすべてのドメインを処理し、各ドメインをトピックカテゴリに分類し、信頼スコアを割り当て、最も有望な買収ターゲットをハイライトした並べ替え出力を生成することでした。「有望な」の基準は具体的でした：金融、健康、テクノロジー、または不動産に分類されたドメイン（SEO用の最も高い商業価値を持つ4つのニッチ）、高信頼スコアおよびクリーンドメイン履歴。

バッチ処理は真夜中に開始されたスケジュール済みジョブとして実行されました。各ドメインは、レート制限内にとどまるために要求の間に短い遅延を伴うAPIに送信されました。APIは各ドメインを処理し、利用可能な信号を分析し、分類応答を返しました。結果は、ドメイン名、検出されたニッチ、信頼スコア、およびサポート証拠（どの信号が分類に寄与したか）を保存したデータベースに集計されました。午前6時までに、すべての10000個のドメインが処理され、朝食の時間にレビューできる結果が準備されました。

10000個のドメインのうち、約3200個は高信頼ニッチ分類を受け取りました。残りの6800は、分類するには余りにも一般的であるか、不十分な履歴データがあるか、または信頼できる決定を防ぐ矛盾する信号を生成しました。3200の分類ドメインの中で、ニッチ全体の分布は、インターネット上のウェブサイトの分布をほぼ反映しています。テクノロジーとコンピューティングが最大のカテゴリであり、その後に事業および財務、健康とウェルネス、エンターテイメント、教育、およびその他すべてが続きました。4つのターゲットニッチ（金融、健康、テクノロジー、不動産）は約1100個のドメインに対応していました。これは、最も有望な候補の人間のレビューのための管理可能な数でした。

それらの1100個のドメイン内で、ドメインの年齢、バックリンク量、およびドメイン権限推定に基づいた二次フィルターは、リストを潜在的に価値のある買収のすべての基準を満たす約40個のドメインに削減しました。10000個のドメインのうち40個のドメイン。この0.4%のヒット率は、有効期限切れドメイン投資の課題（有効期限切れドメインの大多数に有意義な価値がない）と、自動フィルタリングの必要性（10000ドメインの干し草の中でそれらの40本の針を見つけることは手動で数週間かかります）を示しています。これらの40個のドメインのいくつかは、標準登録価格で買収され、その後、ユーザー終了に大きな倍数で売却されました。バッチ全体のAPI処理の総コストは、単一ドメインの登録料未満でした。

ドメイン投資を超えて、ニッチ検出の他の用途

ドメイン投資はバッチニッチ検出の最も劇的なユースケースですが、唯一のものではありません。SEOプロフェッショナルはニッチ分類を使用して、潜在的なバックリンクソースを評価します。保険ニッチのクライアント用にリンクを構築する場合、見込みリスト内のどのドメインが実際に保険に関連していますか（対して、無関係なニッチの表面的に類似したドメイン）はターゲット関連するサイト。ドメインニッチAPIは、この分類を規模で提供し、手動研究タスクを自動化された事前認定ステップに変えます。

ブランド保護チームは、ニッチ分類を使用して、ブランド名に似た有効期限切れドメインが競合他社または悪い行為者によって登録されているかどうかを監視します。金融サービスブランドに似ていると思われるドメインが登録され、「金融」として分類された場合、ブランド保護チームはそれがフィッシング、アフィリエイト詐欺、または競合他社のリダイレクトに使用されているかどうかを調査できます。ニッチ分類は、単純なドメイン可用性チェックが提供できないコンテキストを追加します。「このドメインが登録された」と「このドメインが登録され、私たちの業界で使用されている」の違いは、通常の観察とアクション可能なアラートの違いです。

市場調査者は、ドメインニッチ分類を使用して、業界トレンドを研究します。特定のセクターで新たに登録され、最近有効期限が切れたドメインのボリュームとニッチ分布は、市場活動の先を見指す指標として機能します。「暗号通貨」または「DeFi」に分類される新しいドメイン登録の急増は、これらのセクターへの関心の上昇と相関しています。1年または2年後の有効期限の対応する急増は、避けられない決算と相関しています。ドメイン登録データは市場分析用のノイズ信号ですが、それは独特の早期信号です。人々はプロジェクトの計画のためにドメインを登録します。つまり、ドメイン活動は数ヶ月または数年でも実際の市場活動を先行します。

ドメイン分類での規模の経済

有効期限切れドメイン投資の経済は、常に大量を処理できるオペレータに有利です。本当に価値のある有効期限切れドメインのヒット率は低く、通常はニッチと基準に応じて0.1％から1％の間です。つまり、1日に1つの価値のあるドメインを見つけるには、投資家は100から1000の候補の間を評価する必要があります。1日に10個の価値のあるドメインを見つけるには、評価ボリュームは数千に達する必要があります。手動評価速度（1ドメインあたり5〜10分）では、これらのボリュームの下位端でさえ非実用的です。利益の制約は、良いドメインの可用性ではありません。それは評価の速度です。

ニッチ検出を備えたドメインチェッカーAPIは、この制約を削除します。10000個のドメインの処理は1つのドメインの登録価格未満で費用がかかり、数時間で完了します。出力は、人間のレビューワークロードを10000個のドメインから数十個の高潜在的候補に削減する、事前フィルター、ニッチ分類リストです。ドメイン投資家がテーブルにもたらす人間の専門知識（ブランド化性を評価し、バックリンク品質を評価し、リセール価値を推定）は、自動スクリーニングに既に合格したドメインにのみ適用されます。つまり、その専門知識が数千の無関係なエントリー全体で希釈されるのではなく、効率的に使用されているということです。

10000ドメインの一晩バッチの場合、総投資は約30分のセットアップ時間（バッチスクリプト作成）、処理中のゼロアクティブ時間（スクリプトが自律的に実行される）、および朝の約2時間のレビュー時間は、40人の候補を短いリストにした40人の候補を評価することでした。その2.5時間の総投資は、複数の利益のある買収を製造しました。同じ評価を手動で行うことは、数百時間の退屈で反復的な仕事を必要とし、人間は一貫して数週間と数ヶ月間維持することはできません。手動と自動評価の違いは速度だけではありません。それは持続性です。一度機能する手動プロセスは、日常的な反復の下で折りたたまれます。一度機能する自動プロセスは、毎日ゼロの追加の努力で毎日機能し、日々のボリュームはバッチパラメータを調整することで10000から50000から100000にスケーリングできます。追加のスタッフを雇うことではなく。