公開レッスンプレビュー
URL フロンティア管理、ポライトネス ポリシー、SimHash によるコンテンツの重複排除、一貫性のあるハッシュによる分散クロールをカバーする分散 Web クローラーを設計します。
このレッスンを終えると、次を理解できます:
Web クローラーは、体系的にインターネットを参照して、Web ページをダウンロードし、インデックスを付けます。これはあらゆる検索エンジンの基礎であり、検索エンジンを設計することで、分散システム、グラフ トラバーサル、実際の Web の混乱の処理について学びます。
Web クローラーを設計する - Google がインターネットにインデックスを付ける方法 の一部です AI Craft（制作）
Web クローラーを設計する - Google がインターネットにインデックスを付ける方法はAI Craft（制作）の一部です。アップグレードすると、完全なレッスン、クイズ、進捗トラッキング、すべてのアカデミーを利用できます。
7日間無料。いつでも理由を問わず解約できます。