CDN

简而言之：CDN 是一个由边缘服务器组成的全球网络。它将内容缓存到靠近用户的位置，以降低延迟。CDN 还会在请求到达源站之前执行地理限制和机器人过滤。

内容分发网络（CDN）是一组按地理位置分布的服务器。CDN 节点会缓存静态资源，例如图片、CSS、JavaScript 和视频。当用户发起请求时，CDN 会将其路由到最近的边缘节点。这可以缩短往返时间，并加快页面交付速度。CDN 位于源服务器和最终用户之间。

CDN 的工作原理

1. 缓存：CDN 将内容从源站复制到全球各地的边缘节点。
2. 路由：DNS 会将每个请求定向到延迟最低的边缘节点。
3. 缓存命中：边缘节点会直接向用户提供最新的缓存副本。
4. 缓存未命中：如果内容未被缓存，边缘节点会从源站获取内容，缓存结果，然后再提供给用户。
5. 缓存失效：内容会在过期时刷新，或在源站推送更新时刷新。

CDN 的优势

1. 更低延迟：边缘服务器在地理位置上更接近用户，加载时间会显著缩短。
2. 更高可用性：流量会分散到多个节点。单点故障不会导致整个网站宕机。
3. 降低源站负载：CDN 会吸收大部分请求，源站只需处理缓存未命中的请求。
4. DDoS 防护：CDN 会吸收并过滤大规模攻击流量。
5. 地理限制：CDN 会根据请求者的地理位置阻止或限制访问。

CDN 与网页数据采集

许多网站会将机器人检测委托给其 CDN 边缘层。被标记为非人类的请求会在到达源站之前收到 403 或 503 响应。仅 Cloudflare 就以这种方式保护了 Web 流量中相当大的份额。住宅代理会通过真实用户 IP 路由请求，从而绕过与数据中心 IP 范围相关的 CDN 地理封锁。Bright Data 的网络解锁器可自动处理 CDN 级别的访问控制和机器人挑战。

主要 CDN 提供商

1. Cloudflare：Web 上部署最广泛的 CDN 和机器人防护层。
2. Akamai：按基础设施规模衡量，是最大的 CDN 网络之一。
3. AWS CloudFront：Amazon 的 CDN，与 AWS 生态系统深度集成。
4. Fastly：以实时缓存清除和边缘计算能力而闻名。
5. Google Cloud CDN：构建于 Google 的全球网络骨干之上。