一句话承诺:用时序图和对照表,快速理清缓存命中、回源与Key组成。 Cache-Key 组成表 字段 是否可用 说明 路径 必选 /img.png 查询串 可选 ? 回源减少频次需合理的 max-age 与 ETag/Last-Modified 配合。 常见坑与替代法 坑:Cache-Key含Cookie导致命中率下降。替代:剔除无关头。 坑:过期时间过短。
回源机群进程信息: 1.master回源机:lysnc rsync nginx 2.slave回源机:nginx 3.master和slave配置ssh免密,以便lsync同步数据 数据流信息: 1.业务发布时通过 rsync 将文件同步到 回源master。 2.master通过lsync将文件同步于回源机群。 3.cdn通过访问回源机群nginx 拉取文件。 迁移前逻辑架构如图: ? 迁移步骤 1.新机器中选一台作为master其余为slave。 2.在老的master上添加新回源机群指向,开始同步数据。 同步中逻辑架构如图: ? 3.待数据同步完成后,新回源master 增加新回源slave集群指向保持数据同步。 4.业务svr修改指向为新回源master,cdn修改指向为新回源机群。 5.下架老回源机群。 迁移后逻辑架构如图: ?
1 通过cos 控制台配置对应的回源域名 [2mvd6gfju7.png? q-url-param-list=&q-signature=d9c1ce7b477813db7942546797ff6e303c9d6016] 2 当访问本域名资源网站访问不存在的时候,即北京桶中资源不在,即通过触发回源条件
回源配置中有个【回源超时配置】,可修改项有【TCP连接时间】和【回源加载时间】 TCP连接时间:CDN与源站服务器建立连接(TCP三次握手)的时间,如果在指定时间内CDN还无法正常连接到源站服务器,则CDN 1、CDN节点有异常,但如果也有其他CDN节点与源站服务器建立连接失败,那可能是源站服务器的问题 2、源站服务器配置了防火墙、安全狗,安全组,将CDN节点给拦截了 3、源站服务器性能超载,带宽爆满 4、 源站服务器针对单个客户端IP做了访问次数限制 回源加载时间:CDN与源站服务器建立连接成功后,如果在指定时间内源站服务器还未将数据传给CDN,则CDN主动断开 举个栗子:CDN与源站服务器建立连接之后 ,CDN跟源站服务器说,我要index.html文件你赶紧发给我,如果在10秒之内你还不发给我,那我就走了 有两种情况 1、源站服务器接受了CDN的HTTP请求,但是未传数据给CDN,10秒之后CDN CDN的HTTP请求,但源站服务器拒绝从8011端口传数据出去给CDN,那CDN也就没办法收到源站服务器发送出去的数据了,10秒之后CDN主动断开连接 image.png 可以通过iptables模拟这种场景
背景: 安全性考虑(假装safe)源站做了访问策略,限制了访问ip,接入cdn后回源的都是cdn节点信息,那么如何获取呢??? ---- 找到了一篇接口文章(https://cloud.tencent.com/document/product/228/7364)用于查询 CDN 所有回源层 IP 列表。 替换其中的API密钥即可,密钥获取:https://console.cloud.tencent.com/cam/capi 输出参数: image.png 请求示例: image.png 得到最终所有回源 IP,添加到源站白名单即可。
加速区域选择【全球】,源站只使用国内云服务器,测试结论如下 1、当用户访问到国内节点时,CDN使用国内的回源节点进行回源,最终回源到国内云服务器(源站) image.png 国内用户:129.211.208.231 国内CDN节点:220.194.88.144 完整访问路径:国内用户 -> 国内CDN节点 -> 国内云服务器 2、当用户访问到海外节点时,CDN使用海外的回源节点进行回源,最终回源到国内云服务器( 源站),这里有个问题,使用海外CDN节点回源到国内云服务器存在跨境,有可能无法正常回源 image.png 海外用户:43.129.95.138 海外CDN节点:119.28.165.12 完整访问路径 :海外用户 -> 海外CDN节点 -> 国内云服务器 注意:海外CDN节点 -> 国内云服务器,这段路径存在跨境,可能影响正常回源 解决方案 1、使用2个源站,1个国内云服务器和1个海外云服务器,国内 CDN节点回源到国内云服务器,海外CDN节点回源到海外云服务器 推荐架构: 1)国内用户 -> 国内CDN节点 -> 国内云服务器 2)海外用户 -> 海外CDN节点 -> 海外云服务器
互联网上存在各种劫持,防不胜防,建议网站采用HTTPS(同时配置HTTP强制跳转HTTPS) 强烈推荐CDN配置HTTPS证书,开启强制跳转,回源协议选择HTTPS,不推荐选择HTTP和协议跟随 image.png image.png 测试验证CDN回源是否采用HTTPS协议 在源站服务器配置HTTPS站点(使用自签的HTTPS证书) image.png image.png 源站服务器NGINX日志记录CDN回源请求使用的是 HTTPS协议 image.png 最终结论是CDN回源确实采用HTTPS协议,同时也推荐使用HTTPS协议,因为CDN回源也是通过公网的,也会存在劫持的情况 细心的朋友会发现源站服务器使用了自签的HTTPS 证书,这类证书是不被信任的,但是CDN还是能够正常请求源站服务器获取到资源,这说明CDN回源是不校验证书的,源站服务器使用自签HTTPS证书或者网上申请的HTTPS证书都是可以的
点击面板上面的服务器设置 找到 赠送域名那里 输入你的面板域名即可 上面的CNAME记录可以不用填写 详见图第二块箭头 输入完成后不要提交
一、回源设置功能简介 1.简介 可以通过对象存储控制台,对存储桶设置回源规则,当请求的对象在存储桶中不存在或者需要对特定的请求进行重定向时,可以通过回源规则从 COS 访问到对应的数据。 二、离线回源与同步回源架构示意图 1.离线回源示意图 1.png 2.同步回源示意图 2.png 三、控制台配置指南 1.操作步骤 1)登录 对象存储桶控制台,选择左侧菜单栏【存储桶列表】,进入存储桶列表页面 单击需要设置回源的存储桶,进入存储桶详情页。 2)单击左侧【基础配置】>【回源设置】配置项,然后单击【添加回源规则】。 回源条件:可按需求选择触发回源的条件,触发回源需同时满足配置的所有回源条件。 HTTP 状态码:当前仅支持条件为 HTTP 状态码404时触发回源,该项为必选且不可取消。 UC截图20210310121935.png 四、离线回源与同步回源的实践操作 1.离线回源案例 1)首先在 COS 控制台添加回源规则,相关配置如下;其中,回源地址填写源站的外网地址 111.230.
如果存放在CDN上的资源过期了,CDN并不会主动回源,而是等用户过来访问资源才会触发回源。 那么CDN回源时都做了哪些行为呢?下面来测试揭晓。 首先将txt文件后缀的缓存时间改成30秒,这样txt文件在CDN上只缓存30秒就会过期,30秒过后用户再次访问就会触发回源。 image.png 在源站服务器上用tcpdump抓包(内容如下图),资源过期后触发回源,CDN过来的请求会携带If-Modified-Since,该请求头的作用是判断源站服务器的txt文件是否有更新。 image.png 如果源站服务器的txt文件的Last-Modified发生了变化,CDN则要求源站提供最新的txt文件,然后CDN将最新的txt文件返回给用户,并同时更新节点上的txt文件。 所以呢,Last-Modified头部还是很重要的,建议源站服务器务必返回该头部给CDN,如果源站服务器不返回Last-Modified 头部,CDN可能无法正常更新节点上的txt文件,从而导致用户会一直访问到旧的资源
zone.huoxian.cn/d/392 线上平台生成短链接: 上面两种方式都有其弊端,前者需要直接搭建服务器环境,成本较高,后者在线平台生成的短链接一般都有时间限制,在研究对象存储时,笔者发现利用对象存储的静态网站托管及回源规则进行重定向也是一种可行的办法 0x02 静态网站托管及回源配置 静态网站托管功能允许用户将静态网站托管到OSS的存储空间(Bucket),并使用Bucket的访问域名访问这个网站。 Bucket配置静态网站托管后,当客户端向OSS请求的数据不存在时,可通过设置回源规则确保其仍然可以获取正确的数据。 进行如下配置: 在左侧导航栏,选择基础设置 > 镜像回源。 创建如下回源规则,回源地址即需要重定向的内网地址(如果显示固定地址不能为空,可抓包修改或者输入空格即可创建成功)。
一、回源设置功能简介 1.简介 可以通过 对象存储 控制台,对存储桶设置回源规则,当请求的对象在存储桶中不存在或者需要对特定的请求进行重定向时,可以通过回源规则从 COS 访问到对应的数据。 二、离线回源与同步回源架构示意图 1.离线回源示意图 2.同步回源示意图 三、控制台配置指南 1.操作步骤 1)登录 对象存储桶控制台,选择左侧菜单栏【存储桶列表】,进入存储桶列表页面。 回源条件:可按需求选择触发回源的条件,触发回源需同时满足配置的所有回源条件。 HTTP 状态码:当前仅支持条件为 HTTP 状态码404时触发回源,该项为必选且不可取消。 四、离线回源与同步回源的实践操作 1.离线回源案例 1)首先在 COS 控制台添加回源规则,相关配置如下;其中,回源地址填写源站的外网地址 111.230.xxx.xxx ,同步回源选择 “关闭” ,其它的设置可以根据实际情况需要进行配置 2.同步回源案例 1)首先在 COS 控制台添加回源规则,相关配置如下;其中,回源地址填写源站的外网地址 111.230.xxx.xxx,同步回源选择 “开启” ,其它的设置可以根据实际情况需要进行配置
想办法吧,把SaaS回源用上,优选ip加上,这样能保证速度能快上一点。 SaaS介绍 CloudFlare SAAS,简单来说是为了给自助建站类似的网站,而提供的用户自定义域名接入的功能。 (Origin Server) 当用户请求特定的主机名(如客户自己的域名)时,请求会被转发到SaaS提供商的原始服务器(或称为回源服务器)。 操作 注册CloudFlare 这个就不用说了,注册好CloudFlare,把回源域名b.com通过NS解析到CloudFlare。开启! 解析回源域名 进入到b.com的管理界面-> DNS -> 记录 解析你的回源域名b.comA记录或AAAA记录到你的真实网站服务器IP,这里可以选择子域名saas.b.com。 添加回源 进入到b.com的管理界面-> SSL/TLS -> 自定义主机名 添加回源,回源地址为刚刚解析的b.com或saas.b.com。
1、外贸网络专线的构建之道智选网络服务提供商: 在选择网络专线时,企业需谨慎挑选经验丰富、基础设施可靠的服务商。 量身定制业务需求: 根据企业的业务需求,选择最适合的网络专线方案,包括线路速度、国际容量、服务等级等。 因此,在外贸网络专线建设中,SD-WAN技术无疑是一个富有活力的选择。通云MPLS: 作为传统专线技术,MPLS能够提供卓越网络性能和安全性。 3、企业驾驭外贸网络专线的技巧和益处提升网络连接品质: 外贸网络专线可提供更为稳定、迅猛的网络连接,有效助力企业提升网站访问速度和用户体验。 4、外贸网络专线的产品高速不摇摆: 外贸网络专线提供高速稳定的网络连接,完美满足企业对网络带宽和延迟的需求。贴心服务定制: 服务商可以根据企业需求,为其度身定制网络专线服务,满足各类企业的独特需求。
搭建软件仓库回源代理拾遗 这次机器升级带来的服务大迁移过程中,我发现之前设定给 Npm 仓库、Docker 仓库专用的代理服务失效了。 然后打开接口管理界面,将唯一的接口的网络协议设置为 DHCP客户端,这里需要注意,当你点击保存后,新版的控制台会先进行尝试配置,这个配置是肯定会失败的,所以会提示你是否要进行回滚操作还是继续进行强制应用
需求背景: 客户的源站希望控制访问的渠道, 控制源站请求量,往往希望要求索要回源IP,然后在客户侧对回源IP进行加白放行。 放行CDN回源流量可以选用如下2个方案: 解决方案: 方案1:通过api获取回源ip接口获取ip列表进行定期加白,此种方案受CDN扩容,替换等变更等影响,会造成同步更新不即时,也只推荐短期使用。 API见:https://cloud.tencent.com/document/product/228/50513 方案2:通过特定的UA加白,CDN回源会默认携带X-Tencent-Ua:Qcloud 回源,也可以根据客户需求携带自定义header回源。 = "Qcloud") { return 403; } 注意:在加白后需观察确认所有域名是否已经正常无回源失败,可在控制台上查看回源效果
Tiktok网络专线技术:SD-WAN技术编1、接口通吃,负载均衡站在分公司的角度来看,SD-WAN不再强制只允许使用MPLS,而是允许MPLS、xSDL、PON、4G LTE,甚至5G等多种连接类型。 专线特点:1、稳定性好:直播对于网络要求比较高,需要保持稳定性。使用Tiktok直播专线来开播,可实现国内外高速、稳定、可靠的数据传输,避免网络延迟、丢包、卡顿的影响,保证直播流畅。 2、高画质:tiktok直播专线数据传输稳定,画面高清、流畅、清晰,满足用户对画质的需求,拒绝画质模糊,一般5M的网络专线可以支持1080P画质直播。 3、低延迟:tiktok直播专线可以保证直播低延迟,主播与观众可以进行实时互动,让用户体验真实直观的直播效果。 而使用专线可以避免与其他应用和用户共享带宽,减少了受到外部网络状况影响的可能性,提高了TikTok直播的稳定性。
背景 客户通过两条物理专线打通本地IDC和云上资源,由于其中一条专线带宽容量满足不了客户后续业务发展需求,需要进行升级替换。 问题说明 启用客户割接当晚将需要升级的专线通道流量切换至另外一条,观察无异常后开始进行通道升级。升级完成后,将流量加载至新通道过程中发现路由条目缺失,导致流量负载异常。 原因分析 1、核查客户割接前后专线通道路由条目,发现缺失明细路由条目 [变更前路由条目] [变更后路由条目] 2、核查专线网关正常学习到VPC明细路由条目 3、核查和客户对接设备,发现路由表缺失明细路由条目
传统网络专线曾是企业组网的黄金标准,而近年来兴起的SD-WAN专线收到了企业的欢迎,面对这两种技术该如何选择呢?两者都有哪些优缺点呢? 下面为大家详细介绍:一、SD-WAN专线和传统网络专线介绍1、传统网络专线传统网络专线,以MPLS专线为代表,可以理解为一条为企业独家建设的专用高速公路。 专线为企业提供独享带宽,不受其他用户网络流量的影响,保证了数据传输的可靠性和稳定性。2、SD-WAN专线SD-WAN(软件定义广域网)专线则是一种全新的思路。 成本结构传统专线以高成本著称。企业需铺设专属物理线路,运营商资源租用费用昂贵,跨国线路年租金可达百万级别。专线按带宽和地理距离计费,跨区域部署成本极高。SD-WAN专线则通过整合低成本链路实现经济性。 三、分别适合哪些场景1、传统专线的适用场景传统专线适合对网络质量要求极高的场景:金融核心交易系统:每一笔交易数据的准确及时传输都至关重要,专线能提供极致的稳定性。
Tiktok网络专线技术方案(技术篇) 随着TikTok电商的不断发展,越来越多的商家开始关注如何通过TikTok直播实现销售增长。在这个过程中,选择合适的网络线路至关重要。