CoreDNS实战(十一)-分流与重定向

2023-12-06 07:04

本文主要是介绍CoreDNS实战(十一)-分流与重定向,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

本文主要介绍了目前CoreDNS服务在外部域名递归结果过程中出现的一些问题以及使用dnsredir插件进行分流和alternate插件进行重试优化的操作。

1 自建DNS服务现状

一般来说,无论是bind9、coredns、dnsmasq、pdns哪类dns服务器,我们自建的监听在UDP53端口上的DNS服务在DNS解析功能方面承担着两个角色:分别为权威域名服务器和递归域名服务器。

  • 权威域名服务器主要为我们内部使用的域名提供服务,为了避免和提供给外部用户访问的域名冲突,这类内网域名一般会使用如local域、internal域,或者是和自身业务无关的org域、io域等后缀;
  • 递归域名服务器主要是正常的外部域名解析服务,如163.combaidu.comgoogle.com这一类常用的外网域名等;

2 DNS解析逻辑

针对我们自建的权威域名服务器,解析的结果非常的确定,当服务器中存在这条记录就能正常解析,否则就是异常。但是对于递归域名服务器的工作流程来说,有些特殊的域名解析就会出现问题。

我们以下图为例介绍在递归解析过程中可能会出现的问题:

  • 因为主要是分析到DNS服务器的解析流程,因此这里的第一二步直接跳过;
  • 图中的本地DNS服务器可以视为我们的CoreDNS服务器;
  • 正常情况下,我们的CoreDNS服务器和根域名服务器之间的连接是正常的,也就是说④⑤这两步正常情况下是能顺利返回结果的;
    那这里出现异常的情况主要就是请求了一些非法的不合规域名,比如请求tinychen.comillegal这种奇怪的域名,它的顶级域名是.comillegal,如果这个顶级域名是不存在的,那么DNS解析就会返回异常,无法解析;
  • 正常情况下,⑥⑦这两步是由本地DNS服务器去访问顶级域名服务器的IP来获取对应域名的权威域名服务器,一般常用的顶级域名如.com 、.cn这类顶级域名的服务器IP肯定是能正常连上的,但是一些小众的顶级域名就不一定能正常连接了,这类比较常见的是一些小国家的自有顶级域名,详细列表可以参考维基百科
  • 最后就是权威域名服务器,这里也是最容易出问题的地方;
    正常情况下,本地DNS服务器从顶级域名服务器里面拿到权威域名服务器的IP之后就会去权威域名服务器这里获取到最后的域名解析结果,但是这里容易出现两个问题:
  1. 本地DNS服务器和权威域名服务器之间的连接容易出现问题,权威域名服务器一般是各个域名使用者自己维护或者是使用一些DNS服务商提供的服务器,这些服务器出现无法连接或者是崩溃的概率要远大于前面的根域名服务器和顶级域名服务器
  2. 权威域名服务器返回的结果不一定能够正确的传送到本地DNS服务器中,大部分情况下DNS查询并不是加密的,使用明文的UDP进行查询,是比较容易被中间的运营商进行劫持,这里也是DNS污染常见的操作范围;

还有一种常见的DNS污染手段就是市面上的免费公共DNS服务器提供者针对某个特殊域名的解析进行修改,使得用户在使用这些免费的公共DNS解析时没办法解析到正常的IP从而导致该域名提供的服务异常

总结上面的流程分析,我们自建DNS服务在进行外部域名递归解析的时候就可能会遇到下面的几类域名:

  • 解析正常,一般是国内的主流域名;
  • 因为顶级域名服务器或者权威域名服务器无法正常连接导致无法正常解析,一般为海外域名;
  • 因为DNS污染导致虽然能进行解析,但是解析结果和实际情况大相径庭,这类域名比较复杂,各种情况都有;

3 CoreDNS解析逻辑

得益于CoreDNS丰富多样的插件,我们可以使用插件来对DNS的解析流程进行优化,分流不同的域名到不同的服务器,同时还可以针对不同的返回码进行重试。下面介绍一个对CoreDNS进行优化,加入了DNS解析分流功能和DNS解析失败重试功能来补充各种使用场景的架构。

3.1 插件分析

首先是使用hosts插件,这个插件相当于在CoreDNS上面实现了我们修改服务器/etc/hosts文件的效果,可以用于对一些域名进行简单的劫持,例如一些域名想要拉黑,可以在里面配置解析为127.0.0.1(家庭网络屏蔽广告域名的常用手段);又或者是有部分域名同时有内外网多个入口的,在机房内网DNS解析直接劫持为内网IP,节省外网流量等。需要注意的是hosts插件仅支持A记录的修改,一些复杂的场景如CNAME记录、MX记录、TXT记录等则无能为力了。

接下来就是重头戏dnsredir插件alternate插件了。其中dnsredir插件是github上面开源的一个第三方插件,alternate插件则是CoreDNS官网上的External Plugins,由CoreDNS维护;两者可靠性相对较高,有需求的同学也可以对其二次开发,关于CoreDNS编译外部插件的教程可以查看之前的文章

官方对alternate插件的介绍是一个基于DNS查询返回码RCODE来把DNS查询请求重定向的插件。举个例子,当我们向CoreDNS查询域名解析tinychen.com的时候,CoreDNS将查询转发给114.114.114.114,然后得到了NXDOMAIN的返回码,这时候一般就说明tinychen.com这个域名在114DNS是没有解析结果的,但是我们不死心,使用alternate插件把RCODE是NXDOMAIN的查询再次转发给8.8.8.8,这时候说不定就能得到域名的解析结果。

alternate - allow redirecting queries to an alternate set of upstreams based on RCODE

还是继续上面的场景,假设我们已经知道tinychen.com这个域名在114DNS是没办法查询到正常结果,而在8.8.8.8DNS能正常解析,我们能否直接去8.8.8.8查询呢?

答案是肯定的。这时候就要用到我们的dnsredir插件了。它可以根据我们提供的域名列表,将不同的域名转发到不同的DNS服务器进行查询,从而达到DNS查询解析优化的效果,尤其是对应大部分海外域名解析,有条件的同学可以尝试将其转发到海外DNS节点解析,解析效果应该会有明显的提升。

3.2 解析逻辑分析

alternate插件和dnsredir插件分别从响应码RCODE和域名两个维度对DNS解析进行分流/重定向,再结合CoreDNS本身配置的灵活性,可以有数种组合,这里只是提供一个示范案例作为参考。

注意上图的插件每个的顺序都是可以调整并且不断递归查询,因此理论上可以进行无限的横向和纵向扩展用于满足日后的增长需求。
  • 首先还是针对递归查询的外部DNS域名,这里以.(root):53表示监听在53端口的根域名查询;
  • 进来的第一层匹配就是前面提及的最高优先级全局劫持名单查询,这一层主要是对恶意域名进行屏蔽过滤;
  • 当需要查询的域名不在全局劫持名单中的时候就会触发fallthrough条件,进入到下一层的dnsredir组件进行分流;
  • dnsredir组件的主要功能就是根据我们配置的域名列表来进行转发,这里我们把域名分为三大类,分别进行不同的逻辑处理;
  • 对于列表里面的海外域名,我们将其转发到海外的DNS解析服务器进行解析,这里统称为海外DNS服务器,例如部分有条件的同学可以在海外线路的机房又或者是公有云的海外节点自建DNS服务器;
  • 当然在自建的海外线路节点DNS服务器也是会有可能碰到无法正常解析的,这时候就需要依赖alternate组件将请求二次转发到海外公共DNS服务器,比如一些海外的公共DNS服务器如8.8.8.8和1.1.1.1等;
  • 对于一些需要自己定义的域名,则再维护另外一份自定义域名列表和RFC1035格式的域名解析结果文件;
  • 这时候相当于再单独自建一个.(root)根域名给自定义域名使用,dnsredir组件将这些自定义的域名转发到这个自建的根域进行解析,正常情况下就会直接解析出自己定义的域名结果;
  • 如果自定义的域名列表和解析结果出现了偏差,导致部分域名在分流列表中缺不在解析结果中,会使得查询失败返回NXDOMAIN,这时候就需要依赖alternate组件将请求二次转发到正常的DNS解析流程
  • 最后就是正常的域名解析,优先使用本机的自建递归缓存服务器进行查询,当查询失败的时候可以转去国内的一些公共递归DNS如114或者是自建的海外DNS等进行补充查询

得益于CoreDNS自身的灵活性,上述的全部插件逻辑可以随意进行组合分配递归调整用于适配不同的业务逻辑。

3.3 Q&A

3.3.1 用于给dnsredir组件分流的域名列表格式?

dnsredir组件使用的分流域名格式列表和dnsmasq的格式一致,格式参考如下:
server=/http://a1.mzstatic.com/114.114.114.114
server=/http://a2.mzstatic.com/114.114.114.114
server=/http://a3.mzstatic.com/114.114.114.114
server=/http://a4.mzstatic.com/114.114.114.114
server=/http://a5.mzstatic.com/114.114.114.114
server=/http://adcdownload.apple.com.akadns.net/114.114.114.114
server=/http://adcdownload.apple.com/114.114.114.114
server=/http://appldnld.apple.com/114.114.114.114
server=/http://appldnld.g.aaplimg.com/114.114.114.114
server=/http://appleid.cdn-apple.com/114.114.114.114
server=/http://apps.apple.com/114.114.114.114
server=/http://apps.mzstatic.com/114.114.114.114
server=/http://cdn-cn1.apple-mapkit.com/114.114.114.114
server=/http://cdn-cn2.apple-mapkit.com/114.114.114.114
server=/http://cdn-cn3.apple-mapkit.com/114.114.114.114
server=/http://cdn-cn4.apple-mapkit.com/114.114.114.114
需要注意的是dnsredir组件只会读取上述配置中的域名,而不会读取后面的DNS服务器IP,实际转发的DNS服务器IP在CoreDNS中的配置文件定义;

3.3.2 为什么使用RFC1035格式的文本文件作为自定义域名的配置文件?

CoreDNS本身支持多种外部后端存储方式(mysql、redis、etcd、pdsql等),使用RFC1035格式的文本文件主要是基于性能、稳定性和可维护性考量。

  • CoreDNS会把文本文件的内容全部load到内存中,每次查询都是在内存中查询操作,性能最优,无需额外的网络IO消耗;
  • 无需单独维护额外的数据库和中间件;
  • 排除故障的时候可以直接查看文本文件定位问题;
  • 因为文本文件在每台机器上面都有一份,因此单个CoreDNS实例出现故障不会影响其余的CoreDNS节点;
  • RFC1035格式的文本文件的一个简单示例如下,更具体的操作可以查看bind9的官方文档

这篇关于CoreDNS实战(十一)-分流与重定向的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/460876

相关文章

java中pdf模版填充表单踩坑实战记录(itextPdf、openPdf、pdfbox)

《java中pdf模版填充表单踩坑实战记录(itextPdf、openPdf、pdfbox)》:本文主要介绍java中pdf模版填充表单踩坑的相关资料,OpenPDF、iText、PDFBox是三... 目录准备Pdf模版方法1:itextpdf7填充表单(1)加入依赖(2)代码(3)遇到的问题方法2:pd

PyTorch中的词嵌入层(nn.Embedding)详解与实战应用示例

《PyTorch中的词嵌入层(nn.Embedding)详解与实战应用示例》词嵌入解决NLP维度灾难,捕捉语义关系,PyTorch的nn.Embedding模块提供灵活实现,支持参数配置、预训练及变长... 目录一、词嵌入(Word Embedding)简介为什么需要词嵌入?二、PyTorch中的nn.Em

在IntelliJ IDEA中高效运行与调试Spring Boot项目的实战步骤

《在IntelliJIDEA中高效运行与调试SpringBoot项目的实战步骤》本章详解SpringBoot项目导入IntelliJIDEA的流程,教授运行与调试技巧,包括断点设置与变量查看,奠定... 目录引言:为良驹配上好鞍一、为何选择IntelliJ IDEA?二、实战:导入并运行你的第一个项目步骤1

Spring Boot3.0新特性全面解析与应用实战

《SpringBoot3.0新特性全面解析与应用实战》SpringBoot3.0作为Spring生态系统的一个重要里程碑,带来了众多令人兴奋的新特性和改进,本文将深入解析SpringBoot3.0的... 目录核心变化概览Java版本要求提升迁移至Jakarta EE重要新特性详解1. Native Ima

Spring Boot 与微服务入门实战详细总结

《SpringBoot与微服务入门实战详细总结》本文讲解SpringBoot框架的核心特性如快速构建、自动配置、零XML与微服务架构的定义、演进及优缺点,涵盖开发环境准备和HelloWorld实战... 目录一、Spring Boot 核心概述二、微服务架构详解1. 微服务的定义与演进2. 微服务的优缺点三

SpringBoot集成MyBatis实现SQL拦截器的实战指南

《SpringBoot集成MyBatis实现SQL拦截器的实战指南》这篇文章主要为大家详细介绍了SpringBoot集成MyBatis实现SQL拦截器的相关知识,文中的示例代码讲解详细,有需要的小伙伴... 目录一、为什么需要SQL拦截器?二、MyBATis拦截器基础2.1 核心接口:Interceptor

从入门到进阶讲解Python自动化Playwright实战指南

《从入门到进阶讲解Python自动化Playwright实战指南》Playwright是针对Python语言的纯自动化工具,它可以通过单个API自动执行Chromium,Firefox和WebKit... 目录Playwright 简介核心优势安装步骤观点与案例结合Playwright 核心功能从零开始学习

Java docx4j高效处理Word文档的实战指南

《Javadocx4j高效处理Word文档的实战指南》对于需要在Java应用程序中生成、修改或处理Word文档的开发者来说,docx4j是一个强大而专业的选择,下面我们就来看看docx4j的具体使用... 目录引言一、环境准备与基础配置1.1 Maven依赖配置1.2 初始化测试类二、增强版文档操作示例2.

MySQL 多列 IN 查询之语法、性能与实战技巧(最新整理)

《MySQL多列IN查询之语法、性能与实战技巧(最新整理)》本文详解MySQL多列IN查询,对比传统OR写法,强调其简洁高效,适合批量匹配复合键,通过联合索引、分批次优化提升性能,兼容多种数据库... 目录一、基础语法:多列 IN 的两种写法1. 直接值列表2. 子查询二、对比传统 OR 的写法三、性能分析

Python办公自动化实战之打造智能邮件发送工具

《Python办公自动化实战之打造智能邮件发送工具》在数字化办公场景中,邮件自动化是提升工作效率的关键技能,本文将演示如何使用Python的smtplib和email库构建一个支持图文混排,多附件,多... 目录前言一、基础配置:搭建邮件发送框架1.1 邮箱服务准备1.2 核心库导入1.3 基础发送函数二、