程序员 Firefox 微软 Windows Python php mysql google nginx shell Android 云计算 开源 linux Ubuntu java wordpress 编程 apache centos

增加請求錯誤監控、前端負載均衡以、請求宕機切換以及叠代問題修復

距離上個叠代過了很長時間,中間經歷了很多事情,也在每個空余時間構思了這個叠代的東西以及下個叠代要做的東西。時間周期稍微長了,望見諒。

而且,至今這個開源庫的start也已經到了165個了,會支持關註和研究的。

首先解決了上個叠代遇到的問題進行完善和修復:

1. 上個叠代做ajax timeout設置的時候,手抖將timeout不小心設置成timeoutEvent,這期做了修復

2. 解決全局配置中配置額外參數,批量檢查時會參數錯誤問題。

1. 增加瀏覽器發送請求的錯誤監控和搜集:

應用場景:

前端開發依賴的東西比較多,比如宿主環境(瀏覽器)、以及數據接口(自己服務器或者第三方Api等等),上個叠代進行了瀏覽器錯誤搜集,可以分析用戶在不同環境下宿主的使用率和差異以及問題。但是對於用戶的數據請求一直沒有做監控,因為用戶在不同的場景、網絡狀況下乃至在開發或者發布中將接口地址寫錯了,導致出現問題。

全局配置:

errStatus: {
  isOpenErr: true,    // 是否开启错误搜集
  errURL: 'http://localhost:8072',    // 错误搜集地址
},

设计代码:

//监控ajax请求的错误日志
uploadAjaxError: function (obj) {
  // 过滤错误接口
  if (initParam.errStatus.isOpenErr) {
    if (obj.errUrl !== initParam.errStatus.errURL) {
      tempObj.post(initParam.errStatus.errURL, obj)
    }
  }
  // 记录错误信息,以便策略做判断
  if (selfData.errAjax[obj.errUrl] === undefined) {
    selfData.errAjax[obj.errUrl] = 1
  } else {
    selfData.errAjax[obj.errUrl] += 1
  }

  // 判断是否开启服务切换,以及验证策略切换
  if (initParam.serviceSwitching.isOpen){
    // 验证策略
    selfData.isNeedSwitching = initParam.serviceSwitching.strategies(selfData.errAjax)
  }

}

覆盖面以及数据:

请求的错误搜集,将覆盖4xx、5xx、0、onerror以及timeout状态

ps:在浏览器api中,只读属性 XMLHttpRequest.status 返回了XMLHttpRequest 响应中的数字状态码。status 的值是一个无符号短整型。在请求完成前,status的值为0。值得注意的是,如果 XMLHttpRequest 出错,浏览器返回的 status 也为0。

链接:XMLHttpRequest.status

数据上传格式:

/*
    * 请求错误搜集
    *   type:错误类型
    *   errInfo:错误的请求参数
    *   errLine:请求状态
    *   Browser:宿主环境(浏览器)
    */ 
  tool.uploadAjaxError({
      type: 'request',    
      errInfo: JSON.stringify(ajaxSetting.data),
      errLine: xhr.status,
      Browser: navigator.userAgent
  })

测试结果:

a. onerror错误:

1onerror错误信息

b. 4XX错误、5XX错误、0错误

14XX、5XX、0错误

c. timeout错误

1timeout错误


2. 前端负载均衡(将请求均衡打到不同的服务器上)

应用场景:

现在很多公司更多使用ngx做负载均衡,使用node第一层hold住所有流量,然后通过ngx进行分发到不同的服务器上做负载,避免在一台服务器上读写造成资源竞争等等,结构如下图:

1

但是,如果在超大流量的一种状况下,前端作为请求的发出方,完全有能力在发出阶段就将请求打到不同的负载服务器上,然后再通过ngx再进行二次负载均衡,结构如下如:

1

全局配置:

// 负载均衡配置
loadBalancing: {
  isOpen: false,   // 是否开启负载
  cluster: ['http://localhost:8076','http://localhost:8099']  // 配置地址
},

代码实现:

/*
 * 判断是否为其他域的请求
 *
 * 改方法中处理负载均衡方案
 *    1. 对于前后端分离,直接请求域名的方案  支持
 *    2. 对于直接请求本服务器的请求,暂时不做处理,让ngx做负载均衡  不支持
 *
 *
 */
checkRealUrl: function (param, that) {
  var temp;
  if (/http:\/\/|https:\/\//.test(param.url)) {
    temp = param.url;
    // 针对请求,负载均衡到配置域名  PS:负载均衡优先级 > 宕机切换优先级
    if (param.errStatus.errURL !== temp) { // 错误搜集接口都不走
      if (param.loadBalancing.isOpen) {  // 负载打开肯定走负载
        temp = param.url.replace(/^(http:\/\/|https:\/\/)/, '')
          .replace(/^.*?\//, param.loadBalancing.cluster[tool.random(param.loadBalancing.cluster.length - 1, 0)] + '/$`')
      } else {
        // 如果负载没开,宕机切换打开,则走介个
        if (param.serviceSwitching.isOpen && selfData.isNeedSwitching) {
          temp = param.url.replace(/^(http:\/\/|https:\/\/)/, '')
            .replace(/^.*?\//, param.serviceSwitching.backupUrl + '/$`')
        }
      }
    }
  } else {
    temp = param.baseURL + param.url
    if (param.errStatus.errURL !== temp) {
      if (param.loadBalancing.isOpen) {
        temp = param.loadBalancing.cluster[tool.random(param.loadBalancing.cluster.length - 1, 0)] + param.baseURL + param.url
      } else {
        // 如果负载没开,宕机切换打开,宕机策略成功则走介个
        if (param.serviceSwitching.isOpen && selfData.isNeedSwitching) {
          temp = param.serviceSwitching.backupUrl + param.baseURL + param.url
        }
      }
    }
  }
  that.currentUrl = temp
  return temp;
}

随机函数校验:

因为前端需要通过一个伪随机数随机获取一个数值,然后通过这个数值去取负载配置的域名,为了保证随机打点的均衡性,这里将测试在指数级增长下随机打点5次的状况

随机函数测试代码:

// 伪随机数函数
random(max, min) {
    return Math.floor(Math.random() * (max - min + 1) + min);
},

案例:

a. 随机5个,10次

1

a. 随机5个,100次

1

a. 随机5个,1000次

1

a. 随机5个,10000次

1

a. 随机5个,100000次

1

结果:在指数级增长的过程中,打点越来越均衡,相对伪随机数的分布取值也越来越均衡

负载均衡测试结果:

1111


2. 宕机切换(支持策略)

应用场景:

在日常用户使用请求接口的时候,用户在点击一个按钮的时候,如果一次接口请求失败,在人性角度去看,用户肯定会再一次去点击触发请求,多次按了都没效果,才会确认这个功能是没用的。如果,在这个时候,这个场景下,用一个正确的策略在用户点击时候,如果本地请求失败,支持切换备用域名,这样可以有效的挽回流失用户。

全局配置:

// 宕机切换
serviceSwitching:{
  isOpen: false,    // 是否开启
  // 宕机策略(data为记录的错误请求以及数量,如果达到策略返回true,否则false)
  strategies:function (data) {
    let num = 0
      for (var key in data){
        num = data[key]
      }
      if (num === 5){
         return true
      }else{
         return false
      }
     },
  backupUrl:'http://localhost:8033'     // 备用域名
},

代码实现:

同负载均衡的那一大堆代码,可以向上看。

测试案例(在策略中我绑定了如果错误连续积累5次之后将切换备用接口):

1


总结:这一期的迭代需求中已经将ajax所能涉及的应用场景全部挖掘的快消耗殆尽了,如果还有什么使用场景,可以去github提个issues。

延伸阅读

    评论