实现node日志管理

sevi_stuo 发布于2019-08-23 18:06 / 375人阅读

摘要：比如权限验证，比如异常处理，比如日志管理。但突然有一天在线上访问自己的项目，发现页面报错了，想知道为什么报错了，发现竟然没有什么很好的方法，如果我没有通过一个东西去记录的话，所以日志管理这个时候就显得尤为重要了。

第一次写node项目，之前除了前端的脚手架构建接触过一些简单的，所以总是碰到很多坑。比如权限验证，比如异常处理，比如日志管理。
在看log4js使用方法的时候突然想到自己就可以实现简单的业务，不需要借助组件，虽然简单但是实现了挺开心的。

为什么需要日志管理

自己的node项目写了一段时间了，但一直没有加上日志管理的功能，因为觉得没必要，很多时候都是在自己电脑上面调试的。
但突然有一天在线上访问自己的项目，发现页面报错了，想知道为什么报错了，发现竟然没有什么很好的方法，如果我没有通过一个东西去记录的话，所以日志管理这个时候就显得尤为重要了。

日志的产生过程

页面出现错误

根据错误类型创建日志文件

写入错误信息

创建日志方法的实现

先判断要写入的路径是否存在，不存在则创建

判断日志要创建在的文件夹存不存在，不存在则创建

判断当前要创建的日志存不存在，存在继续写入，不存在则创建并写入

fs.stat

检查路径是否存在

fs.mkdir

创建目录的方法

fs.readFile

读取文件的方法

fs.writeFile

写入文件的方法

完成的写入日志函数

我的业务是定义了两个类型，错误和sql，然后传入日志内容

/**
   * 写入日志
   * @param {String} type // 日志类型 err 错误日志 sql sql日志
   * @param {String} content 
   */
writeLog (content, type = "err") {
    // 创建不存在的文件夹
    await this.dirExists(`log/file/${type}`)
    // 获取到文件files
    fs.readFile(`log/file/${type}/${utils.switchTime(new Date(), "YYYY-MM-DD")}.log`, (err, data) => {
      if (err) {
        console.log(err)
      }
      // 写入文件
      fs.writeFile(`log/file/${type}/${utils.switchTime(new Date(), "YYYY-MM-DD")}.log`, `${data || ""}
${content}`, async (err) => {
        if (err) {
          console.log(err)
        }
      })
    })
  }

使用 在sql执行函数上使用

function query (sql) {
  // 写入sql
  NodeLog.writeLog(sql, "sql")
  return new Promise((resolve, reject) => {
    pool.getConnection((err, conn) => {
      if (err) {
        // 如果是连接断开，自动重新连接
        if (err.code === "PROTOCOL_CONNECTION_LOST") {
          setTimeout(query(), 2000);
          reject("断开重连");
        } else {
          console.error(err.stack || err);
          reject(err);
        }
      } else {
        // 得到结果
        conn.query(sql, (queryErr, result) => {
          if (queryErr) {
            reject(queryErr);
          } else {
            resolve(result);
          }
          // 释放连接
          conn.release();
        })
      }
    })
  })
}

在异常处理函数中使用

  handleException (req, res, e) {
    // 写入日志
    NodeLog.writeLog(e)
    
    res.json({
      code: e.errno || 20501,
      success: false,
      content: e,
      message: "服务器内部错误"
    })
  }

最后

日志完整代码

node项目
对应的前端项目

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/104684.html

LC3视角：Kubernetes下日志采集、存储与处理技术实践

摘要：下需要为每个单独进行采集配置采集日志目录，采集规则，存储目标等，不易维护。日志服务的日志架构实践我们提出基于阿里云日志服务的日志处理架构，用以补充社区的方案，来尝试解决场景下日志处理的一些细节体验问题。摘要：在Kubernetes服务化、日志处理实时化以及日志集中式存储趋势下，Kubernetes日志处理上也遇到的新挑战，包括：容器动态采集、大流量性能瓶颈、日志路由管理等问题。本文...

Guakin_Huang 2019-06-24 18:06 评论0 收藏0
Node.js + ELK 日志规范

摘要：日志规范一般前端开发同学，对日志其实不太敏感，毕竟前端大多数情况下，不太关心日志。本文主要梳理了目前我们团队在开发中日志方面存在的问题，以及通过统一日志规范，希望达到什么样的效果。日志格式字段日志格式统一采用，便于解析处理。nodejs 日志规范一般前端开发同学，对日志其实不太敏感，毕竟前端大多数情况下，不太关心日志。即使有，也可能调用一些第三方的统计，比如百度统计或者别的等。在 Node...

tuomao 2019-05-23 13:53 评论0 收藏0
schedule_task_monitor 前端批跑模块介绍

摘要：任务退出码任务正常退出批跑模块会接受到为，因为异常退出会接收到。主要注意的检查项为连接未关闭等。每次任务退出后，批跑系统会检测其是否为空，不为空则移动到目录目录下，并以版本号为文件夹存储，以方便备份查看。背景随着node的出现与发展，前端承担了越来越多的职责。前端也有越来越多的场景需要使用批跑脚本利用爬虫或者接口定时同步数据到DB 线上配置文件、数据文件定时批跑生成并发布到线...

高胜山 2019-08-22 16:15 评论0 收藏0
serverless在微店node领域的探索应用

摘要：参与者流量来自于内部系统和外部流量，其中大部分来自于外部流量。水平扩容服务的水平扩容重要性不言而喻。背景目前微店中台团队为了满足公司大部分产品、运营以及部分后端开发人员的尝鲜和试错的需求，提供了一套基于图形化搭建的服务端接口交付方案，利用该方案及提供的系统可生成一副包含运行时环境定义可立即运行的工程代码，最后，通过某种serverless平台实现生成后代码的部署、CI、运行、反...

mikyou 2019-08-26 14:04 评论0 收藏0
数据同步——otter

摘要：阿里开源项目，数据同步的解决方案。基于数据库增量日志解析，支持数据库进行同步在最新的已经支持以及阿里云提供的数据库使用童鞋的福音。参考文献：Otter-入门篇1(阿里开源项目Otter介绍) 一、背景本人是一名应届毕业生，，还在努力挖坑。最近两个月被外派到其他公司做一个升级系统，做到现在一个多月。学到的东西很多，想总结的东西也很多，可是。。。时间是让人猝不及防的东西。好吧，现在先来...

baiy 2019-08-16 10:40 评论0 收藏0