百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 编程网 > 正文

「框架」uber/zap 效率为什么碾压其他日志文件?

yuyutoo 2024-10-20 13:12 4 浏览 0 评论


Zap

uber 公司开源的一套日志系统, 很多成熟的框架(K8s、Caddy、Etcd等)的日志库都是使用它,为什么这么多框架使用它?


从官方给出的性能指标看, 记录一条10个字段的日志,benchmarks 最好的是 Zap,当然,自己给的测评指标,肯定是要突出自己的优势。



指标上看,Zap内存管理的比较好, 5 allocs/op 这个应该是使用了内存池,减少内存分配的消耗和GC的压力。


func getCheckedEntry() *CheckedEntry {
  ce := _cePool.Get().(*CheckedEntry)
  ce.reset()
  return ce
}


每条日志是一个的Entry,可以不断给Entry添加字段,按照buffer的形式,而且buffer也是从内存池拿的。


func (c *ioCore) Write(ent Entry, fields []Field) error {
  buf, err := c.enc.EncodeEntry(ent, fields)
  if err != nil {
    return err
  }
  _, err = c.out.Write(buf.Bytes())
  buf.Free()
  if err != nil {
    return err
  }
  if ent.Level > ErrorLevel {
    // Since we may be crashing the program, sync the output. Ignore Sync
    // errors, pending a clean solution to issue #370.
    c.Sync()
  }
  return nil
}
// Get retrieves a Buffer from the pool, creating one if necessary.
func (p Pool) Get() *Buffer {
  buf := p.p.Get().(*Buffer)
  buf.Reset()
  buf.pool = p
  return buf
}


与zap(suggared)比较

zap用法


logger, _ := zap.NewProduction()
defer logger.Sync() // flushes buffer, if any
sugar := logger.Sugar()
sugar.Infow("failed to fetch URL",
  // Structured context as loosely typed key-value pairs.
  "url", url,
  "attempt", 3,
  "backoff", time.Second,
)
sugar.Infof("Failed to fetch URL: %s", url)


zap(suggared)用法


logger, _ := zap.NewProduction()
defer logger.Sync()
logger.Info("failed to fetch URL",
  // Structured context as strongly typed Field values.
  zap.String("url", url),
  zap.Int("attempt", 3),
  zap.Duration("backoff", time.Second),
)


zap(suggared)用法确实很方便,只管传值就行,不用声明类型;

zap 比zap(suggared)快20%, 看了源码发现主要是多了一个sweetenFields()的方法


func (s *SugaredLogger) log(lvl zapcore.Level, template string, fmtArgs []interface{}, context []interface{}) {
  // If logging at this level is completely disabled, skip the overhead of
  // string formatting.
  if lvl < DPanicLevel && !s.base.Core().Enabled(lvl) {
    return
  }


  msg := getMessage(template, fmtArgs)
  if ce := s.base.Check(lvl, msg); ce != nil {
    ce.Write(s.sweetenFields(context)...)
  }
}


这个方法是将interface{} 类型转为 Field, 多分配了一些对象。




总结:

  1. 使用了很多内存池,减少内存的分配和降低GC的压力
  2. 不使用反射,显示声明类型;也可以不显示声明(suggared),但是牺牲一些性能
  3. 减少使用interface,减少对interface的拆箱,和内存分配。

相关推荐

微软Win10/Win11版Copilot上线:支持OpenAI o3推理模型

IT之家4月3日消息,科技媒体WindowsLatest昨日(4月2日)发布博文,报道称Windows10、Windows11新版Copilot应用已摘掉Beta帽...

WinForm 双屏幕应用开发:原理、实现与优化

在当今的软件开发领域,多屏幕显示技术的应用越来越广泛。对于WinForm应用程序来说,能够支持双屏幕显示不仅可以提升用户体验,还能满足一些特定场景下的业务需求,比如在演示、监控或者多任务处理等场景...

推荐一个使用 C# 开发的 Windows10 磁贴美化小工具

...

OpenJDK 8 安装(openjdk 8 windows)

通常OpenJDK8和11都能互相编译和通用。我们建议使用11,但是如果你使用JDK8的话也是没有问题的。建议配置使用OpenJDK,不建议使用OracleJDK,主要是因为版...

基于 Linux 快速部署 OpenConnect VPN 服务(ocserv 实战指南)

一、前言在如今远程办公和内网穿透需求日益增长的背景下,搭建一套安全、稳定、高效的VPN系统显得尤为重要。OpenConnectServer(ocserv)是一个开源、高性能的VPN服务端软件...

巧妙设置让Edge浏览器更好用(edge怎么设置好用)

虽然现在新版本的Edge浏览器已经推出,但是毕竟还处于测试的状态中。而Win10系统里面自带的老版Edge浏览器,却越来越不被人重视。其实我们只需要根据实际情况对老版本的Edge浏览器进行一些简单的设...

WPF做一个漂亮的登录界面(wpf页面设计)

...

微软开源博客工具Open Live Writer更新:多项Bug修复

OpenLiveWriter前身是WindowsLiveWriter,是微软WindowsLive系列软件之一,曾经是博主们非常喜爱的一款所见即所得博文编辑工具,支持离线保存,还支持图像编辑...

基于OpenVINO的在线设计和虚拟试穿 | OPENAIGC大赛企业组优秀作品

在第二届拯救者杯OPENAIGC开发者大赛中,涌现出一批技术突出、创意卓越的作品。为了让这些优秀项目被更多人看到,我们特意开设了优秀作品报道专栏,旨在展示其独特之处和开发者的精彩故事。...

C#开源免费的Windows右键菜单管理工具

...

Windows10或11中隐藏的功能,用它再也不用担心电脑中病毒!

...

Python open函数详解(python open函数源码)

演示环境,操作系统:Win1021H2(64bit);Python解释器:3.8.10。open是Python的一个内置函数,一般用于本地文件的读写操作。用法如下。my_file=open(fi...

Windows 11 安装 Docker Desktop(Windows 11 安装助手 Windows 易升 关系)

...

Windows 11 新版发布:屏幕亮度自适应控制,小组件界面重新设计!

...

世界上最好用的Linux发行版之一,OpenSUSE安装及简单体验

背景之前无意在论坛里看到openSUSE的Linux发行版,被称为世界上最好用的Linux发行版之一(阔怕),一直想体验一下,于是这期做一个安装和简单体验教程吧。...

取消回复欢迎 发表评论: