​ -------------------------------------------------------------------------------------------------------------------------------------如果demo目录下有两个文件 main.go 和mian2.go的话，main.go 和main2.go文件中的package

前情回顾 前文我们完成了如下目标1 项目架构整体编写2 使框架支持热更新 本节目标 在前文的框架基础上，我们1 将之前实现的日志监控功能整合到框架中。2 一个日志对应一个监控协程，当配置热更新后根据新配置动态关闭和启动协程。3 编写测试代码，模拟向文件中不断写入日志，并备份日志，观察监控功能是否健壮。 增加协程监控日志文件 我们将之前实现的日志监控功能整合到现有框架

并发语言俨然是应大规模应用架构的需要而提出，有其现实所需。前后了解了Scala和Golang，深深体会到现代并发语言与旧有的Java、C++等语言在风格及理念上的巨大差异。本文主要针对Scala和Golang这两个我喜爱的并发语言在并发特性上的不同实现，做个比较和阐述，以进一步加深理解。 一. Scala与Golang的并发实现思路Scala语言并发设计采用Actor模型

日志统计系统的整体思路就是监控各个文件夹下的日志，实时获取日志写入内容并写入kafka队列，写入kafka队列可以在高并发时排队，而且达到了逻辑解耦合的目的。然后从kafka队列中读出数据，根据实际需求显示网页上或者控制台等。 前情提要 上一节我们完成了如下目标1 配置kafka，并启动消息队列。2 编写代码向kafka录入消息，并且从kafka读取消息。 本节目标 1

前情回顾 前文我们完成了kafka消费逻辑实现，并将消息放入elasticsearch，然后通过kibana可视化工具查看我们的日志。 本节目标 前文只是完成了kafka消息消费以及放入elastic，这次将项目完善，使其支持热更新，就是当config.yaml中监控的日志改变，或者etcd数据有改变时，动态启动协程监控新增日志，关闭取消的日志监控协程。 新增变量控制协程自启动

前情回顾 前文我们完成了日志管理系统后台开发。 本节目标 这次为日志管理搭建一个web管理平台，可以通过web端录入项目和配置信息，以及项目对应的日志路径和采集信息，并且写入etcd，这样通过之前编写的日志采集系统可以根据etcd采集对应的日志。 选择beego作为web后台开发 web端采用beego框架进行开发，beego是一个采用mvc三层架构设计的web框架

在大数据时代，具备高并发，高可用，理解微服务系统设计的人员需求很大，如果你想从事后台开发，在JD的描述中最常见的要求就是有所谓的“高并发”系统开发经验。但我发现在市面上并没有直接针对“高并发”，“高可用”的教程，你搜到的资料往往都是只言片语，要不就是阐述那些令人摸不着头脑的理论。但是技术的掌握必须从实践中来，我找了很久发现很少有指导人动手实践基于微服务的高并发系统开发

1 概述 日志是记录系统中各种问题信息的关键，也是一种常见的海量数据。做好日志可以有效的解决排查问题效率低、业务异常无法及时发现等等问题。 斗鱼的业务是经典的高并发场景：我们会由于某些业务场景，用户请求量会十倍秒级突增。为了针对这种场景，提高服务性能，我们不仅要优化业务逻辑，同时还要提升日志等基础组件的性能。以下是我们斗鱼go的日志类库架构图： 从架构图的日志组件中我们列举了三个重要组成部分

前文中已经完成了文件的监控，kafka信息读写，今天主要完成配置文件的读写以及热更新。并且规划一下系统的整体结构，然后将之前的功能串起来形成一套完整的日志采集系统。 前情提要 上一节我们完成了如下目标1 完成kafka消息读写2 借助tailf实现文件监控，并模拟测试实时写文件以及文件备份时功能无误。 本节目标 1 编写系统结构，在主函数中加载配置2 管理配置文件，实现热更新 实现文件管理

Gin框架是Golang的一种Web开发框架，许多项目都采用了该框架。当我们的项目发展到一定规模时，如何提高我们的服务可用性和性能就成了一个重要的话题。这时，反向代理和负载均衡就变得非常重要。本文将讨论Gin框架中如何使用反向代理和负载均衡来提高我们的服务可用性和性能。反向代理反向代理是指我们的服务被放在一个代理服务器的后面，客户端请求先到达代理服务器