Hi，大家好！我是GO首席软件工程师Rob Pike说：我之所以被开发，是因为过去10多年间软件开发的难度令人沮丧。你所不知的，GO Go语言是谷歌发布的第二款开源编程语言。专门针对多处理器系统应用程序的编程进行了优化，使用Go编译的程序可以媲美C或C++代码的速度，而且更加安全、支持并行进程。Go的目标是希望提升现有编程语言对程序库等依赖性(dependency)的管理，这些软件元素会被应用程序反复调用。由于存在并行编程模式，因此也被设计用来解决多处理器的任务。我是GO，我够红 目前，已经有很多公司开始使用Go语言开发自己的服务，甚至完全转向Go开发，也诞生了很多基于Go的服务和应用，比如Dokcer、k8s等，现在我们看下，有哪些大公司在用Go语言了。Google对Go寄予厚望。旗下Ap...阅读全文
Golang开发环境搭建 Golang 入门教程 开发环境搭建 介绍 Go语言是谷歌推出的一种全新的编程语言， 可以在不损失应用程序性能的情况下降低代码的复杂性。 谷歌首席软件工程师罗布派克(Rob Pike)说： 我们之所以开发Go， 是因为过去1 0多年间软件开发的难 度令人沮丧。 谷歌资深软件工程师罗布·派克(Rob Pike)表示， “Go让我体验到了从未有过的开发效率。 ”派克表示， 今天的C++或C一样， Go是一种系统语言。 他解释道， “使用它可以进行快速开发， 同时它还是一个真 正的编译语言， 我们之所以现在将其开源， 原因是我们认为它已经非常有用和强大。 百度百科 维基百科 golang官网 安装 Windows 官方说明 http://golang.org/doc/in...阅读全文
为你的 API 提供一个文档比你想象中更加有用，即使你没有公开你的 API ，为你的前端或者移动团队提供一个文档会比你提供截图/片段或使用 Postman/Insomnia （带有同步的高级版本）等付费产品更容易。借助 SwaggerUI ，您可以自动获得所有 API 的设计良好的文档。当切换到 Go 时，由于缺少文档/教程，我在配置它的时候出现了一些问题，所以我决定写一个。  示例程序:[链接](https://github.com/ribice/golang-swa...阅读全文
简介 Cobra既是一个用来创建强大的现代CLI命令行的golang库，也是一个生成程序应用和命令行文件的程序。下面是Cobra使用的一个演示： Cobra提供的功能 简易的子命令行模式，如 app server， app fetch等等 完全兼容posix命令行模式 嵌套子命令subcommand 支持全局，局部，串联flags 使用Cobra很容易的生成应用程序和命令，使用cobra create appname和cobra add cmdname 如果命令输入错误，将提供智能建议，如 app srver，将提示srver没有，是否是app server 自动生成commands和flags的帮助信息 自动生成详细的help信息，如app help 自动识别-h，--help帮助flag...阅读全文
使用consul实现分布式服务注册和发现 七 06 bigwhite技术志 Airbnb, cluster, consul, docker, etcd, Go, Golang, haproxy, hashicorp, json, raft, SmartStack, ZooKeeper, 分布式系统, 强一致性, 服务发现, 服务注册, 选主 No Comments Consul是HashiCorp公司推出的开源工具，用于实现分布式系统的服务发现与配置。与其他分布式服务注册与发现的方案，比如 Airbnb的SmartStack等相比，Consul的方案更“一站式”，内置了服务注册与发现框 架、分布一致性协议实现、健康检查、Key/Value存储、多数据中心方案，不再需要依赖其他工具（比如Zoo...阅读全文
MQTT（Message Queuing Telemetry Transport，消息队列遥测传输协议），是一种基于发布/订阅（publish/subscribe）模式的“轻量级”通讯协议，该协议构建于TCP/IP协议上，由IBM在1999年发布。MQTT最大优点在于，可以以极少的代码和有限的带宽，为连接远程设备提供实时可靠的消息服务。作为一种低开销、低带宽占用的即时通讯协议，使其在物联网、小型设备、移动应用等方面有较广泛的应用MQTT是一个基于客户端-服务器的消息发布/订阅传输协议。MQTT协议是轻量、简单、开放和易于实现的，这些特点使它适用范围非常广泛。在很多情况下，包括受限的环境中，如：机器与机器（M2M）通信和物联网（IoT）。其在，通过卫星链路通信传感器、偶尔拨号的医疗设备、智能家...阅读全文
该文翻译自https://medium.com/i-can-haz-downtime/dep-101-c85e8ab6ed45#.hbngswi0e我很高兴在过去几个月和几个其他gopher开发的一个原型依赖管理工具，名为dep。dep是去年开始由Peter Bourgon组织的项目的一部分。由于我参与开发了一个“godep”，Go的OG依赖管理工具（继承自Keith Rarick），因此加入了dep项目的团队。除了我自己和Peter，团队的其他成员是Jessie Frazelle，Andrew Gerrand和Sam Boyer。 Andrew是Google Go team的一员。 Jessie在Google工作，并参与过大型Go项目，如Docker和Kubernetes。 Sam维护gp...阅读全文
golang的分布式framework横空出世了，各种酷，不用再羡慕erlang的分布式编程了。 http://www.gocircuit.org/ 神级应用 ，已经在Tumblr经过检验。 项目源码：https://code.google.com/p/gocircuit...阅读全文
# pholcus [](https://godoc.org/github.com/henrylee2cn/pholcus) [](https://github.com/henrylee2cn/pholcus/releases) Pholcus（幽灵蛛）是一款纯Go语言编写的高并发、分布式、重量级爬虫软件，支持单机、服务端、客户端三种运行模式，拥有Web、GUI、命令行三种操作界面；规则简单灵活、批...阅读全文
## 简介 Asgard是设计用于综合解决常驻进程应用、计划任务、定时任务的分布式作业管理系统。 ## 架构设计  - Asgard系统由web节点、master节点、agent节点组成。 - web节点主要功能包括实例管理、分组管理、作业配置、作业运行状态控制、作业运行状态查看、日志查询 - master节点负责agent节点的状态监测，同时接收并转存agent节点上报的运行时数据 - agent节点接收web节点的指令在相应的服务器中运作相关作业 - master节点和agent节点之间通...阅读全文
监测服务级别的指标能让团队成员更清晰的看到你的程序表现如何，你的程序如何被使用，并且可以帮助定位潜在的性能瓶颈。 [Prometheus](https://prometheus.io/) 是一个开源的监测解决方案，原生的服务发现支持让它成为动态环境下进行服务监测的一个完美选择。Prometheus 支持从 [AWS, Kubernetes, Consul 等](https://prometheus.io/docs/prometheus/latest/configuration/configuration/#configuration-file) 拉取服务 ! 当使用 Prometheus 生成服务级别的指标时，有两个典型的方法：内嵌地运行在一个服务里并在 HTTP 服务器上暴露一个 `/me...阅读全文
在实际的项目中发现大家的目录结构都比较凌乱，基本每个人都有每个人的风格，一个项目在不断地变大，一些新的文件或目录又不断地被添加进来，从这里面去找到自己需要的信息的成本越来越高，一个统一的通用的目录结构非常有必要。 以下内容来自于github上的这个项目（https://github.com/golang-sta...） /cmd main函数文件（比如 /cmd/myapp.go）目录，这个目录下面，每个文件在编译之后都会生成一个可执行的文件。 不要把很多的代码放到这个目录下面，这里面的代码尽可能简单。 /internal 应用程序的封装的代码，某个应用私有的代码放到 /internal/myapp/ 目录下，多个应用通用的公共的代码，放到 /internal/common 之类的目录。 /...阅读全文
无论是c语言还是golang语言或是其他语言，启动应用程序时都可以带一些参数，然后系统根据传入的参数进行特点的工作。如：./main -b /home/backupdir -d true 那么如何更好的解析这些参数呢？前两周自己做项目时是通过 range os.Args 来解析这些参数。今天看到了 flag.String 这个方法，感觉之前做的好傻，觉得更应该用golang自带的flag.String来解析参数。 1 package main 2 3 import ( 4 "flag" 5 "fmt" 6 ) 7 8 func main() { 9 backup_dir := flag.String("b", "/home/default_dir", "backup path") 10 de...阅读全文
作者：承诺一时的美丽链接：https://www.jianshu.com/u/6719426bf97e來源：简书音频和音乐用于操纵音频的库。flac - Native Go FLAC解码器。flac - Native Go FLAC解码器。gaad - Native Go AAC比特流解析器。go-sox - 用于go的libsox绑定。go_mediainfo - 用于go的libmediainfo绑定。gosamplerate - 用于go的libsamplerate绑定。id3v2 - Go的快速稳定的ID3解析和编写库。malgo - 迷你音频库。minimp3 - 轻量级MP3解码器库。mix - 用于音乐应用的基于序列的Go-native音频混音器。mp3 - Native Go...阅读全文
腾讯大佬：分享百亿级请求高可用Redis分布式集群实践 一、Redis有哪些常用的应用场景 腾讯大佬：分享百亿级请求高可用Redis分布式集群实践 二、Redis选型思考 时延 时延=后端发起请求db（用户态拷贝请求到内核态）+ 网络时延 + 数据库寻址和读取 如果想要降低时延，只能减少请求数（合并多个后端请求）和减少数据库寻址和读取得时间。从降低时延的角度，基于单线程和内存的redis，每秒10万次得读写性能肯定远远胜过磁盘读写性能。 数据规模 以redis一组K-V为例（”hello” -> “world”），一个简单的set命令最终会产生4个消耗内存的结构。 腾讯大佬：分享百亿级请求高可用Redis分布式集群实践 关于Redis数据存储的细节，又要涉及到内存分配器（如jemalloc）...阅读全文
Go语言是谷歌2009正式推出的一种全新的编程语言，可以在不损失应用程序性能的情况下降低代码的复杂性。 到这里 https://code.google.com/p/go/downloads/list 选择你需要的版本，安装非常简单，如下： 1 2 3 wget https://go.googlecode.com/files/go1.1.1.linux-386.tar.gz tar -C /usr/local -xzf go1.1.1.linux-386.tar.gz vim /etc/profile #打开/etc/profile在最后添加下面两行 export GOROOT=/usr/local/go export PATH=$GOROOT/bin:$PATH 1 2 3 4 source...阅读全文
导读：即使2020开局有一些变化 ，但请保持精进。是的，Web开发人员需要在不断发展的环境中成长，需要适应技术的变化，跟得上和学得进去新技术。软件开发行业，其实与其它行业一样，紧跟最新出现的重要趋势和技术，避免学习不成熟或未就绪的技术也很重要。在这里，我们总结一份清单，列出2020年以及之后主导的技术趋势，供各位参考。1、人工智能 根据Gartner预测，到2022年，人工智能市场规模将达到3.9亿美元，许多公司已经将AI纳入其数字化战略中，目前亦没有任何迹象表明它会放缓。结合目前冠状肺炎的情势，我们可以创建一个移动医疗应用，给病人提供症状检查，供医生咨询并访问病人的全部健康档案。这里可以通过人工智能技术（AI）与在线面对面的咨询结合，从功能上超越传统的在线健康应用。还有很多企业早已经使用了...阅读全文
gonet 游戏服务器架构，mmo架构，分布式snowflake64为整形uuid,ai行为树，配置data，游戏大部分都在内存运算,分布式缓存redis。 设计之初，建立在actor模式下的；rpc，以及消息驱动，rpc无需注册，支持int，数据，struct（struct必须要注册结构题即可）；sql封装简单的orm，具体看demo websocket模式下，要在net，websocket注视掉如下代码：https://studygolang.com/articles/14842 代码除了mysql，protobuf，redis这几个第三方库以外，其他都是自己写的，方便性能和修改，主动权在自己手里 服务器之间rpc，客户端服务器之间protobuf + rpc，客...阅读全文
dbstruct是一款将数据库表一键转换为Golang Struct的应用程序，支持自定义Tag和多种命名格式配置...阅读全文
直奔主题，首先安装Intellj IDEA 15（其它版本也行），可以装免费的社区版，也可以装付费的旗舰版，如果你有钱可以买正版，鉴于还有许多像我一样的穷书生，这里给个旗舰版破解的下载链接：http://pan.baidu.com/s/1o76epDo 密码: 7vjk 博主写这篇文章的时候最新版是15.0.3，但是那个版本暂时无法破解，但是15.0.2可以，下载地址里有破解工具和傻瓜式使用说明，只需三步。 然后开始装golang的插件，插件官网地址是：https://github.com/go-lang-plugin-org/go-lang-idea-plugin 提示：Idea的插件仓库里面本身也有Go，但是版本相对更新很慢，博主写文章的时候Go的版本已更新到1.6，而Idea本身插件仓...阅读全文
IPFS 是分布式文件系统，寻求连接所有计算机设备的相同文件系统。在某些方面，这很类似于原始的 Web 目标，但是 IPFS 最终会更像单个比特流群交换的 git 对象。 IPFS ＝ InterPlanetary File System IPFS 云成为一个新的，重要的网络子系统，如果构建得当，那么可以完善或者替换 HTTP，或者说可以完善或者替代更多，听起来很疯狂，但是确实很疯狂！ IPFS 结合了 Git，BitTorrent，Kademlia，SFS 和 Web 的优势，提供跟 HTTP web 一样简单的接口。 IPFS 分为 3 个代码库： * [github.com/ipfs/ipfs](https://github.com/ipfs/ipfs) - IPFS 规范 ...阅读全文
### 岗位职责：### - 参与公司后端公共服务和微服务体系的设计和开发； - 进行微服务相关技术调研分析并在项目中实践； - 负责编制、修改项目相关的技术文档； ### 任职要求：### - 熟练掌握Golang，4年以上工作经验，2年以上Golang开发经验，有完整项目经验，同时熟练掌握Java／PHP／C++等任意一门语言者优先； - 熟练掌握Golang相关技术，熟悉web开发，熟悉Golang协程，熟悉channel和锁，对高并发、高可用架构系统有正确、深刻的理解，有分布式服务设计或开发经验者优先； - 熟悉MySQL，熟悉数据库原理和常用性能优化技术，同时熟悉其他数据库（如Redis、MongoDB等）者优先； - 熟悉微服务docker,k8s者优先； -...阅读全文
在使用golang做web的应用程序的时候，最容易碰到跨域问题了，跨域就是www.a.com访问www.b.com的文件。但是在浏览器里，为了安全起见，这样做是不允许的，这就是js的同源策略了。不懂的话google一下。1.golang做web的应用程序，不用使用像apache的web服务器，因为它自己可以构造一个web服务器。这样问题就来了，因为你使用js做前台，golang做后台，这样js传值的时候，是可以传到服务器的，并且是可以进行跨域访问的，因为golang构造的服务器与你前台就造成了跨域问题了。而ajax传值是传到服务器端的，并且可以进行跨域访问，所以我在开发的时候果断使用了它。 2而在golang接受传值之后，要返回信息给前台，这是golang里面就要设置可以进行跨域访了。设置就...阅读全文
[](https://gitee.com/GuaikOrg/go-snowflake) # ❄️ GO-Snowflake ## Snowflake简介 在单机系统中我们会使用自增id作为数据的唯一id，自增id在数据库中有利于排序和索引，但是在分布式系统中如果还是利用数据库的自增id会引起冲突，自增id非常容易被爬虫爬取数据。在分布式系统中有使用uuid作为数据唯一id的，但是uuid是一串随机字符串...阅读全文
我们使用golang编写的线上服务，通常会设置一个golang runtime指标监控，包括goroutine num、gc num、gc pause 等等。最近的一次上线，发现 gc 相关的指标出现异常，gc num 和 gc pause 大幅升高。由于 golang 的 gc 是 stop the world 来做， gc 过多会抢占程序的正常执行时间，甚至影响对外提供的服务，因此暂停了上线，准备先把 gc 的问题修复下。 出问题时的 gc 监控如下： image.png 其中蓝色曲线表示 gc num，黄色曲线表示 gc pause（单位ms），两个指标都是30s的累计数据。可以看到每30s的pause达到了秒级别。 登录到线上机器，通过 go tool pprof --alloc_o...阅读全文
2018 年 7 月 1 日 OAuth2 是一种身份验证协议，用于使用其他服务提供商来对应用程序中的用户进行身份验证和授权。 本文将介绍如何构建 Go 应用程序 来实现 OAuth2 协议。 > 如果您想查看代码，可以在[此处](https://github.com/sohamkamani/go-oauth-example) 查看 ## OAuth2 流程 在我们开始实现之前，让我们简要介绍一下 OAuth 协议。如果您曾经见过类似这样的对话框，那么您可能对 OAuth 的含义有所了解： ![gitlab 使用 GitHub OAuth](https://raw.githubusercontent.com/studygolang/gctt-images/master/implement...阅读全文
本文中，我们将一同看看当今 Web 开发的发展趋势，给大家分享我对 2015 年及未来的一些看法、观察和预测。我从 2000 年就开始做 Web 技术方面的工作，而近几年主要是做云架构解决方案。作为一名 Web 开发者，我曾在 .Net、Node.js 和 Go 技术栈上开发 Web 应用和 Web 服务。最近，我将 Web 技术和开发趋势作为整体研究了一遍，在这里分享一下我的想法和观察结果。首先，让我分享一些我所观察到的可用性和体系结构目前的趋势。可用性的趋势如今，用户体验变得比以往更重要，响应式网页设计（RWD）也成为了网站必备的特性。RWD 能让最终用户在不同尺寸的设备上访问网站，包括手机和平板浏览器。有了 RWD 取代移动网站，我们便无需为移动用户单独开发额外的网站。特别是当我们需要...阅读全文
21天精品区块链课程免费学习，深入实战行家带路，助力开发者轻松玩转区块链！ >>> golang 第三方包的安装的方法： 1. go get 安装 # 比如要安装 "github.com/gin-gonic/gin" $ go get github.com/gin-gonic/gin 注意：执行go get 命令需要先安装git命令，并配置git全局变量。 2. 源码包安装 由于国内网络问题，很多时候go get命令并不能安装，所以就需要手动下载源码包，然后拷贝到$GOPATH/sr/ 目录下 # 比如要安装"github.com/golang/protobuf/proto" # 去github.com/golang/protobuf下载源码包， # 拷贝到 $GOPATH/src/gith...阅读全文
> 注 - 本教程是使用 Go 1.9 版和 [googollee/go-socket.io](https://github.com/googollee/go-socket.io) 编写的 Websockets 我觉得非常有趣，在应用程序之间通信中使用标准 RESTful API 方案之外，它为我们提供了一个替代选项。使用套接字，我们可以做到成千上万个不同客户端之间的实时通信，而不必让每分钟数十万个 RESTful API 调用来轰炸我们的服务器。 ## 视频教程 [https://www.youtube.com/watch?v=ycgCMOWPgiw](https://www.youtube.com/watch?v=ycgCMOWPgiw) ## 真实生活的例子 用例子明晰一下 Webso...阅读全文
环境配置 安装 Go 1.5 以上版本，具体安装步骤见官网 https://golang.org/doc/install 安装 gomobile https://godoc.org/golang.org/x/mobile/cmd/gomobile执行以下命令，安装过程中可能需要翻墙 go get -v golang.org/x/mobile/cmd/gomobile gomobile init -v 在安装过程中可能会发生以下问题 提示 unrecognized import path 错误，通常翻墙后可解决 提示 import path does not begin with hostname 错误，如果设置了 GOROOT 的话取消该设置 提示 $GOPATH not set 错误，检查...阅读全文
哈喽，我是小黑，你们好呀~今天给大家分享的是 Pan-light （百度网盘下载神器），众所周知，现在最常用的网盘就是百度网盘，但是天下苦百度网盘久矣！不过，小黑又发现了一款和百度网盘“对着干”的下载神器。它是由 GitHub 网站的一位开发大神制作的一款基于golang+Qt5开发的不限速百度网盘客户端，支持多账号登录、快捷导航、断点续传、速度控制、在线播放器等功能。（软件适用于Windows，下载方式在文末~）。亲测试用该软件无需安装，将小黑提供的压缩包解压后，双击pan light 应用程序，即可打开软件，小伙伴们可以把应用程序快捷方式发送到桌面，方便下次使用。 亮点一：高速下载选择你想要下载的文件，鼠标右键文件，可以看到有vip通道下载和直接下载，目前vip通道下载会出现问题，这是因...阅读全文
现在在体系内大力推广erlang了。不过挺遗憾的是，推行 erlang 前并没有对这个语言自身进行深入的论证和研究，只是由核心人员写了一个简单得不能再简单的 demo，在项目里用了一个开源的 erlang 项目。从工程的角度来说，这是不靠谱的，为了让 erlang 的使用更加靠谱，所以在这里扯淡一下。资料来源于erlang官方和我的猜测，对不对由我，信不信由你。 先看来自 erlang FAQ的内容（自己随手翻译的，不一定准确，可看原文：http://www.erlang.org/faq/introduction.html#1.3）： —————————————————— 1.3 Erlang 特别适合使用的项目是什么？ 分布式的，可靠的，软实时并发系统。 * 电信系统，例如控制交换或者协议...阅读全文
正则分组替换，用$1,$2代替匹配到的字符串 func main() { re, _ := regexp.Compile(`a=(\d+),b=(\d+)`) c := re.ReplaceAllString("test regexp a=1234,b=5678. test regexp replace a=8765,b=3210 ", "c=$2,d=$1") fmt.Println(c) } 输出： test regexp c=5678,d=1234. test regexp replace c=3210,d=876...阅读全文
Golang中的信号处理 信号类型 个平台的信号定义或许有些不同。下面列出了POSIX中定义的信号。 Linux 使用34-64信号用作实时系统中。 命令 man signal 提供了官方的信号介绍。 在POSIX.1-1990标准中定义的信号列表 信号 值 动作 说明 SIGHUP 1 Term 终端控制进程结束(终端连接断开) SIGINT 2 Term 用户发送INTR字符(Ctrl+C)触发 SIGQUIT 3 Core 用户发送QUIT字符(Ctrl+/)触发 SIGILL 4 Core 非法指令(程序错误、试图执行数据段、栈溢出等) SIGABRT 6 Core 调用abort函数触发 SIGFPE 8 Core 算术运行错误(浮点运算错误、除数为零等) SIGKILL 9 Te...阅读全文
上次用Scala写了个爬虫。最近在闲工夫之时，学习Go语言，便用Go移植了那个用Scala写的爬虫，代码如下： package main import ( "fmt" "io/ioutil" "net/http" "regexp" ) var ( ptnIndexItem = regexp.MustCompile(`< atarget="_blank" href="(.+\.html)" title=".+" >(.+)`) ptnContentRough = regexp.MustCompile(`(?s).*
我是Go的粉丝，而且我也对容器感兴趣。容器可以使得代码更容易部署也更容易扩展。 但并不是所有Go程序员都使用容器。 在本文中，我将探讨一些真正应该考虑使用Go和容器的原因 - 然后我们来看一些容器根本不会增加任何好处的情况。首先，我们要确保我们都在相同的起点上。什么是容器对于使用这些容器的人来说，可能有许多不同的定义。对于许多人来说，尽管容器比Docker开源项目或Docker公司要久远得多，“容器”一词与Docker是同义词。如果您是容器的新使用者，Docker可能是您的最佳起点，其提供对开发人员友好的命令行支持，但依然还有其他可用的实现：Linux容器 - 容器实现，包括LXC和LXD来自CoreOS的rkt-pod-native容器引擎runc - 按OCI规范运行容器Windows容...阅读全文
什么是业务规则？在需求里面我们往往把约束，完整性，校验，分支流等都可以算到业务规则里面。在规则引擎里面谈的业务规则重点是谈当满足什么样的条件的时候，需要执行什么样的操作。因此一个完整的业务规则包括了条件和触发操作两部分内容。而引擎是事物内部的重要的运行机制，规则引擎即重点是解决规则如何描述，如何执行，如何监控等一系列问题。 对于快速软件开发平台往往会包括两个方面的内容，一个是可重用性，一个是可配置性。对于公用组件，公用基础类库，公用算法等往往是增加了可重用性；而对于对象模型，权限模型，工作流模型，规则引擎则是解决平台的高可配置性。 权限模型实现了用户岗位，角色和权限调整可配置。工作流引擎实现了在流程出现变化的时候可以灵活配置。规则引擎将业务决策也从程序代码从抽离出来，实现规则变化也可以灵活配...阅读全文
package main import ( "errors" "fmt" "sync" "time" ) const ( twepoch = int64(1417937700000) // 默认起始的时间戳 1449473700000 。计算时，减去这个值 DistrictIdBits = uint(5) //区域 所占用位置 NodeIdBits = uint(9) //节点 所占位置 sequenceBits = uint(10) //自增ID 所占用位置 /* * 1 符号位 | 39 时间戳 | 5 区域 | 9 节点 | 10 （毫秒内）自增ID * 0 | 0000000 00000000 00000000 00000000 00000000 | 00000 | 000000 0...阅读全文
## dcron 分布式定时任务库 ### 原理 基于redis同步节点数据，模拟服务注册。然后将任务名 根据一致性hash 选举出执行该任务的节点。 ### 流程图  ### 特性 - 负载均衡：根据任务数据和节点数据均衡分发任务。 - 无缝扩容：如果任务节点负载过大，直接启动新的服务器后部分任务会自动迁移至新服务实现无缝扩容。 - 故障转移：单个节点故障，10s后会自动将任务自动转移至其他正常节点。 - 任务唯一：同一个服务内同一个任务只会启动单个运行实例，不会重复执行。 - 自定义存储：通过实现driver接口...阅读全文
****51reboot 运维开发又双叒叕的搞活动了，鉴于之前 51reboot 的活动反馈，每次活动结束后（或者已经结束了很长时间）还有人在问活动的事情。这一次小编先声明一下真的不想在此次活动结束后再听到类似下面的话了 我之前不知道有活动 (这个锅小编我背了) 这个活动还有吗？ 我想了解一下这个活动 跟小编说可以给我按活动价算吗？ .......... 针对以上类似的询问小编在此统一回复大家： image 好了，接下来进入今天的重中之重 image 本次活动：Python 运维开发——18天训练营 本课程为：网络班+面授班（北京） 第一：免费是真的，仅限前 60 名报名者，61-150 名超级特价。 第二：开课时间 5月12日 第三：为期18天（每周一天） 主讲师： Panda ：曾就职于...阅读全文
过去几年里我一直使用 Java。最近，用 Go 建立了一个小项目，然而 Go 生态系统中依赖注入（DI）功能缺乏让我震惊。于是我决定尝试使用 Uber 的 [dig](https://github.com/uber-go/dig) 库来构建我的项目，期间感触颇深。 我发现 DI 帮助我解决了之前在 Go 应用程序中遇到的很多问题 - 过度使用 `init` 函数，滥用全局变量和复杂的应用程序设置等。 在这篇文章中，我将介绍 DI ，然后在使用 DI 框架（通过 `dig` 库）前后写一些例子做对比。 ## DI 的简要概述 依赖注入是指你的组件（通常在 Go 中是 struct ）在创建时，就应该获取它们依赖关系的一种思想。这与那些组件在初始化过程中，就建立自身依赖关系的反关联模式不同 。我...阅读全文
# 分布式任务调度平台 ## 前言 在企业系统开发过程中难免少不了一些定时任务来进行定时触发执行任务，对于非分布式环境系统中，我们只需要在对应系统中内部集成一些调度库进行配置定时触发即可。 比如：使用Spring框架集成quartz,只需要进行一些简单的配置就能定时执行任务了。但是随着企业的系统越来越多、逐步从单一应用慢慢演变为微服务集群。 在分布式集群系统中主要面临出如：任务的重复执行、没有统一定时任务配置、任务节点故障转移、任务监控&报警等一些列的功能都是要在分布式系统中进行解决。 此分布式的定时任务调度平台，它非常轻量小巧，使用简单，后端以中心服务器为调度核心，负责集群中各种任务的动态分配和调度执行。 在平台前端支持Web界面可视化管理，我们可以创建、暂...阅读全文
http://godoc.golangtc.com/doc/faq#inc_dec 简单地说, 在golang中++,--操作是语句而不是表达式. 所以a=b++, return x++之类绝对提示错误. 语句是无法放到表达式的位置 Why are ++ and -- statements and not expressions? And why postfix, not prefix? Without pointer arithmetic, the convenience value of pre- and postfix increment operators drops. By removing them from the expression hierarchy altogether...阅读全文
Session背后的基本原则是服务器维护每个客户端的信息，客户端依赖唯一的SessionID来访问此信息。当用户访问Web应用程序时，服务器将根据需要使用以下三个步骤创建新Session： 创建唯一的Session ID 打开数据存储空间：通常我们将Session保存在内存中，但如果系统意外中断，您将丢失所有Session数据。如果Web应用程序处理敏感数据（例如电子商务），这可能是一个非常严重的问题。为了解决此问题，您可以将Session数据保存在数据库或文件系统中。这使得数据持久性更加可靠，并且易于与其他应用程序共享，但需要权衡的是，读取和写入这些Session需要更多的服务器端IO。 将唯一SessionID发送到客户端。 这里的关键步骤是将唯一Session ID发送到客户端。在标准...阅读全文
SeaweedFS 是简单，高伸缩性的分布式文件系统，包含两部分：存储数十亿的文件；快速为文件服务。SeaweedFS 作为支持全 POSIX 文件系统语义替代，Seaweed-FS 选择仅实现 key-file 的映射，类似 "NoSQL"，也可以说是 "NoFS"。 SeaweedFS 仅花费 40 字节的硬盘来存储每个文件的元数据。 基准测试基于 Mac Book，固态硬盘，CPU：1 Intel Core i7 2.6GHz。 编写 1 百万的 1KB 文件：
Concurrency Level: 16 Time taken for tests: 88.796 seconds Complete requests: ...阅读全文
前言 一个成熟的大型网站（如淘宝、天猫、腾讯等）的系统架构并不是一开始设计时就具备完整的高性能、高可用、高伸缩等特性的，它是随着用户量的增加，业务功能的扩展逐渐演变完善的，在这个过程中，开发模式、技术架构、设计思想也发生了很大的变化，就连技术人员也从几个人发展到一个部门甚至一条产品线。所以成熟的系统架构是随着业务的扩展而逐步完善的，并不是一蹴而就；不同业务特征的系统，会有各自的侧重点，例如：淘宝，要解决海量的商品信息的搜索、下单、支付，例如腾讯，要解决数亿用户的实时消息传输，百度它要处理海量的搜索请求，他们都有各自的业务特性，系统架构也有所不同。尽管如此我们也可以从这些不同的网站背景下，找出其中共用优化的技术，这些优化技术和手段广泛运用在大型网站系统的架构中，下面让我们来认识这些优化性能的技...阅读全文
协程是应用层的线程。 应用层是相对于内核层而言，是操作系统的概念，对应的是cpu的运行级别。操作系统的核心代码运行的ring0级别，应用程序的代码运行在ring3级别。内核与应用层的级别设置保证了一些高权限的操作只有内核代码能做，应用程序要使用这些功能必须通过调用操作系统的API（linux上称为系统调用）来调用内核的代码。这个调用会导致cpu从ring3到ring0的上下文切换，这个切换是耗费一些cpu时间的。 线程是操作系统的内核对象，多线程编程时，如果线程数过多，就会导致频繁的上下文切换，这些cpu时间是一个额外的耗费。所以在一些高并发的网络服务器编程中，使用一个线程服务一个socket连接是很不明智的。于是操作系统提供了基于事件模式的异步编程模型。用少量的线程来服务大量的网络连接和I...阅读全文
GO src中自带了sql包和连接数据库的包。这里以连接MYsql为例子。 sql.Open 就是开启了一个数据库连接处。在执行EXEC 或者 QUERY的时候就会自己去建立连接。因此整个应用程序 只需要初始化一次sql.db指针。然后到处用就oK了。 // dbTest project main.go package main import ( "database/sql" "fmt" _ "github.com/go-sql-driver/mysql" "time" ) func IsErr(err error) { if err != nil { fmt.Printf("程晗错误:%s", err) } } func main() { //初始化数据库信息，此时就是一个数据库连接池 d...阅读全文
我们正计划开源我们的项目。其中有一些关于授权逻辑的代码是我们公司高度定制的，我们需要在提供相同功能的情况下剔除掉这部分代码。并且，使任何人在实现自己的授权逻辑时，不需要重新编译所有代码。  我们的代码库在我所钟爱的 Go 中。在寻找可能的实现方案时，我们发现了 [golang-plugins](https://golang.org/pkg/plugin/) 。使用 *golang-plugins*，你可以通过...阅读全文
## 高级Golang研发工程师 ### 岗位职责： 1. 参与公司微服务架构的整体设计和开发，进行相关技术调研、选型和实践； 2. 负责编制、修改项目相关的技术文档和规范； 3. 负责新人指导和code review，技术难题研究，提升团队技术水平； 4. 参与公司开源项目的设计与开发，提高公司在业界的影响力。 ### 任职要求： 1. 熟练掌握Golang，4年以上工作经验，2年以上Golang开发经验，有完整项目经验，同时熟练掌握Java／Ruby／Python／C#等任意一门语言者优先； 2. 熟练掌握Golang相关技术，熟悉Golang协程，熟悉channel和锁，对高并发、高可用架构系统有正确、深刻的理解，有分布式服务设计或开发经验者优先； 3. 熟悉M...阅读全文
