Go语言经典库使用分析，未完待续，欢迎扫码关注公众号flysnow_org或者网站http://www.flysnow.org/，第一时间看后续系列。觉得有帮助的话，顺手分享到朋友圈吧，感谢支持。 上一篇 Go语言经典库使用分析（五）| Negroni 中间件（一） 中介绍了Negroni中间的入门使用和一些介绍，比如如何添加中间等，中间件的路由等。这一篇主要讲原理，比如如何构建的中间处理链，如何编写自己的中间件等。 Negroni Handler处理器本质上来说Negroni是一个HTTP Handler,因为他实现了HTTP Handler接口，所以他可以被http.ListenAndServe使用，其次Negroni本身内部又有一套自己的Handler处理链，通过他们可以达到处理htt...阅读全文
作者：Derek 简介 Github地址：https://github.com/Bytom/bytom Gitee地址：https://gitee.com/BytomBlockchain/bytom 本章介绍Derek解读-Bytom源码分析-创世区块 作者使用MacOS操作系统，其他平台也大同小异 Golang Version: 1.8 创世区块介绍 区块链里的第一个区块创被称为创世区块。它是区块链里面所有区块的共同祖先。 在比原链中创世区块被硬编码到bytomd中，每一个比原节点都始于同一个创世区块，这能确保创世区块不会被改变。每个节点都把创世区块作为区块链的首区块，从而构建了一个安全的、可信的区块链。 获取创世区块 ./bytomcli get-block 0 { "bits": 21...阅读全文
作者：Derek 简介 Github地址：https://github.com/Bytom/bytom Gitee地址：https://gitee.com/BytomBlockc... 本章介绍Derek解读-Bytom源码分析-创世区块 作者使用MacOS操作系统，其他平台也大同小异Golang Version: 1.8 创世区块介绍 区块链里的第一个区块创被称为创世区块。它是区块链里面所有区块的共同祖先。 在比原链中创世区块被硬编码到bytomd中，每一个比原节点都始于同一个创世区块，这能确保创世区块不会被改变。每个节点都把创世区块作为区块链的首区块，从而构建了一个安全的、可信的区块链。 获取创世区块 ./bytomcli get-block 0 { "bits": 2161727821...阅读全文
http://www.golang.ltd/forum.php?mod=viewthread&tid=7215&from=portal | 常见登录验证机制 HTTP Basic Auth HTTP Basic Auth 简单点说明就是每次请求 API 时都提供用户的 username 和 password，简言之，Basic Auth 是最简单的认证方式，只需提供用户名密码即可，但由于有把用户名密码暴露给第三方客户端的风险，在生产环境下被使用的越来越少。因此，尽量避免采用 HTTP Basic Auth。 OAuth OAuth（开放授权）是一个开放的授权标准，允许用户让第三方应用访问该用户在某一web服务上存储的私密的资源（如照片，视频，联系人列表），而无需将用户名和密码提供给第三方应用...阅读全文
简介 tendermint是一个开源的完整的区块链实现，可以用于公链或联盟链，其官方定位 是面向开发者的区块链共识引擎： 与其他区块链平台例如以太坊或者EOS相比，tendermint最大的特点是其差异化的定位： 尽管包含了区块链的完整实现，但它却是以SDK的形式将这些核心功能提供出来，供开发者 方便地定制自己的专有区块链： tendermint的SDK中包含了构造一个区块链节点旳绝大部分组件，例如加密算法、共识算法、 区块链存储、RPC接口、P2P通信等等，开发人员只需要根据其应用开发接口 （Application Blockchain Communication Interface）的要求实现自己 的应用即可。 ABCI是开发语言无关的，开发人员可以使用自己喜欢的任何语言来开发基于ten...阅读全文
作者：Derek 简介 Github地址：https://github.com/Bytom/bytom Gitee地址：https://gitee.com/BytomBlockchain/bytom 本章介绍Derek解读-Bytom源码分析-创世区块 作者使用MacOS操作系统，其他平台也大同小异 Golang Version: 1.8 创世区块介绍 区块链里的第一个区块创被称为创世区块。它是区块链里面所有区块的共同祖先。 在比原链中创世区块被硬编码到bytomd中，每一个比原节点都始于同一个创世区块，这能确保创世区块不会被改变。每个节点都把创世区块作为区块链的首区块，从而构建了一个安全的、可信的区块链。 获取创世区块 ./bytomcli get-block 0 { "bits": 21...阅读全文
Juliet 是一款轻量级的 Golang 中间件链接助手，将 Context（地图）对象从中间件传递到下一个。 示例：
package main import ( "net/http" "log" "net" "fmt" "github.com/root-gg/juliet" ) // Juliet is a lightweight middleware chaining helper that pass a Context (map) object // from a middleware to the next one. // // Mid...阅读全文
简介 gin 的中间件 创建中间件 总结 当前部分的代码 简介 开发 web 应用的时候, 很多地方都需要使用中间件来统一处理一些任务,比如记录日志, 登录校验等. gin 也提供了中间件功能. gin 的中间件 在项目创建之初, 就已经导入了一些中间件, 当时没有仔细介绍. g.Use(gin.Logger()) g.Use(gin.Recovery()) g.Use(middleware.NoCache()) g.Use(middleware.Options()) g.Use(middleware.Secure()) 前面两个是 gin 自带的中间件, 分别是日志记录和错误恢复.后面三个是设置一些 header, 具体是阻止缓存响应, 响应 options 请求,以及浏览器安全设置. /...阅读全文
在使用 Go 编写复杂的服务时，您将遇到一个典型的主题是中间件。这个话题在网上被讨论了一次又一次。本质上，中间件允许我们做了如下事情： * 拦截 `ServeHTTP` 调用，执行任意代码 * 对调用链（Continuation Chain) 上的请求/响应流进行更改 * 打断中间件链，或继续下一个中间件拦截器并最终到达真正的请求处理器 这些与 express.js 中间件所做的工作非常类似。我们探索了各种库，找到了接近我们想要的现有解决方案，但是他们要么有不要的额外内容，要么不符合我们的品位。显然，我们可以在 express.js 中间件的启发下，写出 20 行代码以下的更清晰的易用的 API(Installation API) ## 抽象 在设计抽象时，我们首先设想如何编写中间件函数(下...阅读全文
image.png TCP/IP(Transmission Control Protocol/Internet Protocol) 即传输控制协议/网间协议，是一种面向连接（连接导向）的、可靠的、基于字节流的传输层（Transport layer）通信协议，因为是面向连接的协议，数据像水流一样传输，会存在黏包问题。 我们先看看项目结构 ├── demo │ └── zinxv0.1 │ └── Server.go ├── go.mod ├── ziface │ └── IServer.go └── znet └── server.go 我们先在定义一个Iserver.go的服务接口,我们需要启动服务器，所以在这个接口里面需要实现3个方法。 package ziface //定义一个服务器接口...阅读全文
有限状态机(Finite-state machine, 简写FSM)又可以称作有限状态自动机。它必须是可以附着在某种事物上的，且该事物的状态是有限的，通过某些触发事件，会让其状态发生转换。为此，有限状态机就是描述这些有限的状态和触发事件及转换行为的数学模型。 有限状态机组成 有限状态机有两个必要的特点，一是离散的，二是有限的。基于这两点，现实世界上绝大多数事物因为复杂的状态而无法用有限状态机表示。 而描述事物的有限状态机模型的元素由以下组成： 状态(State)：事物的状态，包括初始状态和所有事件触发后的状态 事件(Event)：触发状态变化或者保持原状态的事件 行为或转换(Action/Transition)：执行状态转换的过程 检测器(Guard)：检测某种状态要转换成另一种状态的条件是...阅读全文
# 进程 # ##1.定义 ## 所有代码都是在进程中执行的，我们通常把一个程序的执行称为一个进程。反过来说，进程用来描述程序的执行过程。因此，程序和进程成为了一对相依相靠的概念，他们分别描述了一个程序的静态形式和动态特征。除此之外，进程还是操作系统进行资源分配的一个基本单位。 ## 2.衍生 ## 父进程 子进程 ## 3.进程标识 pid## 进程的优先级和状态，虚拟地址以及各种访问权限等等这些详细数据都保存在进程描述符中。其中，进程描述符中保存的pid是进程在操作系统中的唯一标识。pid为非负整数且顺序的编号，pid可以被重复利用，当进程id已达到最大值，内核会从头查找闲置的进程id并使用最先找到的哪一个作为新进程的id。另外描述符中还会包含当前进程的父进程的id（常被称为PPID） ...阅读全文
前 言这段时间我的主要工作内容是将公司系统中使用的RabbitMQ替换成NATS，而此之前我对Nats一无所知。经过一段时间紧张的学习和开发之后我顺利的完成了任务,并对消息中间件有了更深的了解。在此感谢同事钟亮在此过程中对我的帮助。NATS属于比较小众的一款中间件产品，中文资料基本上是没有的，故写以记之，为想学习Nats的同学提供一点帮助。 在介绍NATS之前先了解下什么是分布式系统和消息中间件对于分布式系统的定义，一直以来我都没有找到或者想到特别简练而又合适的定义，这里引用一下Distributed System Concepts and Design (Thrid Edition)中的一句话A distributed system is one in which components l...阅读全文
之前看过一本书，说：“凡大神都是先写好单元测试用例，才去写代码的”。我一直都记在心里。今天终于有空，就看了看Golang的测试包testing。 谢大的书和Golang官方的文档讲的差不多，Golang提供了两个测试方式：用例测试和压力测试。 ###1. 用例测试 用例测试的规则我是复制谢大的： 文件名必须是_test.go结尾的，这样在执行go test的时候才会执行到相应的代码 你必须import testing这个包 所有的测试用例函数必须是Test开头 测试用例会按照源代码中写的顺序依次执行 测试函数TestXxx()的参数是testing.T，我们可以使用该类型来记录错误或者是测试状态 测试格式：func TestXxx (t *testing.T),Xxx部分可以为任意的字母数字...阅读全文
前言 本文主要是写给那些想从事中间件开发的同学看的 ：） 如果你没有这个打算，那么本文的学习路线非但不实用，还可能会影响你正常的工作 ：） 什么是中间件开发？ 随着国内软件行业的发展，国内互联网公司规模越来越大，业务越来越复杂，随之使用大量的中间件来提高后台服务性能。由此产生了中间件开发和维护人员。 诚然，在小公司，中间件，例如缓存，MQ，RPC 等服务，极大可能是由业务开发人员自己维护，或者委托第三方云平台运维（支付一些费用）。但，如果后台开发超过 200 人，基本就会组建自己的中间件或者基础架构团队，用于维护后台服务器基础架构和中间件。 更大规模的公司，则由于各种各样的原因（性能，KPI），会自己开发中间件，简称自研。这要求中间件团队需要更多的人员。 中间件开发人员需要哪些素质？ 既然需...阅读全文
RH124系列课程的目标： 1、获得 Redhat 或者 centos 上执行核心系统管理任务所需的足够技能。 2、掌握 RHCSA 认证红帽企业 Linux 系统管理员所需的基本技能。 本章的目标：评估和控制 Red Hat Enterprise Linux 系统上运行的进程。 列举和解释系统中运行的进程的基本信息。 使用bash 作业控制，控制 shell 会话中的进程。 是什么进程？ 所谓进程，它是已启动的可执行程序的运行中的实例。进程有以下组成部分： 已分配内存的地址空间； 安全属性，包括所有权凭证和特权； 程序代码的一个或多个执行线程； 进程状态 进程的环境包括： 本地和全局变量； 当前调度上下文； 分配的资源，如文件描述符和网络端口。 现有进程重复其自己的地址空间(fork)来创...阅读全文
简介 gin 的中间件 创建中间件 总结 当前部分的代码 简介 开发 web 应用的时候, 很多地方都需要使用中间件来统一处理一些任务, 比如记录日志, 登录校验等. gin 也提供了中间件功能. gin 的中间件 在项目创建之初, 就已经导入了一些中间件, 当时没有仔细介绍. g.Use(gin.Logger()) g.Use(gin.Recovery()) g.Use(middleware.NoCache()) g.Use(middleware.Options()) g.Use(middleware.Secure()) 复制代码前面两个是 gin 自带的中间件, 分别是日志记录和错误恢复. 后面三个是设置一些 header, 具体是阻止缓存响应, 响应 options 请求, 以及浏览器...阅读全文
拜占庭容错系统简介 原始的拜占庭容错系统由于需要展示理论上的可行性而缺乏实用性。另外，算法的复杂度也是随节点的增加而呈指数级增加。实用拜占庭容错系统（Practical Byzantine Fault Tolerance, PBFT）降低了拜占庭协议的运行复杂度，从指数级别降低到多项式级别，使拜占庭协议在分布式系统中应用成为可能。 什么是实用拜占庭容错系统 实用拜占庭容错系统是一类“状态机”拜占庭系统（这里的状态机可以理解为“系统状态”，以区块链记账为例，系统每新增一个区块，账本就更新到一个新的状态。前面讲过，拜占庭容错系统是一个强一致性协议，每次记账后系统都会达成新的状态。），要求系统所有节点共同维护一个状态，所有节点采取的行动一致。 实用拜占庭容错系统需要运行三类基本协议： 一致性协议：...阅读全文
前言 我计划写raft的一系列文章，包含从理论到代码实践，此文章依托于MIT的研究生课程。 背景 raft 是一种分布式的共识算法，其目的是要实现多个节点集群的容错性,一致性从而能够构建大规模的软件系统。 在raft之前，比较有名的是Paxos。但是paxos难于理解。 raft的诞生是为了让共识算法更容易理解,在工程上更容易实现。 和其他的共识算法不同的是，raft具有下面的特点： leader：raft中会有一个领导者具有超级权限，可以把自己的log 复制到其他节点中。 leader election： raft每隔一段随机的时间就会进行leader的选举 raft允许集群配置变化时正常运行。 Replicated state machine 状态机是分布式系统中的一个重要概念，任何一个...阅读全文
老司机带你用 Go 语言实现 Raft 分布式一致性协议 随着大型网站的各种高并发访问、海量数据处理等场景越来越多，如何实现网站的高可用、易伸缩、可扩展、安全等目标就显得越来越重要。 为了解决这样一系列问题，大型网站的架构也在不断发展。提高大型网站的高可用架构，不得不提的就是分布式。任何一个分布式系统都无法同时满足 Consistency（一致性），Availability（可用性），Partition tolerance（分区容错性）这三个基本需求，最多只能满足其中两项。 但是，一个分布式系统无论在 CAP 三者之间如何权衡，都无法彻底放弃一致性（Consistency），如果真的放弃一致性，那么就说明这个系统中的数据根本不可信，数据也就没有意义，那么这个系统也就没有任何价值可言。所...阅读全文
Go语言经典库使用分析，未完待续，欢迎扫码关注公众号flysnow_org或者网站http://www.flysnow.org/，第一时间看后续系列。觉得有帮助的话，顺手分享到朋友圈吧，感谢支持。 上一篇介绍的Gorilla Handlers中间件，严格来说不能称之为一个库或者框架，他只是一系列包装http.Handler的中间件函数，并且他们之间没有任何关系，也没有定义一种规则如何让我们基于它来开发我们自己的中间件，总之它是孤立的，中间件之间没有关系的。 我们这篇文章介绍的Negroni中间件库，是一个非常经典的库，非常小，但是功能强大，因为他定义了中间件的框架和风格，让我们可以基于它开发出我们自己的中间件，并且可以集成到Negroni中。 Negroni还兼容原生的http.Handle...阅读全文
网上资料有点杂，有的还掺杂中间件进去，导致使用有障碍，所以，直接上官方文档： 1,首先搞清[]byte string的相互转换，最简单的方式就是 string转[]byte：[]byte(para string) []byte转string：string([]byte) 然后还有就是io包的一些实现方式，比如： bytes.NewBuffer(para []byte）.String() 2,如何从request中获取form,body，head,下面是官方的api： type Request func NewRequest(method, urlStr string, body io.Reader) (*Request, error) func ReadRequest(b *bufio.Re...阅读全文
摘要：2018年6月，《阿里巴巴Java开发手册》再次刷新代码规范认知，我们新增了16条设计规约！现免费开放下载，不可错过！ 《阿里巴巴Java开发手册》是阿里内部Java工程师所遵循的开发规范，涵盖编程规约、单元测试规约、异常日志规约、MySQL规约、工程规约、安全规约等，这是近万名阿里Java技术精英的经验总结，并经历了多次大规模一线实战检验及完善。这是阿里回馈给Java社区的一份礼物，希望能够帮助企业开发团队在Java开发上更高效、容错、有协作性，提高代码质量，降低项目维护成本。 2018年6月5日，《阿里巴巴Java开发手册》再次刷新代码规范认知，我们新增了16条设计规约！ 为何要新增设计规约？ 脍炙人口的唐诗“两个黄鹂鸣翠柳，一行白鹭上青天”，清爽直接，简明易懂...阅读全文
前言 以太坊是一个运行智能合约的平台，被称作可编程的区块链，允许用户将编写的智能合约部署在区块链上运行。而运行合约的主体便是以太坊虚拟机(EVM) 区块 交易 合约 区块链由区块(Block)组成，而区块中打包一定数量的交易(Transaction)，交易可能是一个单纯的转账操作，也可能是调用一个智能合约，无论是哪一种，EVM在运行(excute)交易时都会创建合约(Contract) 外部账户 合约账户 以太坊中的账户有两类 外部账户 由账户持有人的私钥控制的真实存在的账户 合约账户 由合约代码控制，保存着合约代码 一笔交易包含发送方(sender) 接收方(recipient) 和数额(value) 三要素。发送方将一定数额的ETH转移到接收方的账户，这里的转账交易中，接收方是外部账户。...阅读全文
本文首发于公众号，关注文末公众号回复gohttp03 获取文章所用完整源代码。 中间件（通常）是一小段代码，它们接受一个请求，对其进行处理，每个中间件只处理一件事情，完成后将其传递给另一个中间件或最终处理程序，这样就做到了程序的解耦。如果没有中间件那么我们必须在最终的处理程序中来完成这些处理操作，这无疑会造成处理程序的臃肿和代码复用率不高的问题。中间件的一些常见用例是请求日志记录，Header操纵、HTTP请求认证和ResponseWriter劫持等等。 画外音：上面这段描述中间件的文字，跟我两年前在Laravel源码解析之中间件写的几乎一样（其实这图也是从那里拿过来的）。再次说明做开发时间长了以后掌握一些编程的思想有时候比掌握一门编程语言更重要，这不咱们就又用Go来写中间件了。 创建中间件...阅读全文
在构建 Web 应用时，可能需要为许多（甚至全部）HTTP 请求运行一些公共的函数。你可能需要对每个请求进行记录，对每个响应进行压缩，或者在执行一些重要的处理之前检查一下缓存。 组织这种公共函数的一种方法是将其设置为中间层 - 自包含代码，它们在正常应用处理程序之前或之后，独立地处理请求。在 Go 中，使用中间层的常见位置在 ServeMux 和应用程序处理之间，因此通常对 HTTP 请求的控制流程如下所示： `ServeMux => Middleware Handler => Application Handler` 在这篇文章中，我将解释如何使自定义中间层在这种模式下工作，以及如何使用第三方中间层包的一些具体的示例。 ## 基本原则（The Basic Principles） 在 Go ...阅读全文
/*搜索中状态加入队列时就要立即更新标志， 不能出队的时候更新，否则中间有部分状态会重复搜索造成错误。*/ #include
Home Menu 详解 Golang 中间代码生成 04 Feb 2019 Golang Go实现原理 SSA 编译原理 中间代码 中间代码生成 配置初始化 遍历和替换 Channel 编译 AST 到 SSA 多轮转换 总结 相关文章 Reference 前两节介绍的 词法与语法分析 以及 类型检查 两个部分都属于编译器前端，它们负责对源代码进行分析并检查其中存在的词法和语法错误，经过这两个阶段生成的抽象语法树已经不存在任何的结构上的错误了，从这一节开始就进入了编译器后端的工作 — 中间代码生成 和 机器码生成 了，这里会介绍 Go 语言编译的中间代码生成阶段。 中间代码 是一种应用于抽象机器的编程语言，它设计的目的主要是帮助我们分析计算机程序，在编译的过程中，编译器会在将语言的源代码转...阅读全文
介绍 Raft 状态 一个 Raft 集群包含若干个服务器节点；通常是 5 个，这允许整个系统容忍 2 个节点的失效，每个节点处于以下三种状态之一： follower ：所有结点都以 follower 的状态开始。如果没收到 leader消息则会变成 candidate状态。 candidate：会向其他结点“拉选票”，如果得到大部分的票则成为leader。这个过程就叫做Leader选举(Leader Election)。 leader：所有对系统的修改都会先经过leader。 Raft 一致性算法 Raft通过选出一个leader来简化日志副本的管理，例如，日志项(log entry)只允许从leader流向follower。 基于leader的方法，Raft算法可以分解成三个子问题： L...阅读全文
http.FileServer 方法属于标准库 net/http，返回一个使用 FileSystem 接口 root 提供文件访问服务的 HTTP 处理器。可以方便的实现静态文件服务器。 http.ListenAndServe(":8080", http.FileServer(http.Dir("/files/path"))) 访问 http://127.0.0.1:8080，即可看到类似 Nginx 中 autoindex 目录浏览功能。 源码解析 我们现在开始将上述的那仅有的一行代码进行剖析，看看到底是如何实现的。源码中英文注释也比较详细，可以参考。 我们先看 http.Dir()，再看 http.FileServer()，而 http.ListenAndServe() 监听 TCP 端...阅读全文
使用docker构建vim-golang开发环境 原理 docker可以构建一个属于自己的开发环境容器，需要使用时，下载镜像，开箱即用，避免每次都搭建开发环境，浪费不少的时间。 路线图Road Map vim-golang 开发环境 spacemacs Org-mode --放弃，鸡肋 目的(抓住主要矛盾,围绕目标来展开工作) 搭建基于Docker的开箱即用的，工作和开发环境 支持golang开发 支持TypeScript的开发 需要解决的问题 vim插件vim-airline，状态栏图标不显示 --优先级，低 重新构建devenv-vim镜像，使用dockerfile技术构建，减小体积，去除冗余 如何使用 家里-运行 docker run -itd \ `# 注释请忽略，---------...阅读全文
在各种音视频应用充斥着市场的时候，毫无疑问，流媒体领域将会非常适合区块链技术进行场景落地。在上一篇文章中，我们主要讨论了 PPIO 的 PCDN 架构，接下来将介绍 PPIO 的中 P2SP 的下载逻辑和 IaaS 层的流量计数。 下载逻辑 上图为 PPIO 的 CDN 和 P2SP 的传输架构图。这里将会重点讲解 PPIO 中 P2SP 的下载逻辑，它主要分三个部分，Buffer 管理，下载状态机，和下载算法。接下来会对这三部分一一解释。 Buffer 管理 Buffer 管理，即理解为本地设备管理着资源情况，从而决定需要下载的 Piece 的优先级。Buffer 管理也是和实际应用场景是相关的，对于流媒体来说，存在一个视频播放位置，播放位置附近的内容就是紧急内容，该内容则会被优先下载。 ...阅读全文
数据结构 //sync/waitgroup.go type WaitGroup struct { noCopy noCopy // 不可复制，只能指针传递 // 对齐的8byte存储状态， 另外4byte存储信号。状态的高32位counter计数器，低32位waiter计数器 // counter未执行完的goroutine。waiter正在等待的goroutine。那么WaitGroup可以放多少goroutine呢？2^32 state1 [3]uint32 } Add //sync/waitgroup.go func (wg *WaitGroup) Add(delta int) { // statep状态（包含counter和waiter计数器），semap信号 statep, sem...阅读全文
7. 接口(interface) 接口本身是调用方和实现放均需要遵守的一种协议，按统一方法命名参数类型和数量来协调逻辑处理。Go语言中使用组合实现对象特性的描述，对象内部使用结构体内嵌组合对象应具有的特性，对外通过接口暴露能使用的特性。Go语言的接口设计是非入侵式的，开发者无需知道哪些类型被实现。而接口实现者只需要知道实现的是什么样子的接口，但无需指明实现哪一个接口。编译器知道接口应该由谁来实现。 非入侵式的设计让接口与实现者真正解耦。编译速度提高。 1.声明接口 + 接口是一种类型，也是一种抽象结构，不会暴露所含数据的格式、类型及结构 ``` //1.1 接口声明格式 //每个接口类型由数个方法组成 type 接口类型名 interface { 方法名1（args[]） 返回值列表1 方法...阅读全文
一个人必须知道该说什么，一个人必须知道什么时候说，一个人必须知道对谁说，一个人必须知道怎么说。——现代管理之父德鲁克 1. http 响应 "/hello"接口的响应内容如下： HTTP/1.1 200 OK Content-Type: text/plain; charset=utf-8 Date: Tue, 15 Jan 2019 02:56:59 GMT Content-Length: 12 hello, world 其中，第1行是状态行，第2-4行都是响应头，第5行是一个空行，第6行是响应的消息体。 一个http响应包括三个部分： 状态行 响应头 消息体(body)[可选] 1.1 状态行 HTTP/1.1 200 OK 包括三个部分： http版本，这里是1.1 状态码，这里是200...阅读全文
翻译自Eli Bendersky的系列博客，已获得原作者授权。 本文是系列文章中的序言，本系列文章旨在介绍Raft分布式一致性协议及其Go语言实现。文章的完整列表如下： 序言：介绍（本文） 第一部分：选主 第二部分：指令和日志复制 第三部分：持久性和优化 Raft是一个相对较新的算法(2014)，但是已经在业界取到了广泛的应用。最知名的案例应该就是Kubernetes，其中的分布式键值存储组件etcd就依赖了Raft协议。 本系列文章的写作目的，在于描述Raft协议的一个功能完备且经过严格测试的实现方式，并提供一些Raft工作方式的直观理解。这并不是您学习Raft协议的唯一途径。我假定您至少读过Raft论文； 此外，也强烈建议您花时间仔细研究Raft网站上的资源——观看创作者的一两次演讲，鼓...阅读全文
SchedulerCache是kubernetes scheduler中负责本地数据缓存的核心数据结构, 其实现了Cache接口,负责存储从apiserver获取的数据，提供给Scheduler调度器获取Node的信息，然后由调度算法的决策pod的最终node节点,其中Snapshot和节点打散算法非常值得借鉴 设计目标 数据感知 SchedulerCache的数据从apiserver通过网络感知,其数据的同步一致性主要是通过kubernetes中的Reflector组件来负责保证,SchedulerCache本身就是一个单纯数据的存储 Snapshot机制 当scheduler获取一个待调度的pod,则需要从Cache中获取当前集群中的快照数据(当前此时集群中node的统计信息), 用于后...阅读全文
消息中间件的pull与push 消息中间件的实现无非两种套路，一种让客户端pull，典型的比如kafka便是如此，而另一种则是push，也就是让客户端不需要做任何操作，只需要做好conn便可以源源不断收到服务端的推送，典型的代表就是我们今天介绍的nsq。 pull的优势在于客户端可以自己做流控，比如客户端想什么时候pull就什么时候pull，不会因为服务端的强迫而接受，但劣势也很明显，如果服务端的生产速度很慢，客户端需要不断的轮询会让cpu处于繁忙且无用的状态。 push的优势则在于能够不受限于客户端的速度，可以让服务端更快的、批量的把数据push给客户端，因此大部分push实现的消息中间件都是属于内存型，而nsq比较特殊，它实际上是内存+磁盘的一个消息中间件。 push流的nsq如何做流控...阅读全文
本文首发于公众号，关注文末公众号回复gohttp03 获取文章所用完整源代码。 中间件（通常）是一小段代码，它们接受一个请求，对其进行处理，每个中间件只处理一件事情，完成后将其传递给另一个中间件或最终处理程序，这样就做到了程序的解耦。如果没有中间件那么我们必须在最终的处理程序中来完成这些处理操作，这无疑会造成处理程序的臃肿和代码复用率不高的问题。中间件的一些常见用例是请求日志记录，Header操纵、HTTP请求认证和ResponseWriter劫持等等。 画外音：上面这段描述中间件的文字，跟我两年前在Laravel源码解析之中间件写的几乎一样（其实这图也是从那里拿过来的）。再次说明做开发时间长了以后掌握一些编程的思想有时候比掌握一门编程语言更重要，这不咱们就又用Go来写中间件了。 创建中间件...阅读全文
Home Menu Go 语言编译过程概述 01 Feb 2019 Golang Go实现原理 编译原理 预备知识 抽象语法树 静态单赋值 指令集架构 编译原理 词法与语法分析 类型检查 中间代码生成 机器码生成 编译器入口 总结 相关文章 Reference Golang 是一门需要编译才能运行的编程语言，也就说代码在运行之前需要通过编译器生成二进制机器码，随后二进制文件才能在目标机器上运行，如果我们想要了解 Go 语言的实现原理，理解它的编译过程就是一个没有办法绕过的事情。 这一节会先对 Go 语言编译的过程进行概述，从顶层介绍编译器执行的几个步骤，随后的章节会分别剖析各个步骤完成的工作和实现原理，同时也会对一些需要预先掌握的知识进行介绍和准备，确保后面的章节能够被更好的理解。 预备知识...阅读全文
作者：曹国波 时跃堂智能合约又称链码（Chaincode），是用计算机语言描述合约条款、交易的条件、交易的业务逻辑等，通过调用智能合约实现交易的自动执行和对账本数据的操作。一个BSN应用可以部署多个链码，每个链码包含多个方法。链码支持多种语言编写，包括golang、java、node.js。每个链码程序都必须实现Chaincode接口，链码包含：Init ,Invoke ,Query三个基本操作：▶ Init ：链码初始化的方法，在链码实例化或者升级的时候调用一次，以便链码可以执行任何必要的初始化，包括应用程序状态的初始化。▶ Invoke :接收和处理链下业务系统调用事务处理提案，其参数包含调用的链码程序中函数的名称和具体业务处理数据参数。即在Invoke中根据不同的方法参数调用其他分支处...阅读全文
C可以调用Go，并且Go可以调用C， 如果更进一步呢， C-->Go-->C 或者 Go-->C-->Go的调用如何实现？ 本文通过两个简单的例子帮助你了解这两种复杂的调用关系。本文不涉及两者之间的复杂的数据转换，官方文章C? Go? Cgo!、wiki/cgo和cmd/cgo有一些介绍。 Go-->C-->Go Go程序调用C实现的函数，然后C实现的函数又调用Go实现的函数。 1、首先，我们新建一个hello.go的文件： hello.go123456789package mainimport "C"import "fmt"//export HelloFromGofunc HelloFromGo() { fmt.Printf("Hello from Go!\n")} 它定义了一个Hello...阅读全文
go语言高级编程笔记 并发编程 一、并发编程的相关概念 １、并发编程概念：使多个任务【程序】可以在同一时间执行以便能够更快的得到结果 ２、多元程序：允许操作系统同时运行多个程序，cpu来回切换，缺点：对系统资源进行无限制的抢夺造成程序频繁发生死锁现象 ３、串行程序：只能被顺序执行的指令列表 ４、并行程序：可以在并行的硬件上执行的并发程序 ５、并发程序：被并发的执行的两个或两个以上的串行程序的统称 ６、并发系统 ７、并发程序的不确定性：没有明确的执行顺序 ８、并发程序的内部交互 同步的原则：某个资源同一时刻只能被一个程序占用 同步的作用：避免在并发访问共享资源时可能存在的冲突，以及确保在互相传递数据时能够顺利的接通 二、多进程编程 1、IPC：多进程程序中，程序之间需要互相协作完成任务，而多个...阅读全文
package main import ("bufio""bytes""encoding/hex""fmt""github.com/buger/goreplay/proto""os") // requestID -> originalTokenvar originalTokens map[string][]byte // originalToken -> replayedTokenvar tokenAliases map[string][]byte func main() {originalTokens = make(map[string][]byte)tokenAliases = make(map[string][]byte) scanner := bufio.NewScanner(os....阅读全文
区块链入门教程以太坊源码分析fast sync算法一，2018年下半年，区块链行业正逐渐褪去发展之初的浮躁、回归理性，表面上看相关人才需求与身价似乎正在回落。但事实上，正是初期泡沫的渐退，让人们更多的关注点放在了区块链真正的技术之上。this PR aggregates a lot of small modifications to core, trie, eth and other packages to collectively implement the eth/63 fast synchronization algorithm. In short, geth --fast.这个提交请求包含了对core，trie,eth和其他一些package的微小的修改，来共同实现eth/63的快速...阅读全文
一、引文 设计Bytom 数据结构，组合了许多技术点，如 patricia tree，utxo， bvm， account model，protobuf，sql，memcache 等。本文会对一些技术点做以下两点分析。 Bytom 为什么要采用该技术点？ Bytom 如何应用该技术点？ 最后介绍综合这些技术点如何实现Bytom。 [patricial tree](http://www.allisons.org/ll/AlgDS/Tree/PATRICIA/) 二、为什么要采用PAT树？ •PAT树具有[基数树](https://en.wikipedia.org/wiki... 的特点，内容可快速追踪。 •PAT树具有[merkle树](https://en.wikipedia.org/wik...阅读全文
学习笔记，写这篇笔记时才刚入门golang，希望各路大神多多指点。 场景 假设有一个 Role 模型 type Role struct { Id int Name string Status RoleStatus } 其中RoleStatus类型表示角色的状态： type RoleStatus int const ( RDefault RoleStatus = iota RPublish RBlock RDeleted ) 所以数据库在存储角色状态时是Int型，而使用graphql开发接口想以string类型输出状态 的名称，此时就可以利用自定义Scalar功能。 下面这个map用于存储状态名称值和RoleStatus之间的映射： type RSMapType map[interface{}...阅读全文
dial.go在p2p里面主要负责建立链接的部分工作。 比如发现建立链接的节点。 与节点建立链接。 通过discover来查找指定节点的地址。等功能。dial.go里面利用一个dailstate的数据结构来存储中间状态,是dial功能里面的核心数据结构。 // dialstate schedules dials and discovery lookups. // it get's a chance to compute new tasks on every iteration // of the main loop in Server.run. type dialstate struct { maxDynDials int //最大的动态节点链接数量 ntab discoverTable /...阅读全文
golang_real.jpg select是Go中的一个控制结构，类似于switch语句，用于处理异步IO操作。select会监听case语句中channel的读写操作，当case中channel读写操作为非阻塞状态（即能读写）时，将会触发相应的动作。 func main(){ c1 := make(chan string) c2 := make(chan string) go func(){ time.Sleep(1 * time.Second) c1 <- "one" }() go func(){ time.Sleep( 2 * time.Second) c2 <- "two" }() for i:= 0; i < 2; i++ { select { case msg1 := <- c...阅读全文
作者：曹国波 时跃堂智能合约又称链码（Chaincode），是用计算机语言描述合约条款、交易的条件、交易的业务逻辑等，通过调用智能合约实现交易的自动执行和对账本数据的操作。一个BSN应用可以部署多个链码，每个链码包含多个方法。链码支持多种语言编写，包括golang、java、node.js。每个链码程序都必须实现Chaincode接口，链码包含：Init ,Invoke ,Query三个基本操作：▶ Init ：链码初始化的方法，在链码实例化或者升级的时候调用一次，以便链码可以执行任何必要的初始化，包括应用程序状态的初始化。▶ Invoke :接收和处理链下业务系统调用事务处理提案，其参数包含调用的链码程序中函数的名称和具体业务处理数据参数。即在Invoke中根据不同的方法参数调用其他分支处...阅读全文
