使用consul实现分布式服务注册和发现 七 06 bigwhite技术志 Airbnb, cluster, consul, docker, etcd, Go, Golang, haproxy, hashicorp, json, raft, SmartStack, ZooKeeper, 分布式系统, 强一致性, 服务发现, 服务注册, 选主 No Comments Consul是HashiCorp公司推出的开源工具，用于实现分布式系统的服务发现与配置。与其他分布式服务注册与发现的方案，比如 Airbnb的SmartStack等相比，Consul的方案更“一站式”，内置了服务注册与发现框 架、分布一致性协议实现、健康检查、Key/Value存储、多数据中心方案，不再需要依赖其他工具（比如Zoo...阅读全文
golang的分布式framework横空出世了，各种酷，不用再羡慕erlang的分布式编程了。 http://www.gocircuit.org/ 神级应用 ，已经在Tumblr经过检验。 项目源码：https://code.google.com/p/gocircuit...阅读全文
# pholcus [](https://godoc.org/github.com/henrylee2cn/pholcus) [](https://github.com/henrylee2cn/pholcus/releases) Pholcus（幽灵蛛）是一款纯Go语言编写的高并发、分布式、重量级爬虫软件，支持单机、服务端、客户端三种运行模式，拥有Web、GUI、命令行三种操作界面；规则简单灵活、批...阅读全文
## 简介 Asgard是设计用于综合解决常驻进程应用、计划任务、定时任务的分布式作业管理系统。 ## 架构设计  - Asgard系统由web节点、master节点、agent节点组成。 - web节点主要功能包括实例管理、分组管理、作业配置、作业运行状态控制、作业运行状态查看、日志查询 - master节点负责agent节点的状态监测，同时接收并转存agent节点上报的运行时数据 - agent节点接收web节点的指令在相应的服务器中运作相关作业 - master节点和agent节点之间通...阅读全文
腾讯大佬：分享百亿级请求高可用Redis分布式集群实践 一、Redis有哪些常用的应用场景 腾讯大佬：分享百亿级请求高可用Redis分布式集群实践 二、Redis选型思考 时延 时延=后端发起请求db（用户态拷贝请求到内核态）+ 网络时延 + 数据库寻址和读取 如果想要降低时延，只能减少请求数（合并多个后端请求）和减少数据库寻址和读取得时间。从降低时延的角度，基于单线程和内存的redis，每秒10万次得读写性能肯定远远胜过磁盘读写性能。 数据规模 以redis一组K-V为例（”hello” -> “world”），一个简单的set命令最终会产生4个消耗内存的结构。 腾讯大佬：分享百亿级请求高可用Redis分布式集群实践 关于Redis数据存储的细节，又要涉及到内存分配器（如jemalloc）...阅读全文
gonet 游戏服务器架构，mmo架构，分布式snowflake64为整形uuid,ai行为树，配置data，游戏大部分都在内存运算,分布式缓存redis。 设计之初，建立在actor模式下的；rpc，以及消息驱动，rpc无需注册，支持int，数据，struct（struct必须要注册结构题即可）；sql封装简单的orm，具体看demo websocket模式下，要在net，websocket注视掉如下代码：https://studygolang.com/articles/14842 代码除了mysql，protobuf，redis这几个第三方库以外，其他都是自己写的，方便性能和修改，主动权在自己手里 服务器之间rpc，客户端服务器之间protobuf + rpc，客...阅读全文
直奔主题，首先安装Intellj IDEA 15（其它版本也行），可以装免费的社区版，也可以装付费的旗舰版，如果你有钱可以买正版，鉴于还有许多像我一样的穷书生，这里给个旗舰版破解的下载链接：http://pan.baidu.com/s/1o76epDo 密码: 7vjk 博主写这篇文章的时候最新版是15.0.3，但是那个版本暂时无法破解，但是15.0.2可以，下载地址里有破解工具和傻瓜式使用说明，只需三步。 然后开始装golang的插件，插件官网地址是：https://github.com/go-lang-plugin-org/go-lang-idea-plugin 提示：Idea的插件仓库里面本身也有Go，但是版本相对更新很慢，博主写文章的时候Go的版本已更新到1.6，而Idea本身插件仓...阅读全文
IPFS 是分布式文件系统，寻求连接所有计算机设备的相同文件系统。在某些方面，这很类似于原始的 Web 目标，但是 IPFS 最终会更像单个比特流群交换的 git 对象。 IPFS ＝ InterPlanetary File System IPFS 云成为一个新的，重要的网络子系统，如果构建得当，那么可以完善或者替换 HTTP，或者说可以完善或者替代更多，听起来很疯狂，但是确实很疯狂！ IPFS 结合了 Git，BitTorrent，Kademlia，SFS 和 Web 的优势，提供跟 HTTP web 一样简单的接口。 IPFS 分为 3 个代码库： * [github.com/ipfs/ipfs](https://github.com/ipfs/ipfs) - IPFS 规范 ...阅读全文
### 岗位职责：### - 参与公司后端公共服务和微服务体系的设计和开发； - 进行微服务相关技术调研分析并在项目中实践； - 负责编制、修改项目相关的技术文档； ### 任职要求：### - 熟练掌握Golang，4年以上工作经验，2年以上Golang开发经验，有完整项目经验，同时熟练掌握Java／PHP／C++等任意一门语言者优先； - 熟练掌握Golang相关技术，熟悉web开发，熟悉Golang协程，熟悉channel和锁，对高并发、高可用架构系统有正确、深刻的理解，有分布式服务设计或开发经验者优先； - 熟悉MySQL，熟悉数据库原理和常用性能优化技术，同时熟悉其他数据库（如Redis、MongoDB等）者优先； - 熟悉微服务docker,k8s者优先； -...阅读全文
[](https://gitee.com/GuaikOrg/go-snowflake) # ❄️ GO-Snowflake ## Snowflake简介 在单机系统中我们会使用自增id作为数据的唯一id，自增id在数据库中有利于排序和索引，但是在分布式系统中如果还是利用数据库的自增id会引起冲突，自增id非常容易被爬虫爬取数据。在分布式系统中有使用uuid作为数据唯一id的，但是uuid是一串随机字符串...阅读全文
现在在体系内大力推广erlang了。不过挺遗憾的是，推行 erlang 前并没有对这个语言自身进行深入的论证和研究，只是由核心人员写了一个简单得不能再简单的 demo，在项目里用了一个开源的 erlang 项目。从工程的角度来说，这是不靠谱的，为了让 erlang 的使用更加靠谱，所以在这里扯淡一下。资料来源于erlang官方和我的猜测，对不对由我，信不信由你。 先看来自 erlang FAQ的内容（自己随手翻译的，不一定准确，可看原文：http://www.erlang.org/faq/introduction.html#1.3）： —————————————————— 1.3 Erlang 特别适合使用的项目是什么？ 分布式的，可靠的，软实时并发系统。 * 电信系统，例如控制交换或者协议...阅读全文
正则分组替换，用$1,$2代替匹配到的字符串 func main() { re, _ := regexp.Compile(`a=(\d+),b=(\d+)`) c := re.ReplaceAllString("test regexp a=1234,b=5678. test regexp replace a=8765,b=3210 ", "c=$2,d=$1") fmt.Println(c) } 输出： test regexp c=5678,d=1234. test regexp replace c=3210,d=876...阅读全文
上次用Scala写了个爬虫。最近在闲工夫之时，学习Go语言，便用Go移植了那个用Scala写的爬虫，代码如下： package main import ( "fmt" "io/ioutil" "net/http" "regexp" ) var ( ptnIndexItem = regexp.MustCompile(`< atarget="_blank" href="(.+\.html)" title=".+" >(.+)`) ptnContentRough = regexp.MustCompile(`(?s).*
package main import ( "errors" "fmt" "sync" "time" ) const ( twepoch = int64(1417937700000) // 默认起始的时间戳 1449473700000 。计算时，减去这个值 DistrictIdBits = uint(5) //区域 所占用位置 NodeIdBits = uint(9) //节点 所占位置 sequenceBits = uint(10) //自增ID 所占用位置 /* * 1 符号位 | 39 时间戳 | 5 区域 | 9 节点 | 10 （毫秒内）自增ID * 0 | 0000000 00000000 00000000 00000000 00000000 | 00000 | 000000 0...阅读全文
## dcron 分布式定时任务库 ### 原理 基于redis同步节点数据，模拟服务注册。然后将任务名 根据一致性hash 选举出执行该任务的节点。 ### 流程图  ### 特性 - 负载均衡：根据任务数据和节点数据均衡分发任务。 - 无缝扩容：如果任务节点负载过大，直接启动新的服务器后部分任务会自动迁移至新服务实现无缝扩容。 - 故障转移：单个节点故障，10s后会自动将任务自动转移至其他正常节点。 - 任务唯一：同一个服务内同一个任务只会启动单个运行实例，不会重复执行。 - 自定义存储：通过实现driver接口...阅读全文
****51reboot 运维开发又双叒叕的搞活动了，鉴于之前 51reboot 的活动反馈，每次活动结束后（或者已经结束了很长时间）还有人在问活动的事情。这一次小编先声明一下真的不想在此次活动结束后再听到类似下面的话了 我之前不知道有活动 (这个锅小编我背了) 这个活动还有吗？ 我想了解一下这个活动 跟小编说可以给我按活动价算吗？ .......... 针对以上类似的询问小编在此统一回复大家： image 好了，接下来进入今天的重中之重 image 本次活动：Python 运维开发——18天训练营 本课程为：网络班+面授班（北京） 第一：免费是真的，仅限前 60 名报名者，61-150 名超级特价。 第二：开课时间 5月12日 第三：为期18天（每周一天） 主讲师： Panda ：曾就职于...阅读全文
# 分布式任务调度平台 ## 前言 在企业系统开发过程中难免少不了一些定时任务来进行定时触发执行任务，对于非分布式环境系统中，我们只需要在对应系统中内部集成一些调度库进行配置定时触发即可。 比如：使用Spring框架集成quartz,只需要进行一些简单的配置就能定时执行任务了。但是随着企业的系统越来越多、逐步从单一应用慢慢演变为微服务集群。 在分布式集群系统中主要面临出如：任务的重复执行、没有统一定时任务配置、任务节点故障转移、任务监控&报警等一些列的功能都是要在分布式系统中进行解决。 此分布式的定时任务调度平台，它非常轻量小巧，使用简单，后端以中心服务器为调度核心，负责集群中各种任务的动态分配和调度执行。 在平台前端支持Web界面可视化管理，我们可以创建、暂...阅读全文
http://godoc.golangtc.com/doc/faq#inc_dec 简单地说, 在golang中++,--操作是语句而不是表达式. 所以a=b++, return x++之类绝对提示错误. 语句是无法放到表达式的位置 Why are ++ and -- statements and not expressions? And why postfix, not prefix? Without pointer arithmetic, the convenience value of pre- and postfix increment operators drops. By removing them from the expression hierarchy altogether...阅读全文
SeaweedFS 是简单，高伸缩性的分布式文件系统，包含两部分：存储数十亿的文件；快速为文件服务。SeaweedFS 作为支持全 POSIX 文件系统语义替代，Seaweed-FS 选择仅实现 key-file 的映射，类似 "NoSQL"，也可以说是 "NoFS"。 SeaweedFS 仅花费 40 字节的硬盘来存储每个文件的元数据。 基准测试基于 Mac Book，固态硬盘，CPU：1 Intel Core i7 2.6GHz。 编写 1 百万的 1KB 文件：
Concurrency Level: 16 Time taken for tests: 88.796 seconds Complete requests: ...阅读全文
前言 一个成熟的大型网站（如淘宝、天猫、腾讯等）的系统架构并不是一开始设计时就具备完整的高性能、高可用、高伸缩等特性的，它是随着用户量的增加，业务功能的扩展逐渐演变完善的，在这个过程中，开发模式、技术架构、设计思想也发生了很大的变化，就连技术人员也从几个人发展到一个部门甚至一条产品线。所以成熟的系统架构是随着业务的扩展而逐步完善的，并不是一蹴而就；不同业务特征的系统，会有各自的侧重点，例如：淘宝，要解决海量的商品信息的搜索、下单、支付，例如腾讯，要解决数亿用户的实时消息传输，百度它要处理海量的搜索请求，他们都有各自的业务特性，系统架构也有所不同。尽管如此我们也可以从这些不同的网站背景下，找出其中共用优化的技术，这些优化技术和手段广泛运用在大型网站系统的架构中，下面让我们来认识这些优化性能的技...阅读全文
## 高级Golang研发工程师 ### 岗位职责： 1. 参与公司微服务架构的整体设计和开发，进行相关技术调研、选型和实践； 2. 负责编制、修改项目相关的技术文档和规范； 3. 负责新人指导和code review，技术难题研究，提升团队技术水平； 4. 参与公司开源项目的设计与开发，提高公司在业界的影响力。 ### 任职要求： 1. 熟练掌握Golang，4年以上工作经验，2年以上Golang开发经验，有完整项目经验，同时熟练掌握Java／Ruby／Python／C#等任意一门语言者优先； 2. 熟练掌握Golang相关技术，熟悉Golang协程，熟悉channel和锁，对高并发、高可用架构系统有正确、深刻的理解，有分布式服务设计或开发经验者优先； 3. 熟悉M...阅读全文
一、前言在计算机领域，当单机性能达到瓶颈时，有两种方式可以解决性能问题，一是堆硬件，进一步提升配置，二是分布式，水平扩展。当然，两者都是一样的烧钱。今天聊聊我所理解的分布式系统的架构思路。 二、分布式系统的两种方式平时接触到的分布式系统有很多种，比如分布式文件系统，分布式数据库，分布式WebService，分布式计算等等，面向的情景不同，但分布式的思路是否是一样的呢? 1.简单的例子假设我们有一台服务器，它可以承担1百万/秒的请求，这个请求可以的是通过http访问网页，通过tcp下载文件，jdbc执行sql，RPC调用接口…，现在我们有一条数据的请求是2百万/秒，很显然服务器hold不住了，会各种拒绝访问，甚至崩溃，宕机，怎么办呢。一台机器解决不了的问题，那就两台。所以我们加一台机器，每台承...阅读全文
TiDB 是国内 PingCAP 团队开发的一个分布式 SQL 数据库。其灵感来自于 Google 的 [F1](http://research.google.com/pubs/pub41344.html), TiDB 支持包括传统 RDBMS 和 NoSQL 的特性。 **TiDB 的源码已经托管在 Git@OSC 上，详情请查看：** [http://git.oschina.net/pingcap/tidb](http://git.oschina.net/pingcap/tidb) 架构：  特性： [](http...阅读全文
Keith Morrow作为Scala的支持者，发表了这篇倾向于Scala的文章，主要也是为了反驳一年前 Paul Dix 的文章:why he prefers Go over Node and Scala，Paul Dix认为Go好于Scala的原因在于下面几个方面：并发性, 易理解性, 代码分享和学习难度。之所以时隔一年才有人反驳，一则因为双方不了解，二则可能是随着Go编写的Docker流行，拳头产品的出现让大家对Go刮目相看。 Keith Morrow则认为Go比Scala易于学习是因为Go是一种命令式语言。这相对不习惯函数语言的人来说易于掌握一些。 因为大多数人对于命令式语言比较熟悉，因此毫无疑问在代码共享方面Go要易于Scala。那么，在学校曲线上，命令式语言的人学习函数编程要难一...阅读全文
通过 go help testflag 可以看出，可以使用 test.run 加正在表达式来指定要测试的用例。 如有以下用例在包 foo/test 中： func TestFoo(t *testing.T){} func TestFoo1(t *testing.T){} func TestAbc(t *testing.T){} go test -v foo/test 将测试所有的用例 (-v 表示输出详细信息，无论成功失败) go test -v -run TestFoo foo/test 将测试 TestFoo 和 TestFoo1 go test -v -run ^TestFoo$ foo/test 将只测试 TestFo...阅读全文
package util import ( "regexp" "strconv" "strings" ) //表情解码 func UnicodeEmojiDecode(s string) string { //emoji表情的数据表达式 re := regexp.MustCompile("\\[[\\\\u0-9a-zA-Z]+\\]") //提取emoji数据表达式 reg := regexp.MustCompile("\\[\\\\u|]") src := re.FindAllString(s, -1) for i := 0; i < len(src); i++ { e := reg.ReplaceAllString(src[i], "") p, err := strconv.Parse...阅读全文
// xuhh_go_channel project main.go /* channel 1. channel 在读取数据的时候，如果此时通道内没有数据，则会阻塞。 在取数据的时候，如果此时通道内没有数据，则也会阻塞。 2. channel 在创建的时候会存在一个数据缓冲，如果通道内存入的数据超过缓冲，则就会崩溃。 range 在遍历 channel 的时候需要注意的问题： 1. range在遍历channel的时候，一直在运行，直到close(channel)的时候才会结束调用。 2. range会一直读取数据，如果没有数据，就会阻塞在那里。 len(channel):channel内未被读取的len cal(channel):channel的容量 select机制 : 1. 检查每个c...阅读全文
10月27日，广东省云浮市市委书记、市人大常委会主任庞国梅一行在贵安新区花溪大学城管委会主任罗松华的陪同下，莅临ChinaDataPay中国数据宝公司进行参观考察。双方针对政府数据开放与国家大数据战略在数据宝公司进行深入交流探讨，并对数据宝公司“双创”平台的建设工作给予了充分肯定。 据悉，广东省在政务数据资源整合、共享、开放等领域先行一步。10月26日正式开通广东省政府数据统一开放平台“开放广东”。作为广东省政府数字统一的开放平台，首批开通了信用、交通、农业、经济、信息化、文化和国土等7个领域共104个数据集，10个数据应用和8个数据接口，方便公众和企业对接使用，计划到2020年底，“开放广东”平台将在零售服务等重点领域开放500个以上的政府数据集，形成50个以上的开放数据应用...阅读全文
卡内基梅隆大学也够与时俱进了，讲分布式系统也用Go语言了。所用教材是
OWL 是 TalkingData 公司推出的一款开源分布式监控系统 * Go 语言开发，部署维护简单 * 分布式，支持多机房 * 多维的数据模型，类 opentsdb * 支持多种报警算法，报警支持多条件组合、克隆 * 灵活的插件机制，支持任意语言编写，支持传参 * 丰富的报警渠道，邮件、微信、短信 * 原始数据永久存储 * 自带 Web 管理界面以及强大的自定义图表功能 **系统架构**  **Demo** [http://54.223.127.87/](http://54.223.127.87/)...阅读全文
Go-kit 是一个 Go 语言的分布式开发包，用于开发微服务...阅读全文
学习go+分布式中，打算写一个分布式爬虫练练，其实自我感觉分布式爬虫主要就是分布式队列的设计。于是学了学zookeeper，完成了一个分布式队列。爬虫还在编写中，先把分布式队列代码贴出来。附带了简单的生产者、消费者模型的测试代码 项目地址：https://github.com/nladuo/go-zk-fif...阅读全文
2013-10-27 Go语言的抢占式调度 Go语言的抢占式调度 为什么抢占式调度很重要 随着Go的一步步发展，它的调度器部分的实现也越来越好了。goroutine以前是严格意义上的coroutine，也就是协程。用户负责让各个goroutine交互合作完成任务。一个goroutine只有在涉及到加锁，读写通道等操作才会触发gorouine的yield。 Go语言的垃圾回收器是stoptheworld的。如果垃圾回收器想要运行了，那么它必须先通知其它的goroutine合作停下来。这会造成较长时间的垃圾回收等待时间。我们考虑一种很极端的情况，其它的goroutine都停下来了，除了有一个没有停，那么垃圾回收就会一直等待。 抢占式调度可以解决这种问题，在抢占式情况下，不停goroutine是否...阅读全文
【编者的话】基于Docker、Mesos、Ceph全新技术栈的三地三中心容灾体系解决方案目前是没有在生产环境中进行实施的，因为这还是一个正在研发中的解决方案，之所以分享出来是想把它做成一个解决方案开源项目，供大家参考和讨论，也请大家提出自己的想法和意见以便更好的完善这一解决方案。 @Container容器技术大会将于6月4日在上海光大会展中心国际大酒店举办，来自Rancher、携程、PPTV、蚂蚁金服、京东、浙江移动、海尔电器、唯品会、eBay、道富银行、麻袋理财、土豆网、阿里百川、腾讯游戏、数人云、点融网、华为、轻元科技、中兴通讯等公司的技术负责人将带来实践经验分享，5月7日之前购票只需438元，欢迎感兴趣的同学抢购。 大二层简介在TCP/IP协议栈中，标准的将IP协议分为七层，物理层、数...阅读全文
Go 实现lamda、匿名函数和内联函数 在Go语言中，lamda、匿名函数和内联函数的实现称作字面函数（function literals）。当一个函数足够小时，你可以创建一个字面函数。下文将创建一个简单的实例来展示这个函数的实现。 package main import("fmt") func main(){ substract := func(a, b int) int { return a - b } fmt.Print("--substraction function literals: ", substract(10, 2), "\n") } 输出结果 --substraction function literals: 8 one-line函数有它具体的应用场合，特别是对于简单的...阅读全文
课程介绍 阿里云流计算(Alibaba Cloud StreamCompute)是运行在阿里云平台上的流式大数据分析平台，提供给用户在云上进行流式数据实时化分析工具。 产品详情：https://data.aliyun.com/product/sc 课时列表 • 课时1：流计算概念 • 课时2：阿里云流计算产品介绍 • 课时3：阿里云流计算应用场景 • 课时4：阿里云流计算新手任务一 • 课时5：阿里云流计算新手任务二 开始学习http://click.aliyun.com/m/27853/ ...阅读全文
今天听了csdn的go语言培训，虽然进入会场的时间比较晚了，听了半个小时吧， 讲师讲的很好，先谢谢讲师 总之听起来go的前景一片大好呀，现在go的关注度也越来越高 从分布式计算，网站后台，gui程序，等等等等，很多地方go都可以胜任，并且性能也比较好，值得学习 不过就最近来讲，go的招聘信息的确不是很多，依然是java，c＋＋，ios的天下，虽然现在已经有很多公司再用go完成一些项目了， 我自已现在也从事的是java开发的工作，提升java技能的同时，继续保持关注和学习go吧 最近大家关注go的程度真是越来越高了，随然我没有什么朋友在从事go的工作， 听讲师说go1.4以后也支持android开发了，非常期待。。 http://wenku.baidu.com/view/9321fb22316...阅读全文
golang类型断言 类型断言是一个使用在接口值上的操作 有时候，我们可能需要知道某个接口类型的实际类型，比如某个方法需要接收多种类型的数据并需要做分别处理，我们可以把形参设为空接口类型并接收任意类型的值，但是我们怎么反向知道里面实际保存的是哪个类型的对象呢？ Comma-ok 断言 语法 value,ok := x.(T) x表示一个接口的类型，T表示一个类型（也可为接口类型） 该断言表达式会返回x的值和一个布尔值 可根据该布尔值判断x是否为T类型 如： func main() { var x interface{} x = 10 value, ok := x.(int) f...阅读全文
Gorgonia 是 Go 机器学习库。撰写和评估多维数组的数学公式。与 [Theano](http://deeplearning.net/software/theano/) 和 [TensorFlow](https://www.tensorflow.org/) 理念相似。具体来说， #### Gorgonia 性能： * 执行自动分化 * 执行符号微分 * 优化 梯度下降 * 进行稳定的数值计算 * 提供便捷功能来帮助创建神经网络 * 操作快（与Theano和Tensorflow速度相当） * 支持GPU / CUDA * 支持分布式计...阅读全文
一、分布式系统是什么？1、定义distributed system is one in which components located at networked computers communicate and coordinate their actions only by passing messages（分布式系统是指位于网络计算机的组件仅通过传递消息来通信和协调其行为的系统。）所以，从这可以总结出这几个重点：1、组件是分布在网络计算机上2、组件之间仅仅通过消息传递来通信并且协调工作2、特性2.1、副本（Replica）是分布式系统最常见的概念之一，指分布式系统对数据和服务提供的一种冗余方式。在常见的分布式系统中，为了对外提供高可用的服务，我们往往会对数据和服务进行副本处理。1）数...阅读全文
坐标厦门软二，云计算行业 联系微信：17605087651 Golang 后端开发 Responsibilities: 1. 负责公司裸金属产品的后端开发； Requirements: 1. 一年以上 Go 服务端开发经验 2. 熟练掌握 Golang 相关技术，熟悉 Golang 协程，熟悉 channel 和锁，对高并发、高可用架构系统有正确的理解，有分布式服务设计或开发经验者优先 3. 对技术有激情，喜欢钻研，能快速接受和掌握新技术，学习能力和工作责任心强，良好的沟通表达能力和团队协作能力。 联系微信：17605087651 BOSS 投递地址： https://m.zhipin.com/mpa/html/weijd/weijd-... 简历投递邮箱： liuxiaojian@gpuc...阅读全文
Go语言作为服务器编程语言，很适合处理日志、数据打包、虚拟机处理、文件系统、分布式系统、数据库代理等；网络编程方面，Go语言广泛应用于Web应用、API应用、下载应用等；除此之外，Go语言还可用于内存数据库和云平台领域，目前国外很多云平台都是采用Go开发。 兄弟连Go语言+区块链培训课程共计22周学习时长，划分为9个学习阶段，即区块链主流语言-Go语言开发实战、区块链后端技术体系-Go语言高并发和服务器开发、Go开发区块链公链（区块链密码学、分布式编程、共识算法、基本概念，Golan公链开发）、eth与智能合约与DAPP开发、区块链分布式应用开发、区块链系统框架开发-超级账本与区块链3.0EOS、Go与区块链面试强化和高级企业级项目实战。1.导入包，一个主函数中只有一个main函数，包含一个...阅读全文
什么是分布式事务 在大的操作集合中，所有的小操作都属于不同的服务器，不同的应用，分布式事务需要保证这些小操作要么一起成功，要么一起失败。本质上，分布式事务为了保证数据的一致性 分布式事务产生的原因 数据库分库分表（当一个操作需要访问01库又要访问02库的时候就会有这个问题） SOA服务化（所有业务拆分到不同的模块中，数据存储在不同的服务器中，所以需要用到分布式事务） ACID事务特性 原子性 一致性 隔离性 持久性 分布式事务的解决方案 基于XA协议的二阶段提交 消息事务+最终一致性 TCC编程模式 二阶段提交 XA是分布式事务协议， 总的来说 XA协议比较简单，容易实现，但是缺点是 同步阻塞 所有事务参与都在等待其他参与者响应的时候都处于同步阻塞的状态 单点问题 数据不一致 太过保守 任何...阅读全文
4343.jpg ByteEdu 每日新闻(2019-02-18) Golang资料集Go最新资料汇总链接更改 http://www.byteedu.com/forum.php?mod=viewthread&tid=25 坐拥两个“爸爸”，B站仍旧没有逃过一个“亏”字 http://www.byteedu.com/portal.php?mod=view&aid=34 字节教育--分布式缓存(Go语言实现) http://www.byteedu.com/forum.php?mod=viewthread&tid=96 网易云课堂直播课程 更新第一节 http://www.byteedu.com/forum.php?mod=viewthread&tid=95 U3D 获取预制和获取gameObje...阅读全文
Glow 是使用 Go 编写的易用分布式计算系统，是 [Hadoop Map Reduce](http://www.oschina.net/p/hadoop)，[Spark](http://www.oschina.net/p/spark-project)，Flint，[Samza](http://www.oschina.net/p/samza) 等等的替代品。 Glow 的目标是提供一个库，可以在并行线程或者分布式集群机器中进行更简单计算。 安装：
go get github.com/chrislusf/glow go get github.com/chrislusf/...阅读全文
## asynq 是一个 Go 语言的异步任务队列和作业队列，基于分布式消息传递。 ### asynq 中的任务（或者作业）可通过多个 worker 在很多服务器上并发的执行，或者可在单个服务器上利用 Go 的协程运行多个 worker 进程。来自谷歌员工2020年创建的标准库。 https://github.com/hibiken/asyn...阅读全文
mqant是一个基于Golang语言的游戏框架,它具有高性能、高可伸缩、分布式多进程等特点,并且使用很简单。与以往多进程的游戏框架不同,mqant也支持单进程部署,并且也具备很高的性能。mqant在底层对分布式进行了抽象,在开发的时候无须考虑分布式，让开发者可以更多地去关注游戏的具体逻辑，大大提高开发效率。mqant的灵活性使得mqant也可以作为通用的分布式实时应用开发框架，用于一些高实时应用的开发。 mqant与客户端通信选择了mqtt协议,这使得mqant支持所有主流平台的客户端，使得客户端的开发变得很友好...阅读全文
我们在编程中经常需要对两个浮点型比较大小，下面我就来分享一段这样的代码，同时也展示了Go语言函数式编程的独特魅力： import ( "fmt" "math" ) func main() { // 设置精确度为0.00001 var a Accuracy = func() float64 { return 0.00001 } fmt.Println(a.Equal(0.11111222, 0.11111222233333)) //打印结果为：true } type Accuracy func() float64 func (this Accuracy) Equal(a, b float64) bool { return math.Abs(a-b) < this() } func (this ...阅读全文
公司：蘑菇街 地点：杭州西湖区 部门：平台架构 工作职责： 参与研发分布式数据中间件、缓存中间件等核心系统研发 薪资： 15k~25k * 16 有兴趣的简历发送： beidou@mogujie.co...阅读全文
