 编者按：许式伟，七牛云 CEO ， ECUG 社区发起人， Go 语言专家，著有国内第一本 Go 语言图书《 Go 语言编程》。有超过 15 年互联网从业经验，曾在金山、盛大等知名公司担任重要技术岗位从事核心产品研发。 2011 年创立七牛云，现仍然活跃在技术前沿领域。 近日，图灵社区对许式伟进行了专访，所采访的主要话题并不是他作为技术牛人的开发经历或是他作为创始人的奋斗史，而关于他在 2007 年创建的 ECUG 社区（全称为 Effective Cloud User Group ，曾用名是 Erlang Chin...阅读全文
Hi all, 最近大家怎么样呢？ 有没在继续学习Golang呢？真心希望最近更新频率的下降没有影响到大家学习的脚步。 很多人在后台问博主：最近在忙些啥呢？对，最近还真有点忙。 和美国同事进行了一周的技术交流。 去杭州阿里见了下5年未见的老友。 考虑并准备和慕课网的合作。 先来说说技术交流吧，他们感兴趣的部分也正是Golang实现的数据处理（Data Process）和数据应用（Data Application）,问题也比较常规：如何保证数据一致性、集群方案的高可用以及Redis在超过100亿数据量后引起的数据丢失等。其实Redis的问题还是比较钻牛角尖的，没有任何一个数据库敢保证100%不丢数据，关键看应用场景可接受的容错比例，或者拿时间和空间去换取数据的一致。 然后让我感受比较深刻的就是...阅读全文
基础架构组Lead Software Engineer 职责描述：1. 公司级大数据平台的架构规划与设计，以提升平台的存储与计算能力;2. 大数据基础组件Kafka/HBase/YARN/Spark等的二次开发与性能优化;任职要求：1. 五年以上Hadoop及大数据生态圈产品实践经验，如Kafka/HBase/Presto/YARN/Spark等;2. 深入了解分布式系统、大数据平台、消息队列等高可用高弹性架构;3. 有志于建立大规模低延时数据处理系统，用于解决实际业务问题;4. 良好的英语听说读写能力。加分项:1. 有 Golang 开发经验;2. 有AWS开发经验;3. 对HDFS/Yarn/HBase/Hive/Spark/Presto相关组件的性能优化和补丁跟踪等有实际经验。数据产品...阅读全文
阅读本文大约需要 3 分钟。 前几天很多技术交流群和公号都在推一门数据结构和算法的课程。甚至部分技术人的朋友圈都被这门课程刷了屏。并且到发文为止，数据显示已经有 21000 多人购买。 这门课的价格是 68 元，到目前为止平台和作者的收入一共也有 100 多万，就算人数造假，就凭前几日的火爆程度来看，他们也应该赚了不少钱。 人红是非多，今天我就在 V2EX 看到一个吐槽的板块。 看了下评论区，几乎全是在怼这门课和讲师。 在我看来，他们怼的原因也很简单：一部分是在质疑课程的真实性、另一部分就是看到别人赚了钱，自己却没赚，所以心里不平衡了。 这种思想挺正常，从小到大，我们大部分人都有过被家长或者老师拿去和别人攀比的经历，这时候心里多多少少会有点不舒服的感觉，希望自己做的比别人好，而有的人却直接开...阅读全文
区块链开发工程师要干什么？如何成为一名合格的区块链工程师，其必备技能有掌握加密技术、共识算法、Go/java/C++、以太坊平台等内容，才能够完成公司区块链项目的研发和维护工作内容。 区块链开发 目前学完区块链专业的课程的两个就业方向： 一是Go编程开发工程师，多从业于软件开发公司，从事以下领域的编程：服务器编程、分布式系统编程、网络编程、数据库操作、开发云平台等。 目前很多云平台采用Go开发，Go语言是目前项目转型区块链首选的语言，也是软件工程师转型首选的语言，是添加技术栈的首选语言。 二是区块链开发工程师，当前区块链开发人员多需要在以下行业：互联网金融行业、电子商务行业、物流行业、游戏行业等。 区块链工程师岗位职责：负责区块链底层技术研发。 以下是小编网罗的几个区块链工程师岗位要求： 1...阅读全文
摘要： 一、HBase的历史由来 HBase是一个开源的非关系型分布式数据库（NoSQL）,基于谷歌的BigTable建模，是一个高可靠性、高性能、高伸缩的分布式存储系统，使用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 一、HBase的历史由来 HBase是一个开源的非关系型分布式数据库（NoSQL）,基于谷歌的BigTable建模，是一个高可靠性、高性能、高伸缩的分布式存储系统，使用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBase最初是以Hadoop子项目的形式进行开发建设，直到2010年5月才正式成为Apache的顶级项目独立发展。伴随着互联网时代数据的澎湃增长，HBase作为基础存储系统得到了快速发展与应用，大...阅读全文
课程介绍 本章针对大数据分步式计算中的相关技术进行讲解，核心讲解流式计算和内存计算技术，阐述阿里云在处理这些功能时所使用的技术，并对阿里在这里的技术优化方式进行了详细的讲解。 课程目标 • 学习分步式计算相关技术 适合人群 • 大数据开发者、爱好者 课时列表 • 课时1：流式计算概述 • 课时2：流计算与批量计算的区别 • 课时3：流式计算典型系统技术分析 • 课时4：阿里计算核心技术概述 • 课时5：有状态计算实现方式 • 课时6：StreamSQL • 课时7：大数据和数据库的结合 • 课时8：分析型数据库服务ADS • 课时9：统一计算框架 开始学习 http://click.aliy...阅读全文
http://www.infoq.com/cn/news/2017/06/U-no-Googl...阅读全文
基础架构组 Lead Software Engineer 职责描述： 1. 公司级大数据平台的架构规划与设计，以提升平台的存储与计算能力; 2. 大数据基础组件Kafka/HBase/YARN/Spark等的二次开发与性能优化; 任职要求： 1. 五年以上Hadoop及大数据生态圈产品实践经验，如Kafka/HBase/Presto/YARN/Spark等; 2. 深入了解分布式系统、大数据平台、消息队列等高可用高弹性架构; 3. 有志于建立大规模低延时数据处理系统，用于解决实际业务问题; 4. 良好的英语听说读写能力。 加分项: 1. 有 Golang 开发经验; 2. 有AWS开发经验; 3. 对HDFS/Yarn/HBase/Hive/Spark/Presto相关组件的性能优化和补丁跟...阅读全文
孔壹学院区块链技术课程限时5折，2019.2.22（本周五），仅限一天实战项目·专业讲师·系统课程·独家原创活动详情：Golang、共识算法、公链实战、Hyperledger Fabric、DAPP、源码解析、钱包、密码学、智能合约安全等官网课程全部5折！注：活动当天登录孔壹学院官网线上购买即可网址：http://edu.kongyixueyuan.com/?20190219meiti课程咨询请扫描下方二维码（ChainDesk小姐姐微信）区块链技术交流QQ群：26327094...阅读全文
职位诱惑： 高性能,可扩展,快乐,牛团队 职位描述： 工作职责： 1. 实现互联网SaaS平台。 2. 独立设计或辅助设计平台级系统的架构。 基本任职要求： 1. 计算机或相关专业本科及以上学历。 2. 三年以上的互联网应用系统开发经验，Go开发至少1年以上经验。 3.熟悉Web应用系统平台开发，对HTTP，TCP/IP协议有深入理解 ，熟悉gin，beego等web框架。 4.具有高负载、高并发开发设计经验 5.熟练使用MySQL/MongoDB/Redis等数据库编程以及HDFS文件系统。 6. 基础扎实，熟悉常用数据结构和算法，熟悉主流分布式系统设计概念和算法。 7、最重要的是有责任心...阅读全文
对于多个程序绑定同一个端口我们遇到最多的是(Port 80 was already in use)，也就是说端口被占用，不能重复绑定，但是操作系统内核支持通过配置socket参数的方式来实现多个进程绑定同一个端口。 简单示例 package main import ( "context" "golang.org/x/sys/windows" "net" "syscall" ) var listenConfig = net.ListenConfig{ Control: MyControl, } func MyControl(network, address string, c syscall.RawConn) error { return c.Control(func(fd uintptr) ...阅读全文
``` package main //go 1.9 多线程安全MAP 函数模块 //QQ:29295842 欢迎技术交流 import ( // "fmt" "sync" ) var ( map_list sync.Map //广告配置信息 wgx sync.WaitGroup // ) func Thread_map_add(id string, rows_map map[string]interface{}) { //添加数据 map_list.Store(id, rows_map) } func Thread_map_revise(id string, rows_map map[string]interface{}) { //修改 wgx.Add(1) //线程数 go func() ...阅读全文
推荐一个适合新手入门区块链的教程——以太坊DApp开发实战： http://xc.hubwiz.com/course/5a952991adb3847553d205d1?affid=studygolang20180307 建了个技术交流群。 693422199，欢迎勾搭，加群是注明是咱们社区，谢谢...阅读全文
golang sync.pool对象复用 并发原理 缓存池 在go http每一次go serve(l)都会构建Request数据结构。在大量数据请求或高并发的场景中，频繁创建销毁对象，会导致GC压力。解决办法之一就是使用对象复用技术。在http协议层之下，使用对象复用技术创建Request数据结构。在http协议层之上，可以使用对象复用技术创建(w,*r,ctx)数据结构。这样即可以回快TCP层读包之后的解析速度，也可也加快请求处理的速度。 先上一个测试： //测试平台 i5 3.8GHz 4核 bPool := sync.Pool{ New: func() interface{} { b := make([]byte,1024) return &b }, } t1 := time.Now...阅读全文
《凤凰项目》是DevOps界神书，虽然内容表现形式是小说，但是依然是敏捷开发及DevOps领域的必读书籍。很多知名的咨询师都是通过此书开启了DevOps及敏捷之旅，书中故事均来源于运维的日常工作，正是体现了艺术源于生活、高于生活的本质。笔者间隔两年时间，阅读此书两次，希望可以讲书中了解到的一些经验分享给大家。小说主人公比尔，临时接任了IT运维经理的职位，然而此时，公司已经经历了多轮裁员，生产线上故障不断。董事会指望凤凰项目重启拯救公司，然而面对的着层层困难，比尔开始不停的应付突发的线上故障，身心俱疲。为了生存及公司的正常运转，尝试出一套适合该公司的IT转型方案，整个转型过程就像我们从传统开发模式转型DevOps的开发模式一样，踩过很多坑，总结出很多道理，小说的内容我不过多叙述，了解精彩的故事...阅读全文
出差多，老妈生病需要照顾，导致近一个没时间来这里记录一下最近的一些心得，连 leetcode 练习 golang 编程也拉下了，加油吧。对于目前的工作，已经让我感觉不太开心了，希望今年有个机会，彻底转向云方向，无论是私有云还是公有云，到底是去外企还是民企活着国企，甲方还是乙方，不太确定，一直在思考可能和机会有关。另一方面，我也会开始尝试远程工作，顺利的话转型 free lancer 也会是个选择。 “努力就会成功” 什么样的努力是可取的？该如何提高自己和 work smart？可不是这些互联网巨头推崇的 996。作为技术人员，提高自己的技能，包括 soft skills 是必须的，而不是整天就为了加班和 programming。还有就是家人比工作重要，不要为了钱和工作牺牲了家庭...阅读全文
go语言资料集合 Go语言核心技术(卷一)之2.1－整数 Mac系统搭建Go语言Sublime Text 2环境配置 go语言实现排序算法 Go语言核心技术(卷一)之1.5－作用域 Go语言核心技术(卷一)之1.4－包和文件 Go语言核心技术(卷一)之1.3－赋值及类型声明篇 在go语言中优雅退出goroutines Go语言以匿名组合的方式实现继承 Go语言核心技术(卷1):基本单元1 Go语言核心技术(卷1):基本单元2 Go语言核心技术(卷一):序-必读 Go语言核心技术(卷1):Go的基本单元1 Go语言核心技术(卷1):序-必读 golang go语言与C语言互调，通过cgo Go语言学习4：Slices Go语言黑魔法中的问题修正 Go语言用堆排序的方法进行一千万个int随机数排...阅读全文
摘要： 2017年Gartner发布的数据库厂商推荐报告中首次收录了来自中国的数据库厂商，分别是阿里云、巨杉数据库SequoiaDB以及南大通用GBase。在这三家厂商中，巨杉数据库和南大通用是专注于企业级市场的数据库厂商，而阿里云严格来说则是一家云计算公司。 2017年Gartner发布的数据库厂商推荐报告中首次收录了来自中国的数据库厂商，分别是阿里云、巨杉数据库SequoiaDB以及南大通用GBase。在这三家厂商中，巨杉数据库和南大通用是专注于企业级市场的数据库厂商，而阿里云严格来说则是一家云计算公司。 为什么云计算公司会想要“跨界”数据库领域，而且还搞得有声有色呢?什么样的数据库才是云原生数据库?有何标准?……针对这些问题，我们在DTCC 2018开幕之前采访了阿里云...阅读全文
许式伟，七牛云CEO，ECUG社区发起人，Go语言专家，著有国内第一本Go语言图书《Go语言编程》。有超过15年互联网从业经验，曾在金山、盛大等知名公司担任重要技术岗位从事核心产品研发。在金山任职期间，先以首席架构师身份主导了全新WPS Office 2005的架构设计和开发；之后创建金山实验室，以创始人和技术总监的身份主导了前沿的搜索和分布式存储相关技术的研究和开发。在盛大工作期间，任职资深研究员，负责盛大祥云计划的研究，随后发起了盛大网盘项目。2011年创立七牛云，现仍然活跃在技术前沿领域。 今天，我们采访的主要话题并不是老许作为技术牛人的开发经历或是他作为创始人的奋斗史，而是他在2007年创建的ECUG社区。ECUG的全称为Effective Cloud User Group，曾用名是...阅读全文
本公司从事钢铁行业，现因业务需要招聘1-2名go方面的编程人员。 联系方式 QQ：494659165。填写备注 “招聘...阅读全文
readmore来源于：https://openwrite.cn/openwrit... 博客园接入 readmore 很简单，三步走，2 分钟搞定！ 在 OpenWrite 生成 readmore 脚本 微信公众号设置关键词回复 在博客园设置中添加脚本 第一步， 在 OpenWrite 生成 readmore 脚本 在 OpenWrite 后台，增长工具 / 博客导流公众号 目录下。点击添加按钮，填写博客和公众号信息，生成 readmore 脚本。 第二步， 微信公众号设置关键词回复 保存成功后在列表页中点击使用，根据使用指南设置公众号关键词回复，并复制 readmore 脚本。 第三步，在博客园设置中添加脚本 打开博客园，管理 / 设置页面，在最下方 页脚Html代码 中添加第二步中复制...阅读全文
readmore来源于：https://openwrite.cn/openwrit... 博客园接入 readmore 很简单，三步走，2 分钟搞定！ 在 OpenWrite 生成 readmore 脚本 微信公众号设置关键词回复 在博客园设置中添加脚本 第一步， 在 OpenWrite 生成 readmore 脚本 在 OpenWrite 后台，增长工具 / 博客导流公众号 目录下。点击添加按钮，填写博客和公众号信息，生成 readmore 脚本。 第二步， 微信公众号设置关键词回复 保存成功后在列表页中点击使用，根据使用指南设置公众号关键词回复，并复制 readmore 脚本。 第三步，在博客园设置中添加脚本 打开博客园，管理 / 设置页面，在最下方 页脚Html代码 中添加第二步中复制...阅读全文
服务器开发工程师 岗位职责： 1. 产品研发：参与服务器端后台系统的研发，按照设计完成功能模块的编写. 2. 负责IOS、Android移动应用服务器端的设计、开发、重构与扩展. 3. 负责移动应用服务器的系统模块开发. 4. 移动应用服务器上线运营的技术支持. 5. 根据需求进行功能设计，以及程序设计、开发、优化工作. 6. 与客户端工程师、测试人员一起完成功能模块开发与调试. 7. 能独立部署WEB 服务环境，并根据硬件配置对系统进行优化. 熟悉JMS,UML. 任职要求： 1.本科以上学历，2年以上服务端开发经验，有实际大型网络产品的开发经验； 2.语言基础扎实，精通一种主流的编程语言，C++/Java/C#/Python/lua均可； 3.掌握关系数据库理论，...阅读全文
技术开发经理 职位描述： 1、负责公司相关社区类产品的服务器端的开发及架构工作 2、根据产品和项目需求，分析、设计与实现系统架构方案，保障系统架构的合理性、可扩展性及经济性； 3、负责产品架构分析，提出软硬件架构整体设计，数据库存储设计方案，指导其他工程师的设计工作； 4、负责核心技术问题的攻关，架构设计，系统优化，协助解决项目开发过程中的技术难题 任职要求： 1、 4年以上开发经验，有架构设计经验，2年以上golang开发经验，或熟悉c++/go/erlang； 2、熟悉SpringMVC + Spring + MyBatis开发，愿意尝试go语言的； 3、具备良好的分析解决问题能力，思路清晰，具有良好的表达和理解能力； 4、熟悉Linux开发环境，使用过do...阅读全文
非技术出身的产品经理，想必在从事产品工作前都会问，做产品需要技术基础吗？而大部分人都会告诉你，产品经理不会技术也可以。真是这样么？ 那对于非技术出身的产品经理而言，如何看待开发给出的工期呢？比如在我面前说一个月，在老板面前说一个周，这个怎么破？ 其实，对于非技术出身的产品经理，很难判断开发工期，但也不是完全没法解决，我们可以通过以下这两个方面提升自己来解决。 一方面，作为产品经理，你需要有长期的经验积累。做产品，有一方面的能力叫做技术理解力，技术理解力对于非技术出身的产品经理非常重要，应该不断的去学习跟产品相关的技术、大概逻辑，不用了解具体的细节，但应该大概知道大概逻辑，复杂程度，大概框架，并进行一定的学习，多和技术同学请教，培养自己的技术理解力。 另一方面，工期的评...阅读全文
//GO语言 实现端口扫描 //缺陷 //port 无法设置成全局变量不知道怎么设置的 //var l = list.New() 这个是数组操作并不是消息队列 跟消息队列功能类似 //实现功能 //实现生成 IP段 //实现端口扫描 //实现参数传入 //写入文件到本地 //main.go 58.215.20.30 58.215.201.30 80 //文件名 开始IP 结束IP 扫描端口 //QQ29295842 希望认识更多的朋友技术交流 //QQ群367196336 go golang WEB安全开发 // blog http://hi.baidu.com/alalmn package mai...阅读全文
有些小伙伴可能不知道，亚马逊AWS对新用户有个免费体验一年的活动。如果希望体验免费亚马逊AWS云服务器产品，或者看看他们后台面板长什么样，体验产品的速度和性能，又或者准备搭建一个免费梯子，可以注册玩玩。 很简单，全程基本都是中文，不用担心看不懂英文。 我是2018年6月30号注册的账号，在EC2面板创建了一个实例，平时就上上谷歌；国内网速慢，在上面下载一些kubernetes镜像，编译一些golang项目。 悲剧的是我把时间记错了，以为是2016年8月10号开始使用的，能用到今年8月。直到8月份信用卡收到扣费提示，才发现时间记错了...于是乎，赶紧到EC2 DashBoard面板把实例停止，删除掉，以为这样就不会再扣费了。 结果到9月份又收到信用卡扣费提醒：这次我以为是扣除8月份的，也就20...阅读全文
