背景 在最近开发的项目中，后端需要编写许多提供HTTP接口的API，另外技术选型相对宽松，因此选择Golang + Beego框架进行开发。之所以选择Golang，主要是考虑到开发的模块，都需要接受瞬时大并发、请求需要经历多个步骤、处理时间较长、无法同步立即返回结果的场景，Golang的goroutine以及channel所提供的语言层级的特性，正好可以满足这方面的需要。 goroutine不同于thread，threads是操作系统中的对于一个独立运行实例的描述，不同操作系统，对于thread...阅读全文
目录 [TOC] 1、RabbitMQ介绍 1.1、什么是RabbitMQ？ RabbitMQ 是由 LShift 提供的一个 Advanced Message Queuing Protocol (AMQP) 的开源实现，由以高性能、健壮以及可伸缩性出名的 Erlang 写成，因此也是继承了这些优点。 1.2、什么是AMQP? AMQP，即Advanced Message Queuing Protocol，高级消息队列协议，是应用层协议的一个开放标准，为面向消息的中间件设计。它从生产者接...阅读全文
首先给出 原文链接. 笔者觉得此文写的通俗易懂，言简意赅，于是打算翻译出来供go服务器新手学习参考，好了废话不说，开始正文 在Malwarebytes的工作让我经历的惊人的成长，一年前，在我加入这家公司之前，我在硅谷的主要工作内容就是定制解决方案，以应对快速增长的公司每天数百万的使用频率。我已经在不同的公司从事反病毒和反恶意软件行业工作了12年，我知道这些系统的复杂程度取主要决于我们每天要处理多大量数据。 有趣的是，在过去的9年当中，我从事的所有网站开发都是在Ruby on Rails的方案下实...阅读全文
引言1.1. 存储器山存储器山是 Randal Bryant 在《深入理解计算机系统》一书中提出的概念。基于成本、效率的考量，计算机存储器被设计成多级金字塔结构，塔顶是速度最快、成本最高的 CPU 内部的寄存器(一般几 KB)与高速缓存，塔底是成本最低、速度最慢的广域网云存储(如百度云免费 2T ) 存储器山的指导意义在于揭示了良好设计程序的必要条件是需要有优秀的局部性：时间局部性：相同时间内，访问同一地址次数越多，则时间局部性表现越佳；空间局部性：下一次访问的存储器地址与上一次的访问过的存储器...阅读全文
http://skoo.me/go/2013/11/29/golang-schedule?hmsr=studygolang.com&utm_medium=studygolang.com&utm_source=studygolang.com 我们都知道Go语言是原生支持语言级并发的，这个并发的最小逻辑单元就是goroutine。goroutine就是Go语言提供的一种用户态线程，当然这种用户态线程是跑在内核级线程之上的。当我们创建了很多的goroutine，并且它们都是跑在同一个内核线程之上的时候...阅读全文
Go 语言是静态类型语言，虽然它也可以表现出动态类型，但是使用一个嵌套的 `map[string]interface{}` 在那里乱叫会让代码变得特别丑。通过掌握语言的静态特性，我们可以做的更好。 通过同一通道交换多种信息的时候，我们经常需要 JSON 具有动态的，或者更合适的参数内容。首先，让我们来讨论一下消息封装(message envelopes)，JSON 在这里看起来就像这样： ```json { "type": "this part tells you how...阅读全文
0 引言context是Go中广泛使用的程序包，由Google官方开发，在1.7版本引入。它用来简化在多个go routine传递上下文数据、(手动/超时)中止routine树等操作，比如，官方http包使用context传递请求的上下文数据，gRpc使用context来终止某个请求产生的routine树。由于它使用简单，现在基本成了编写go基础库的通用规范。笔者在使用context上有一些经验，遂分享下。本文主要谈谈以下几个方面的内容：context的使用。context实现原理，哪些是需要注...阅读全文
Go语言——goroutine并发模型 参考： Goroutine并发调度模型深度解析&手撸一个协程池 Golang 的 goroutine 是如何实现的？ Golang - 调度剖析【第二部分】 简介 stack OS线程初始栈为2MB。Go语言中，每个goroutine采用动态扩容方式，初始2KB，按需增长，最大1G。此外GC会收缩栈空间。 BTW，增长扩容都是有代价的，需要copy数据到新的stack，所以初始2KB可能有些性能问题。 管理 用户线程的调度以及生命周期管理都是用户层面，Go...阅读全文
如果把语言比喻为武侠小说中的武功，如果只是会用，也就是达到四五层，如果用的熟练也就六七层，如果能见招拆招也得八九层，如果你出神入化，立于不败之地十层。 如果你想真正掌握一门语言的，怎么也得八层以上，需要你深入了解这门语言方方面面的细节。 希望以后对Go语言的掌握能有八九层，怎么能不懂调度器！？ Google、百度、微信搜索了许多Go语言调度的文章，这些文章上来就讲调度器是什么样的，它由哪些组成，它的运作原理，搞的我只能从这些零散的文章中形成调度器的“概貌”，这是我想要的结果，但这还不够。 学习不...阅读全文
缓存击穿 给缓存加一个过期时间，下次未命中缓存时再去从数据源获取结果写入新的缓存，这个是后端开发人员再熟悉不过的基操。本人之前在做直播平台活动业务的时候，当时带着这份再熟练不过的自信，把复杂的数据库链表语句写好，各种微服务之间调用捞数据最后算好的结果，丢进了缓存然后设了一个过期时间，当时噼里啪啦两下写完代码觉得稳如铁蛋，结果在活动快结束之前，数据库很友好的挂掉了。当时回去查看监控后发现，是在活动快结束前，大量用户都在疯狂的刷活动页，导致缓存过期的瞬间有大量未命中缓存的请求直接打到数据库上...阅读全文
此文包含 Java 面试的各个方面，史上最全，苦心整理最全Java面试题目整理包括基+JVM+算法+数据库优化+算法数据结构+分布式+并发编程+缓存等，使用层面广，知识量大，涉及你的知识盲点。要想在面试者中出类拔萃就要比人付出更多的努力，共勉！同时由于文章很长方便大家阅读在这我还整理了一些java面试常问高频的面试专题及答案和学习笔记文件以及视频资料免费分享给大家！java高频面试题如下（文末准备面试资料及答案免费领取）：java基础Arrays.sort实现原理和Collection实现原理f...阅读全文
不想当将军的兵不是好兵，就程序猿不想当架构师就不是好的程序员！Java架构师主要需要做哪些工作呢？1、负责设计和搭建软件系统架构（平台、数据库、接口和应用架构等），解决开发中各种系统架构问题。2、优化现有系统的性能，解决软件系统平台关键技术问题攻关、核心功能模块设计、核心代码开发。3、在项目需求不断细化的工程中校正整体的架构设计，以及详细模块拆分设计。4、营造技术学习氛围，带领团队不断完善开发开发方法及流程，提升开发效率与质量，加强技术标准及规范。5、带领团队攻克例如大数据量、高并发、高稳定性等...阅读全文
遇到的问题 异步对于绝大多数的开发而言并不陌生，在go语言中异步的实现变得异常方便。只要在执行的方法前加一个go关键字就可以实现异步操作。但是如果需求是，按照调用的先后顺序（FIFO）来返回值我们应该怎么办。大家都知道，一系列的方法调用如果使用了异步执行那么就并不能保证返回的先后顺序，返回的先后顺序取决于每个函数耗时的长短，耗时短的则会先返回。当然解决这个问题的办法有很多，在最近看的一本书中发现了chan嵌套chan可以很巧妙的实现这个需求。 没解决之前 先看一下没有使用嵌套chan的情况。代码...阅读全文
原文地址: Allocation Efficiency in High-Performance Go Services, 没有原模原样的翻译, 但不影响理解。 关于工具 我们的第一个建议就是: 不要过早优化。Go 提供了很棒的性能调优工具可以直接指出代码上哪里消耗了大量内存。没必要重复造轮子，建议读者阅读下 Go 官方博客上的这篇很赞的文章；里面会一步步教你使用 pprof 对 CPU 和内存进行调优。在 Segment 我们也是用这些工具去找到项目的性能瓶颈的。 用数据来驱动优化。 逃逸分析 ...阅读全文
承接前文Caprice: Golang版的高性能实时全文检索引擎(实现篇)，本文是系列文章的第四篇。系列文章地址如下:一. 如何构建实时全文检索引擎二. Caprice: Golang版的高性能实时全文检索引擎三. Caprice: Golang版的高性能实时全文检索引擎(实现篇)本篇主要介绍segment的设计。我们知道FST被认为是构建高效的倒排索引的核心，但它的缺点是修改不易，因此为了克服这个问题，包括lucene在内的检索引擎，在使用FST的时候几乎都选择了segment这个概念去处理这...阅读全文
