code-scan starred Introduction-to-Golang

title	Link
Go (Golang) Tutorial - Go语言入门教程 #1 ~ #22	百度网盘：btjy
GopherCon 2017- Russ Cox - The Future of Go	百度网盘：zx1w
GopherCon 2018- George Tankersley - Micro optimizing Go Code	百度网盘：tzau
GopherCon 2018- Kat Zien - How Do You Structure Your Go Apps	百度网盘：qmrq
GopherCon 2018 Lightning Talk- Aidan Coyle - Lazy JSON Parsing	百度网盘：g4f5
GopherCon 2018 Lightning Talk- Alan Braithwaite - Web Session Management in Go	百度网盘：2ibm
GopherCon 2018 Lightning Talk- Hugo Torres - Talking to the Docker Socket	百度网盘：unlh
GopherCon 2019- Dave Cheney - Two Go Programs, Three Different Profiling Techniques	百度网盘：kgjj
Let's Go - Why I'm moving to Go Programming Language - Why GoLang has a Promising Future	百度网盘：ewon
Golang's Garbage - USENIX	百度网盘：kkl4
Golang REST API With Mux	百度网盘：el4d
Golang Crash Course	百度网盘：v4jw
Brad Fitzpatrick Go 1 11 and beyond	百度网盘：yg9r
dotGo 2015 - Rob Pike - Simplicity is Complicated	百度网盘：594c

🏗 开源项目（段位纯属分类管理，不分先后）

王者段位

项目	简介
docker	无人不知的虚拟化平台，开源的应用容器引擎，借助该引擎，开发者可以打包他们的应用，移植到任何平台上。
golang	go本身，也是用go语言实现的，包括他的编译器，要研究go源代码的可以看此项目录
kubernetes	Google出品，用于调度和管理docker的开源容器管理系统，利用他，可以方便的管理你的docker实例，哪怕非常多，也是目前最流行的docker管理系统。
gogs	一款基于git的代码托管系统，类似于github和gitlab，不过其小巧易用，功能强大，部署方便，也有不少用户在使用。
syncthing	开源的文件同步系统，它使用了其独有的对等自由块交换协议，速度很快，据说可以替换BitTorrent Sync。
grafana	一款开源监控度量的看板系统，可以接Graphite、Elasticsearch、InfluxDB等数据源，定制化很高。
etcd	一款分布式的，可靠的K-V存储系统，使用简单，速度快，又安全。
hub	一款更便捷使用github的工具，包装并且扩展了git，提供了很多特性和功能，使用和git差不多。
influxdb	可伸缩的数据库，使用场景主要用来存储测量数据，事件点击以及其他等实时分析数据，用来做监控性能很不错。
caddy	快速的，跨平台的HTTP/2 Web服务器。
beego	国产开源的高性能Web框架，让你快速的开发Go Web应用服务，谢大主笔。
martini	也是一款不错的Web框架。
cayley	Google开源的图数据库，这是一个NoSql数据库，适合处理复杂的，但是结构化低的数据，适用于社交网络，推荐系统等。
nsq	一款开源的实时的，分布式的消息中间件系统。
codis	Codis是一个分布式Redis解决方案，其实就是一个数据库代理，让你在使用Redis集群的时候，就像使用单机版的Redis是一样的，对开发者透明。
delve	这个Go开发者都知道，一款go应用开发的调试工具。
cobra	cobra是一个命令行go库，可以让你创建非常强大的，现代的CLI命令行应用。
megaease/easegress	云本地流量编排系统

大师段位

项目	简介
Viper	Viper 是一个完整的 Go 应用配置解决方案。
echo	高性能、极简主义的 Go Web 框架
uber-go/fx	一个基于依赖注入的 Go 应用框架。
Swagger	生成器、UI 和验证
Logrus	Logrus 是一个适用于 Go(golang) 的结构化记录器，与标准库记录器完全 API 兼容。
mockery	Golang 的模拟代码自动生成器
migrate	用 Go 编写的数据库迁移。作为 CLI 使用或作为库导入。
NSQ	消息传递
sqlx	sqlx 是一个库，它在 Go 的标准 database/sql 库上提供了一组扩展。
Macaron	一款具有高生产力和模块化设计的 Go Web 框架
Gin	轻量 Web 框架
zinx	TCP并发服务器框架
Negroni	Web 中间件
csrf	CSRF 中间件
handlers	Go的net/http包的有用处理程序集合
SizedWaitGroup	并发控制
concurrent	并发工具包
grab	文件下载
go-netty	网络框架

钻石段位

项目	简介
gorilla/websocket	Go的一个快速、经过良好测试和广泛使用的WebSocket实现。
nhooyr/websocket	常用的Go WebSocket库
websocketd	Go 开发的一键搭建 WebSocket 服务器命令行工具
ws	WebSocket 开发包
melody	WebSocket 服务框架
neffos	一个现代的、快速的、可扩展的websocket框架，带有优雅的Go API
fastws	fastttp和net/http的快速WebSocket实现。默认支持并发读写操作。
Centrifugo	实时消息服务器，可以与任何语言编写的应用程序后端结合使用
goim	支持集群的 im 及实时推送服务
Tinode	即时消息服务器，通过 websocket/JSON 或 gRPC/TCP 等协议传输
WebRTC	WebRTC 实现
Berty	安全的点对点通讯软件
Keybase	即时通讯工具 Keybase 全平台客户端
golang/protobuf	Go 版本的 Protocol Buffers
gogo/protobuf	golang/protobuf 的扩展替代品
Objx	操作 map、slice、JSON 等数据的包
gorilla/rpc	构建基于 HTTP 的 RPC 服务，比如 JSON-RPC
Twirp	基于 Protobuf 的 RPC 框架，与 gRPC 类似

铂金段位

项目	简介
dubbo-go	Apache Dubbo Go 语言实现，架起 Java 和 Golang 之间的桥梁，与 gRPC/Spring Cloud 生态互联互通，带领 Java 生态享受云原生时代的技术红利
NSQ	实时分布式消息平台
NATS	云原生消息中间件
sarama	Kafka 客户端
InfluxDB	时间序列数据库
Thanos	支持 Prometheus 简化部署、高可用、分布式存储
CockroachDB	分布式 SQL 数据库
RadonDB	基于 MySQL 研发的新一代分布式关系型数据库
TiDB	分布式关系型数据库，兼容 MySQL 协议
AresDB	Uber 开源的 GPU 驱动的实时分析存储&查询引擎
leveldb	LevelDB 的 Go 实现
GCache	golang的内存缓存库。支持多种驱逐政策:LRU、LFU、ARC
go-cache	Go的内存键:值存储/缓存(类似于Memcached)库，适用于单机应用程序。
groupcache	分布式缓存
cachego	支持 Redis、Bolt 等缓存接口
go-tagexpr	字节跳动开源的结构体标签表达式解释器
goav	FFmpeg 视频处理
rosedb	基于 bitcask 的 k-v 存储模型，高效、快速、简洁

🖼 大厂实战分享ppt

📄 论文与理论分析

Title	Translation（参考）	Company
《Acme: A User Interface for Programmers》	程序员的用户界面	AT&T,贝尔实验室
《Understanding Real-World Concurrency Bugs in Go》	了解真实go中的并发bug	宾夕法尼亚州立大学
《A Formal Model of the Kubernetes Container Framework》	Kubernetes容器框架的形式化模型	奥斯陆大学
《Running Cloud Native Applications on DigitalOcean Kubernetes》	在DigitalOcean Kubernetes上运行云本地应用	未知
《Kubernetes as an Availability Manager for Microservice Applications》	Kubernetes作为微服务应用程序的可用性管理器	康科迪亚大学
《Borg, Omega, and Kubernetes》	Borg、Omega 和 Kubernetes	GOOGLE
《A Raft-based HTAP Database》	基于raft的HTAP数据库	VLDB基金会论文集
《For Reproducible Environments and Containerized Applications》	用于可复制环境和容器化应用程序	圣克劳德州立大学
《Escape from Escape Analysis of Golang》	golang逃离分析	清华大学
《Using gRPC with Go》	在Go中使用gRPC	未知

☁ 云原生

这里我们讲云原生，主要目的是为了大家如何利用云原生技术，快速地使用go语言开发。而不是研究云原生本身的技术。

我们以腾讯云为例，列举腾讯云为我们提供的云原生接口项目：（列举部分我们常见的）

实时音视频
- 混流转码
- 房间管理
- 其他接口
- 通话质量监控
云点播
- 视频处理
- 参数模板
- 其他接口
- 任务流
- 分发
- 媒资管理
- 视频上传
- 事件通知
- AI 样本管理
- 视频分类
- 任务管理
- 域名管理
- 数据统计
视频处理
- 视频处理
- 工作流管理
- 其他接口
- 解析事件通知
- AI 样本管理
- 参数模板
- 任务管理
腾讯云剪
- 平台管理
- 项目管理
- SaaS 平台管理
- Headless媒体合成
- 任务管理
- 视频编辑项目
- 媒体资源管理
- 媒资授权
- 团队管理
- 分类管理
- 登录态管理
- 其他接口
智能编辑
- 画质重生任务
- 媒体质检任务
- 编辑理解
- 编辑处理
即时通信 IM
- 获取云通信 IM 的 SDKAppid
短信
- 短信统计
- 发送短信
- 拉取状态
- 短信模板
- 短信签名
分布式消息队列
- 集群
- 命名空间
- 主题
- 消息
- CMQ管理
- CMQ消息
- 其他接口
- 生产消费
消息队列 Ckafka
- 主题
- ACL
- 实例
- 路由
- 其他接口
验证码
- 控制台
- 服务器
文本内容安全
图片内容检测
- 图片内容审核
- 图片内容检测
音频内容检测
- 创建音频审核任务
- 查看任务详情
- 查看审核任务列表
- 短音频识别接口
- 取消任务
视频内容安全
- 查看审核任务列表
- 查看任务详情
- 创建视频审核任务
- 取消任务
文字识别
- 通用文字识别
- 卡证文字识别
- 票据单据识别
- 汽车场景识别
- 行业文档识别
- 智能扫码
- 营业执照核验
- 增值税发票核验
图像分析
- 图像理解
- 图像处理
- 图像审核
- 图像质量检测
智能识图
- 商品识别
语音识别
- 语音流异步识别
- 录音文件识别
- 一句话识别
- 自学习
- 热词
语音合成
- 长文本语音合成
- 通用语音合成
智能语音服务
- 语音合成
- 其他接口
- 语音识别
云直播
- 水印管理
- 证书管理
- 录制管理
- 直播流管理
- 延播管理
- 直播拉流
- 直播转码
- 截图鉴黄
- 鉴权管理
- 域名管理
- 直播回调
- 统计查询
- 实时日志
- 直播混流
小程序 · 云直播
- live
- 其他接口
- 直播
人脸识别
- 人脸检测与分析
- 五官定位
- 人脸比对
- 人员库管理
- 人脸搜索
- 人脸验证
- 人脸静态活体检测（高精度版）
- 人脸静态活体检测
- 人员查重
内容安全
- 内容安全
- 图片内容安全
- 文本内容安全
- 自定义识别
自然语言处理
- 向量技术
- 词法分析
- 句法分析
- 篇章分析
- 知识图谱
- 对话机器人
  ......

📥 源码下载

Go官网下载地址：https://golang.org/dl/

Go官方镜像站（推荐）：https://golang.google.cn/dl/

🏃‍♂ 开启Go语言学习之旅，从"Hello World"开始！

Step 1：了解源代码目录结构

文件名	文件属性
AUTHORS	文件，官方 Go语言作者列表
CONTRIBUTORS	文件，第三方贡献者列表
LICENSE	文件，Go语言发布授权协议
PATENTS	文件，专利
README	文件，README文件，大家懂的。提一下，经常有人说：Go官网打不开啊，怎么办？其实，在README中说到了这个。该文件还提到，如果通过二进制安装，需要设置GOROOT环境变量；如果你将Go放在了/usr/local/go中，则可以不设置该环境变量（Windows下是C:\go）。当然，建议不管什么时候都设置GOROOT。另外，确保$GOROOT/bin在PATH目录中。
VERSION	文件，当前Go版本
api	目录，包含所有API列表，方便IDE使用
doc	目录，Go语言的各种文档，官网上有的，这里基本会有，这也就是为什么说可以本地搭建”官网”。这里面有不少其他资源，比如gopher图标之类的。
favicon.ico	文件，官网logo
include	目录，Go 基本工具依赖的库的头文件
lib	目录，文档模板
misc	目录，其他的一些工具，相当于大杂烩，大部分是各种编辑器的Go语言支持，还有cgo的例子等
robots.txt	文件，搜索引擎robots文件
src	目录，Go语言源码：基本工具（编译器等）、标准库
test	目录，包含很多测试程序（并非_test.go方式的单元测试，而是包含main包的测试），包括一些fixbug测试。可以通过这个学到一些特性的使用。

Step 2：Golang开发后台掌握哪些知识点？

这里我给大家整理归纳为四大块，分别是语法、中间件、后端开发、云原生。

我们通过这个四个板块的学习，逐步进阶成一个可以从事后端服务器开发的工程师。

下面我们简单介绍中间件和云原生：

中间件

MySQL、Redis、MongoDB、Kafka这些常见的中间件，这里我们不做赘述。我们着重简述下Gin、etcd、ElasticSearch、gRPC。

Gin
Gin是一个用Go (Golang)编写的HTTP web框架。它具有一个类似martinii的API，性能要好得多——快了40倍。
官方Github项目：https://github.com/gin-gonic/gin
etcd
Etcd是一种强一致性的分布式键值存储，它提供了一种可靠的方法来存储需要被分布式系统或机器集群访问的数据。它可以在网络分区期间优雅地处理leader选举，并且可以容忍机器故障，即使是leader节点。
官网：https://etcd.io/
ElasticSearch
Elasticsearch 是一个分布式、RESTful 风格的搜索和数据分析引擎，能够解决不断涌现出的各种用例。作为 Elastic Stack 的核心，它集中存储您的数据，帮助您发现意料之中以及意料之外的情况。
官网：https://www.elastic.co/cn/elasticsearch/
gRPC
gRPC是一个现代的开源高性能远程过程调用(Remote Procedure Call, RPC)框架，可以在任何环境中运行。通过对负载平衡、跟踪、运行状况检查和身份验证的可插拔支持，它可以有效地连接数据中心内和跨数据中心的服务。它也适用于分布式计算的最后一英里，将设备、移动应用程序和浏览器连接到后端服务。
官网：https://grpc.io/

云原生

微服务
微服务是一种软件架构风格，它是以专注于单一责任与功能的小型功能区块为基础，利用模块化的方式组合出复杂的大型应用程序，各功能区块使用与语言无关的API集相互通信。
DevOps
DevOps是一种重视“软件开发人员”和“IT运维技术人员”之间沟通合作的文化、运动或惯例。透过自动化“软件交付”和“架构变更”的流程，来使得构建、测试、发布软件能够更加地快捷、频繁和可靠。
持续部署
持续部署，是一种软件工程方法，意指在软件开发流程中，以自动化方式，频繁而且持续性的，将软件部署到生产环境中，使软件产品能够快速的发展。持续部署可以整合到持续整合与持续交付（Continuous delivery）的流程之中。
容器化
容器化是软件开发的一种方法，通过该方法可将应用程序或服务、其依赖项及其配置（抽象化为部署清单文件）一起打包为容器映像。容器化应用程序可以作为一个单元进行测试，并可以作为容器映像实例部署到主机操作系统 (OS)。

Step 3：如何高效地学习Go？

想要高效地的学习Golang，单单知道学习哪几个板块，是远远不够的。我们还需要将每个板块的知识点进一步细化。
——成功与失败之间，最重要的是不容忽视的细节

那么开始进一步完善之前的知识点：

语法

语法基础
- 错误处理
- 包定义以及导入
- 结构体
- 反射原理
- 值传递、引用传递、defer函数
并发编程
- goroutine
- 锁
- 通道channel
- runtime包
- Context使用原则
网络编程
- tcp/udp编程
- http实现
- websocket
源码掌握
- GC机制
- 调度器
- 定时器
- map与切片
第三方测试框架
- goconvey
- gostub
- gomock
- monkey

中间件

MySQL
- golang的CRUD
- jmorion/sqlx包
- 连接池
- 异步mysql
Gin
- RESTful API
- URL查询参数
- query接收数组和Map
- 表单参数
- 上传文件
- 分组路由routel以及中间件授权
- json、struct、xml、yaml、protobuf渲染
Redis
- go-redis
- get/set/zset操作
- 连接池
- 分布式锁
MongoDB
- MongoDB-driver
- BSON解析
- CRUD操作
- 文档管理
- 连接池
Kafka
- saram包
- 同步、异步
- zstd压缩算法
- 横向扩展
- go实现生产消费者
- topic和partition
- 消息分发策略
- 分区副本机制
etcd
- 原理
- 分布式锁
- etcd操作
- 服务发现于注册
ElasticSearch
- es服务器
- go- elasticsearch包
- node于cluster
- Index于Document
- 检测与配置
gRPC
- protoc-gen-go开发包
- .proto文件
- gRPC Service Stub
- rpc接口设计
- 通信模式
- 拦截器
- 多路复用
- 负载均衡
- 安全认证

后端开发

游戏后端
- leaf框架
- 网关、协议、日志、网络模块
流媒体Web后端
- Restful接口设计
- scheduler设计
- apidefs结构体
- mysql建库建表
小程序后端
- 公众号开发流程
- 微信消息接收与解析
- 公众号验证URL+Token
- 内网环境接口测试
- 后端程序测试脚本
goadmin后台权限管理系统
- RESTful API设计
- Gin框架
- JWT认证
- 支持Swagger文档
- GORM对象关系映射
- 基于Casbin的RBAC访问控制模型
goim千万级高并发推送服务
- 单个、多个、广播消息推送
- 应用心跳、tcp、keepalive、http log pulling
- 异步消息推送
- 接入层多协议
- 可拓扑架构
- 注册发现服务
- 消息协议（protobuf）
- goim推送
- grpc编程
腾讯云大数据
- TBDS
- 云数据仓库PostgreSQL
- 弹性MapReduce
- WeData数据开发平台