Go进阶 · 分布式爬虫实战- 极客时间课程推荐/优惠

Go进阶 · 分布式爬虫实战--极客时间课程推荐/优惠

构建企业级项目,进阶Go高级工程师
郑建勋Go语言技术专家,《Go语言底层原理剖析》作者
专栏 | 58讲 | 16716人已学习
优惠价¥68原价:199
官网优惠购买

版权声明

本站非极客时间官网,与官方无任何关系。我们不提供课程下载或详细内容,仅作为课程分享和推荐平台。我们鼓励大家支持正版,尊重创作者的劳动成果,这样不仅能帮助创作者持续产出优质内容,也能让自己获得更好的学习体验。请通过官方渠道购买和学习课程,感谢您的理解与支持。

课程详情

你将获得

  • 高效的编码规范与研发工具;
  • 深入Go语法背后的底层机制;
  • 高性能与可扩展的程序设计方法;
  • 复杂线上案例的全方位分析;
  • 大规模分布式系统的架构之道。

课程介绍

过去的十多年间,互联网行业迅猛发展,大数据、大规模集群计算、复杂的网络环境……各种新的挑战让人应接不暇。面对这些问题,一些早已发展成熟的语言显示出些许笨重和疲态,也就是在这一语境下,Go语言应运而生。

Go语言被称作是“云计算时代的 C 语言”,它专注于软件开发过程本身,简洁、易上手,且天生支持高并发编程。因此,也在众多编程语言中日益显示出其竞争力,市场需求有增无减。

然而,就是在这个崭新的赛道上,想要进阶成为 Go 高级工程师也并非易事。你可能有过这样的困惑:

  • 疲于应付需求,程序缺乏设计,代码也不规范,最终导致程序越来越难扩展和维护;
  • 不懂Go语法背后的运行机制,也不知道如何提升,无法解决复杂的系统问题;
  • 难以跳出开发,从上层视角思考系统的技术选型与架构设计;
  • 没有大规模云原生、分布式系统、微服务集群的实战经验,且缺乏学习路径。

为了解决这些问题,我们请到了深耕 Go 领域的郑建勋老师。他有着丰富的大规模云原生、分布式、微服务集群实战经验。

这门课程,他会把零碎的知识点串联起来,形成 Go 语言和系统设计的完整知识体系与方法论。然后理论融合实践,带你一起完成一个具备扩展性、高并发、分布式、微服务的复杂系统:

课程特色

课程主要有五大特色。

特色一:在“玩”中学,爬虫为基座

专栏以爬虫项目贯穿始终,从需求拆解和架构设计开始,带你独立完成能够支撑海量爬虫任务的高并发系统、具有故障容错能力的分布式系统、具备可扩展性和领域驱动的微服务系统。

特色二:谋定而动,写出“好”代码

专栏不只是讲解如何写代码,还会给出一流团队的编码规范与扫描工具。让我们摆脱过去的思维定势,摆脱疲于应付需求的现状,写出简洁、高效、健壮和可扩展的代码。

特色三:“深”入原理,理论结合实践

专栏在项目开发过程中,会融入底层原理知识,结合实践告诉你为什么代码要这样写,它背后的机制是怎样的。让你不仅知其然,也能够知其所以然。

特色四:硬核实战,“调”试复杂问题

专栏会为你总结出系统的性能分析方法论,并结合实战案例,手把手教你调试代码,定位线上复杂问题。并有节约了线上千台容器的性能分析实战案例。

特色五:不畏浮云遮望眼,掌“控”更大规模系统

此外,专栏还会跳出开发单一程序的狭隘视角,为你系统介绍大型互联网产品的整个生命周期。介绍大规模微服务集群的典型架构,深入探讨微服务协议、架构、治理等问题。

课程目录

开篇词

  • 开篇词|聚沙成塔,构建高性能、分布式爬虫项目

项目启动篇

  • 01|知识回顾:Go基础知识你真的掌握了吗?
  • 02|内有乾坤:Go语言六大基础知识体系
  • 03|进阶路线:如何深入学习Go语言?
  • 04|敏捷之道:大型Go项目的开发流程是怎样的?
  • 05|全局视野:洞悉项目开发流程与规范
  • 06|免费的宝库: 什么是网络爬虫?

系统设计篇

  • 07|冰川之下:深入Go高并发网络模型
  • 08|高性能设计:自顶向下的高性能Go程序设计与优化
  • 09|破解性能谜题:性能优化的五层境界
  • 10|微服务设计:微服务架构与演进
  • 11|微服务挑战:微服务治理体系与实践
  • 12|分布式系统设计:数据一致性与故障容错的纠葛
  • 13|智慧之火:详解分布式容错共识算法
  • 14|谋定而动:爬虫项目需求分析与架构设计

Worker开发与原理篇

  • 15|众人拾柴:高效团队的Go编码规范
  • 16|网络爬虫: 一次HTTP请求的魔幻旅途
  • 17|巨人的肩膀:HTTP协议与Go标准库原理
  • 18|依赖管理:Go Module 用法与原理
  • 19|从正则表达式到CSS选择器:4种网页文本处理手段
  • 20|面向组合:接口的使用场景与底层原理
  • 21|采集引擎:实战接口抽象与模拟浏览器访问
  • 22|优雅地离场: Context超时控制与原理
  • 23|偷梁换柱:为爬虫安上代理的翅膀
  • 24|日志处理:日志规范与最佳实践
  • 25 | 运筹帷幄: 协程的运行机制与调度器原理
  • 26|高并发爬虫:模型、控制与冲突检测
  • 27|掘地三尺:实战深度与广度优先搜索算法
  • 28|调度引擎:负载均衡与调度器实战
  • 29|细节决定成败:切片与哈希表的陷阱与原理
  • 30|辅助任务管理:任务优先级、去重与失败处理
  • 31|规则引擎:自定义爬虫处理规则
  • 32|存储引擎:数据清洗与存储
  • 33|固若金汤:限速器与错误处理
  • 34|服务注册与监听:Worker节点与etcd交互

测试与分析篇

  • 35|未雨绸缪:怎样通过静态与动态代码扫描保证代码质量?
  • 36|测试的艺术:依赖注入、表格测试与压力测试
  • 37|工具背后的工具:从代码覆盖率到模糊测试
  • 38|高级调试:怎样利用Delve调试复杂的程序问题?
  • 39|性能分析利器:深入pprof与trace工具
  • 40|资源调度:深入内存管理与垃圾回收
  • 41|线上综合案例:节约线上千台容器的性能分析实战

Master开发与原理篇

  • 42|他山之石:etcd架构之美
  • 43|分布式协调:etcd读写、MVCC原理与监听机制
  • 44|一个程序多种功能:构建子命令与flags
  • 45|Master高可用:怎样借助etcd实现服务选主?
  • 46|Master任务调度:服务发现与资源管理
  • 47|故障容错:如何在Worker崩溃时进行重新调度?
  • 48 | 完善核心能力:Master请求转发与Worker资源管理
  • 49 | 服务治理:如何进行限流、熔断与认证?

特别放送

  • 特别放送|Go泛型:用法、原理与最佳实践
  • 特别放送|回头看:如何更好地组织代码?
  • 结束语|登高望远,迈向新的高峰
  • 期末测试 | 来赴一场满分之约吧~

部署篇

  • 50|不可阻挡的容器化:Docker核心技术与原理
  • 51 | 多容器部署:如何利用 Docker Compose快速搭建本地爬虫环境?
  • 52 | 容器海洋中的舵手:Kubernetes工作机制
  • 53|容器化实战:怎样搭建K8s爬虫集群?

作者介绍

郑建勋,Go语言技术专家,《Go语言底层原理剖析》作者,Go语言垃圾回收源码贡献者,Go语言精度库 shopspring/decimal 核心贡献者,极客时间每日一课作者。曾获得电子工业出版社年度优秀作者与 2021 CSDN年度十大图书作者。 作者曾就职于人工智能独角兽公司的视觉中台与大型互联网企业的业务中台,拥有丰富的大规模云原生、分布式、微服务集群的实战经验。确保了百万级流量系统的服务稳定性,并经历和主导了复杂业务系统的性能优化与系统重构。 此外,作者还具有丰富的教育经验,曾作为 51CTO 高级讲师,帮助了上百位同学从 0 到 1 用 Go 语言搭建出完整的项目,完成了职场上的进阶。他也为华为特训营、联想超级课等企业内训项目提供了培训和技术支持。2022年,开始于B站、博客连载Go语言入门课程:《Go语言开挂入门之旅》。

推荐

深入剖析Kubernetes - 极客时间课程推荐/分享/优惠/折扣
深入剖析Kubernetes
Kubernetes原来可以如此简单
张磊Kubernetes社区资深成员与项目维护者
专栏 | 119982人已学习
优惠价¥68原价:199
官网优惠购买
LLaMA 3前沿模型实战课 - 极客时间课程推荐/分享/优惠/折扣
LLaMA 3前沿模型实战课
玩转LLaMA 3,全面驾驭其模型能力
Tyler前亚马逊应用科学家,头部大厂 AIGC 算法技术负责人
专栏 | 1415人已学习
优惠价¥59原价:99
官网优惠购买
微服务架构核心20讲 - 极客时间课程推荐/分享/优惠/折扣
微服务架构核心20讲
从理论到实践,理解微服务关键问题
杨波拍拍贷框架研发部总监,资深架构师,微服务技术专家
视频课 | 49186人已学习
优惠价¥29原价:68
官网优惠购买
手写Python虚拟机 - 极客时间课程推荐/分享/优惠/折扣
手写Python虚拟机
华为编译专家揭秘 Python 底层原理
海纳华为编译器高级专家,原Huawei JDK团队负责人
专栏 | 1641人已学习
优惠价¥59原价:99
官网优惠购买
AI Excel从入门到实战 - 极客时间课程推荐/分享/优惠/折扣
AI Excel从入门到实战
解放双手,数据处理十倍提效
张海航某央企人工智能高级工程师
视频课 | 668人已学习
优惠价¥29原价:68
官网优惠购买
工程师个人发展指南 - 极客时间课程推荐/分享/优惠/折扣
工程师个人发展指南
一手工作,一手生活,全面发展
李云前阿里高级技术专家,《全面效能》作者
专栏 | 2976人已学习
优惠价¥59原价:99
官网优惠购买