数据采集和解析 HTML页面分析 使用requests获取页面 四种采集方式 四种采集方式的比较 使用正则表达式 使用XPath和Lxml BeautifulSoup的使用 PyQuery的使用 实例 - 获取知乎发现上的问题链接 数据采集和解析 通过《网络爬虫和相关工具》 一文，我们已经了解到了开发一个爬虫需要做的工作以及一些常见...

1.7 错误和异常 1.7.1 错误处理策略 1.7.2 获取错误的上下文 1.7.3 错误的错误返回 1.7.4 剖析异常 1.7 错误和异常 错误处理是每个编程语言都要考虑的一个重要话题。在Go语言的错误处理中，错误是软件包API和应用程序用户界面的一个重要组成部分。 在程序中总有一部分函数总是要求必须能够成功的运行。比如strconv...

目录 目录 前言 Go语言起源 Go语言项目 本书的组织 更多的信息 致谢 入门 Hello, World 命令行参数 查找重复的行 GIF动画 获取URL 并发获取多个URL Web服务 本章要点 程序结构 命名 声明 变量 赋值 类型 包和文件 作用域 基础数据类型 整型 浮点数 ...

gRPC及相关介绍 一、RPC 什么是 RPC 实际场景： RPC 框架 常见 RPC 框架 比较一下 为什么要 RPC RPC 可以基于 HTTP 吗 二、Protobuf 介绍 语法 数据类型 v2 和 v3 主要区别 相较 Protobuf，为什么不使用 XML？ 三、gRPC 介绍 多语言 特点 概览 讲解 示例...

4.5. JSON 4.5. JSON JavaScript对象表示法（JSON）是一种用于发送和接收结构化信息的标准协议。在类似的协议中，JSON并不是唯一的一个标准协议。 XML（§7.14）、ASN.1和Google的Protocol Buffers都是类似的协议，并且有各自的特色，但是由于简洁性、可读性和流行程度等原因，JSON是应用最广泛的...

4.6 GRPC和Protobuf扩展 4.6.1 验证器 4.6.2 REST接口 4.6.3 Nginx 4.6 GRPC和Protobuf扩展 目前开源社区已经围绕Protobuf和GRPC开发出众多扩展，形成了庞大的生态。本节我们将简单介绍验证器和REST接口扩展。 4.6.1 验证器 到目前为止，我们接触的全部是第三版的Prot...

面试中的公共问题 计算机基础 Python基础 Django和Flask 爬虫相关 数据分析 项目相关 面试中的公共问题 计算机基础 TCP/IP模型相关问题。 建议阅读阮一峰的《互联网协议入门（一）》 和《互联网协议入门（二）》 。 HTTP和HTTPS相关问题。 建议阅读阮一峰的《HTTP 协议入门》 和《SSL...

报表和日志 导出Excel报表 生成前端统计图表 配置日志 配置Django-Debug-Toolbar 优化ORM代码 报表和日志 导出Excel报表 报表就是用表格、图表等格式来动态显示数据，所以有人用这样的公式来描述报表： 报表 = 多样的格式 + 动态的数据 有很多的三方库支持在Python程序中写Exc...

CouchDB 简介 CRDBMS：关系数据库管理系统 NoSQL数据库 键-值存储 列存储 文件存储 CouchDB是什么？ 为什么使用CouchDB？ CouchDB 简介 CouchDB是由Apache软件基础开发的开源NoSQL数据库，它是用Erlang编程语言编写的。 有两种类型的数据库： 关系数据库管理系统(遵循SQL...

PSR-7 HTTP 消息接口规范 HTTP 消息接口 参考文献 1. 详细描述 1.1 消息 1.2 HTTP 请求头信息 大小写不敏感的字段名字 对应多条数组的头信息 主机信息 1.3 数据流 1.4 请求目标和 URI 1.5 服务端请求 1.6 文件上传 2. 扩展包 3. 接口 3.1 Psr\Http\Message\...