用 Workerman 及 EMQX 做一个简单的 MQTT 示例
$ docker run -d --name emqx -e EMQX_DASHBOARD__DEFAULT_PASSWORD=admin --network=lnmp -ti -p 18083:18083 -p 1883:1883 -p 8083-8084:8083-8084 -p …
分类: 计算机网络
共 34 篇文章
通过 Chrome DevTools Protocol 协议控制浏览器
之前写过Selenium是怎么指挥浏览器运行的，其中提到过通过CDP(Chrome DevTools Protocol)协议可以直接绕过浏览器驱动来控制浏览器。CDP本质上就是通过WebSocket协议传输JSON格式的命令。
使用CDP时，无需浏览器驱动，但依然依赖浏览器。因此，控制浏览器的第一步 …
Selenium 是怎么指挥浏览器运行的
写过爬虫或者做自动化测试的相信对Selenium不会陌生，但Selenium 官方只提供少数几种语言的库，使用其它“小众”语言的只能眼馋。既然如此，那就自己琢磨一下能不能搞个类似的吧，毕竟大家都是图灵完备的语言，除了少数一些领域实在没办法或者几乎不可能做到之外，其它的都大差不差。
“小小”的语言能唤 …
使用 frp 将本地 web 服务暴露到公网
使用 frp 的前提条件是有公网IP的服务器，毕竟标题所讲的就是内网穿透。内网穿透，要么买服务，要么就自己搭，frp就是一款高性能的反向代理应用，专注于内网穿透，主打一个免安装，Go语言写的嘛，交叉静态编译就是香。
像微信以及一些服务，需要提供公网HTTP地址甚至必须是HTTPS服务才能申请或测试， …
一个简单的 RPC 示例
远程过程调用——RPC(Remote Procedure Call)，在《UNIX 网络编程》一书中是这样描述的：被调用过程和调用过程处于不同的进程中，一个进程调用同一台主机上另一个进程的某个过程（函数）。RPC通常允许一台主机上的某个客户调用另一台主机上的某个服务器过程，只要这两台主机以某种形式的 …
尴尬的 curl 和尴尬的我
事情的起因是这样的，对接某个接口，一个POST请求的请求体比较大（注：跟系统和curl的版本有关，有的并不会发送Except请求头），curl默认给我发送了Expect请求头，事前我并不知道，但一直没调通，对方就提出要看看我的HTTP报文。
糟糕，你让我手写一个HTTP请求报文，我分分钟就能写出来， …
似乎挺多人不知道 PHP 可以通过 URL 甚至请求体来传递 SESSION_ID
由于HTTP是无状态的，服务端不知道前一个访问者跟后一个访问者是否为同一人，于是会话机制出现了。session和cookie几乎总是同时出现的。cookie是由服务端创建、由客户端保存的小块数据，在用户再次访问服务时，会带上该服务端对应的cookie，服务端比对后就能辨别出用户身份。而在服务端跟 …
一个简单的 HTTP 路由
HTTP路由是一个负责将HTTP请求路由到对应控制器的组件，它可以将应用的逻辑解耦到不同的控制器中，让代码易于维护。
路由有很多实现的方式，例如通过注解如#[Route('/foo/bar', methods: ['GET', 'POST'])]、路由配置文件、编程语言本身等等。下面以PHP的路由作 …
JSON Web Token 实现
结构 JSON Web Token 由.分隔为三个部分，分别是：
Header Payload Signature 如Header.Payload.Signature。
Header Header 由两部分组成，签名算法和令牌类型，签名算法有 HMAX SHA256 或 RSA 等，令牌类型则是 …
WebSocket 原理探究
WebSocket 究竟是什么东西呢？貌似有人看到 WebSocket 里面有 Socket 就以为它跟 Socket 有什么关系。呃，要真说它们有什么关系，也确实有，WebSocket 跟 Socket 之间还隔着一层 HTTP，姑且算是有关系吧。
WebSocket 协议是基于 HTTP 实现的 …
连接池的实现原理
连接池是什么东西？所谓连接，指的是TCP连接，而池，则是容器，普通的池子可以容纳水等物体，而连接池，则是容纳TCP连接的容器。
现实中的容器可以是多种材质的，连接池也不例外，连接池可以用各种数据结构来实现，只要能保存并允许使用连接即可。为了方便，本文仅用一个变量来模拟连接池。以下是完整的示例。 …
Web 终端实现原理
平时看到各种云平台提供的 Web 终端操作页面，觉得还挺有意思，恰好最近要实现一个类似的玩意。
由于前端不是我擅长的方向，所以我的前端并没有使用什么高大上的东西，也没有什么美观可言，仅仅使用了 WebSocket 进行命令的传输（可以用 xterm.js 来做前端，有空再玩玩吧）。终端的关键在于命令 …
消息推送平台原理探究
刚入行的时候就用过第三方消息推送平台进行手机通知的推送，当时着实让我感觉很头疼，很多术语都不懂，后面也没有进一步地思考。昨天看到一个比当年的我要好些的菜鸟问了一个关于推送的问题，让我有了整理推送原理的想法。当然，我也只是凭着当前的积累进行推算，毕竟我没写过手机APP。
下面就以友盟推送为例，推送的过 …
SSH 端口转发
本文整理自https://www.ibm.com/developerworks/cn/linux/l-cn-sshforward/index.html，主要是将示例改成自己熟悉的 redis。
端口转发 SSH 会自动加密和解密所有SSHClient和SSHServer之间的网络数据，同时还提供了 …
CDN
CDN(Content Distributed Network)是内容分发网络的缩写。
由于 Github Pages 的速度一直不怎么样，今天就想起来要加速一下；本来 Pages 就是静态博客，加个 CDN 就得了。刚开始还想找个免费的蹭下，后来发现还要认证就算了，还是直接上阿里云比较省心，全家桶 …
有趣的 screen
这几天学习发现了一个很好玩的命令——screen。screen 是一个可以在多个进程之间复用一个物理终端的全屏窗口管理器，只要 screen 本身没有终止，其内部运行的会话都可以恢复，即使是网络中断。
有时候我们需要远程执行一些任务，如备份，开启的远程终端窗口在任务执行完毕之前不能关掉该窗口，否则任 …
Nginx 反向代理
最近在云服务器部署了 Jupyter，跟其它服务都堆在一台主机上了，又不想暴露太多端口，所以就用 Nginx 搞了下反向代理。
首先，先为 Jupyter 分配一个域名，该域名指向 Nginx 所在主机。个人主页暂时用的是host.xxx.cn，于是给 Jupyter 分配了个 …
Go 语言实现 Redis 客户端
除 Telnet 以及 Go 代码部分之外，其它内容基本翻译自官网。另外，写完本文之后，发现一篇文章写得更好，代码当然也比我的更好，传送门 Reading and Writing Redis Protocol in Go。路漫漫，我还要更努力。
其实去年就看过实现 Redis 客户端的一些文章，但 …
Github Pages 自定义域名
重新注册了个域名，有时候 web 开发没有域名还真是不方便。一下买了五年，美滋滋，当然顺便也要给 Github Pages 加个自己的烙印的。
为 Github Pages 添加自定义域名 如下进入设置页面，将自定义的域名填入Customer domain下的输入框中，如果要用 HTTPS 传输，则 …
断点续传之上传
这篇文章主要讲断点续传的上传原理。
断点续传指的是在文件传输时将文件进行切分，每个部分的传输都是独立的，并且在遇到网络故障时，可以在网络通畅之后继续传输的未曾传输的部分，并不需要重新传输。
根据以上描述，Web 端的文件上传步骤如下。为了思路的清晰，以下代码十分简陋，没有进行相应的错误处理，而且是非 …
FastCGI 协议初接触
准备 Nginx 配置 user root admin; worker_processes 2; events { worker_connections 1024; } http { include mime.types; default_type text/html; gzip on; …
CGI 初探
CGI(Common Gateway Interface)，通用网关接口，用于 web 服务器和外部应用程序（CGI 程序）之间的通信。为了探索 CGI 是如何工作的，我分别用 C 和 Python 语言写了段测试程序（均生成可执行程序），以及说明了一下解释型语言的 CGI 写法。
C 程序 编译 …
POP3 简介
SMTP 协议是push协议，因此不能用于收邮件。POP3 协议是 Post Office Protocol。
$ telnet pop.qq.com 110 Trying 59.37.97.57... Connected to pop.qq.com. Escape character is …
SMTP 简介
SMTP(Simple Mail Transfer Protocol) 是基于文本的简单邮件协议，默认使用 25 端口。下图展示了 SMTP 的基本操作。
Alice 通过 user agent 指定 Bob 的邮件地址以及编辑邮件，然后发送邮件；
Alice 的 user agent 先把邮件发送 …
对 https 工作方式的简要解释
Diffie-Hellman 算法 对于一个素数p来说，当一个数g满足以下条件：当1 <= x <= p-1时，如果(g^x) mod p能产生[1, p-1]的所有数值，就称 g 是 p 的 generator。例如，对素数 p = 7 来说，g = 3 就是它的 …
Cookie 和 Session
HTTP 协议是无状态的，用户的每一次请求都是独立的。有时候我们需要知道哪些请求是跟用户相关的，例如，购物车的商品属于哪个用户。web 规范给出的解决方案是经典的 cookie 和 session。cookie 是一种客户端机制，将用户的数据保存到客户端；session 是一种服务端机制，将数据以类 …
Data URLs
语法 Data URLs，即前缀为data:协议的 URL，其允许内容创建者向文档中嵌入小文件。
Data URLs 由四个部分组成：前缀(data:)、指示数据类型的 MIME 类型、如果非文本则为可选的base64标记、数据本身： …
内网穿透原理浅析
以前用过一下花生壳穿透内网，当时觉得这玩意太神奇了，有了这工具只需要在本地开发完就可以让别人直接访问，不需要烦琐的部署。可惜当初自己能力不够，只有眼馋的份。最近开始钻计算机网络这块知识，仅仅看理论觉得不过瘾，刚好看到 NAT 这块，找到了关于内网穿透的一些文章，希望自己写代码实现一个内网穿透工具，加 …
通过 Socket 理解 HTTP
随着基于 web 的软件（web 应用、微服务、REST、SOAP 等）的日益流行，思考其背后的原理总是好的。当我冒险进入 Flask 或者 Django 这样的框架时 这对我特别有用。
那么我们对其深入了解到什么程度呢？协议栈中最主要的传输协议 TCP 和 UDP。
TCP 和 UDP 这里就不详 …
从 Socket 编程到 HTTP 服务器
整理自：从 Socket 编程到 HTTP 服务器
Socket 传输层协议很复杂，这些应该是属于操作系统内核的部分，没必要重复开发。但是对于应用程序来说，操作系统需要抽象出 一个概念，让上层应用去编程，这个概念就是"Socket"，就像插座一样，一个插头插进插座，建立了连接 …
网卡与路由器
整理自：网卡与路由器
TODO: 以下只是梗概 DHCP 网卡都有一个全球唯一的地址，这个地址在网卡制造时就是确定的，称为 MAC 地址。如：11:27:F5:8A:79:54。
电脑初接网络时，需要确定 IP 地址，由 DHCP（动态主机配置协议）分配。
但是电脑刚接入网络，不知道 DHCP 在 …
网络协议入门
刚系统学习网络协议不久，苦于一直找不到适合自己思路的教程，只好东拼西凑地阅读各种文章书籍，好不容易才拼凑出便于自己理解的网络协议说明书。 该说明书从最常用的网络程序——浏览器入手。
OSI 模型把网络通信工作分为七层：应用层、表示层、会话层、传输层、网络层、数据链路层以及物理层；实际上使用的 …
DNS 原理
整理自DNS 原理入门
DNS(Domain Name System)的作用是根据域名查询对应的 IP 地址，DNS 协议是应用层协议。
查询过程 DNS 的查询过程非常复杂，分成多个步骤。可以用工具dig显示整个查询过程。
$ dig github.com ; <<>> …
浅谈 HTTP
学习开发时间也不短了，越是深入学习，越是觉得自己的知识体系不够系统，对一些通用知识不够了解。之前看的书不少， 有一定拓展，但缺点就是少了思考及练习，窃以为写文章总结是一种很好的学习方法，当然平时还得多敲代码。这里结合 最近看的一些书以及一些开发的经历来整理一下自己对 HTTP 的理解。由于能力所限， …