使用go语言开发自动化脚本 - 一键定场、抢购、预约、捡漏

news2024/9/9 4:43:50

原文地址:码农在新加坡的个人博客

背景

不知道大家有没有这种经历,想要抢课,定场,发现抢不到,想要捡漏,又要随时刷,今天我就来讲一下我是怎么使用Go语言开发自动化脚本来解决定场,抢购,预约的难题。

基础知识

浏览器发送HTTP请求

我们在浏览器中打开一个网站执行一系列操作,其实就是用户通过浏览器与网站服务器的HTTP交互的过程。

下图是一个最简单的流程:
在这里插入图片描述

  1. 用户在浏览器输入账号密码登录(也可能是扫描二维码或者第三方账号登录),然后浏览器会发送一个HTTP请求到网站服务器,网站服务器验证成功之后根据你的账号信息生成一个Token或者Session,然后把Token或者SessionID返回给浏览器并告诉浏览器登录成功,浏览器跳转登录后的页面。
  2. 用户点击查询,比如查询是否有合适的Slot,浏览器发送查询HTTP请求给网站服务器,带上TokenToken是用来验证这个用户是谁,服务器验证成功之后返回可以预定的列表。比如一个可预订的时间列表。
  3. 用户选择列表里面一个可用的Slot,开始预订,浏览器发送预订HTTP请求给网站服务器,带上TokenSlotIdSlotId用来验证你要定的那个Slot是什么,比如是哪天什么时间段等等。如果服务器收到请求的时候这个Slot还是可用的,那么就记录下单并返回预订成功。
  4. 然后你就可以点击付款按钮,可以通过余额,银行卡或支付宝等第三方付款方式付款,付款成功会返回给浏览器告诉用户下单成功。

自动化流程

理解了这个最简单的流程,那我们就可以开始想怎么样自动化流程。

最简单的情况就是:我们把查询和预订的过程自动化。当然登录的过程也是可以的,只不过很多第三方/二维码登录的,有时候还需要验证码,比较复杂,为了简单我就自己通过浏览器登录拿到Token之后自动查询和预订。
在这里插入图片描述

  1. 登录成功后拿到Token。
  2. 脚本使用这个Token运行脚本工具,循环执行查询和预订的HTTP命令,如果预订成功,邮件通知给用户。
  3. 收到邮件之后打开浏览器付款。

Token一般来说每次登录后有效期为1小时到1天左右(取决于网站服务器的设定),所以我们需要每段时间获取一次Token重新执行脚本。

自动发送Email

SMTP是发送邮件的协议,我们可以通过简单的代码来实现发送邮件的功能,在这里主要是通过gomail.v2的 Go语言库 来支持订购成功之后发送邮件通知。

每个邮件运营商 (qq, 163, gmail, outlook, …)都有自己的SMTP的域名和端口,
比如你使用qq邮箱发邮件,去QQ邮箱的 帮助中心 可以查到他们的SMTP服务器端口是465或者587,就用他们提供的smtp.qq.com:587,即可发送成功。

其他的SMTP协议的运营商可以查看我的另一个博客:

各大邮箱smtp服务器及端口

实现

有了这些基础知识之后,我们就可以开始用代码实现脚本工具的自动化流程了。

模拟

需要实现自动化脚本,第一步就是需要模拟HTTP请求,相当于把用户在浏览器的一系列操作用代码来实现。

要代码实现我们就需要先知道发送的HTTP请求的URL,Header,Payload分别是什么。

开发者模式

Chrome浏览器使用F12进入开发者模式,选择Network->找到HTTP请求的Name->可以看到右边有Header、Preview、Response等信息,这就是用户行为(点击事件)产生的网络交互,也就是浏览器向服务器请求数据并返回给浏览器的过程。

而我们要模拟的就是这个HTTP网络交互的行为。

在这里插入图片描述

找到你要模拟的HTTP请求的Name,右键->Copy->Copy As cURL

cURL

cURL是一个Linux命令,开发人员使用它来与服务器进行数据交互,cURL 里面包括 url, body, header, 加密方式 等等,正确设置命令后执行即可得到服务器的正确响应。

拿到cURL我们可以写go语言代码来模拟HTTP请求,要自己填充Header,Body等信息。容易写错。庆幸的是,已经有人做了自动化的工具帮我们一键把cURL转成Go语言的代码,也就是说我们不用自己写具体的HTTP请求代码了。

网站地址:curl-to-go

我们把cURL复制到网站里面就可以实时得到具体的Go代码。
在这里插入图片描述
当然这个工具只帮我们创建了Body的结构体,具体的值还是需要我们去填充,我们从curl里面找到
--data-raw来自己填进去即可。

// Generated by curl-to-Go: https://mholt.github.io/curl-to-go

// curl 'https://www.zhihu.com/api/v4/answers/2807591609/voters' \
//   -H 'authority: www.zhihu.com' \
//   -H 'accept: */*' \
//   -H 'accept-language: zh-CN,zh;q=0.9,en;q=0.8' \
//   -H 'content-type: application/json' \
//   --data-raw '{"type":"up"}' \
//   --compressed

type Payload struct {
	Type string `json:"type"`
}

data := Payload{
// fill struct
    Type: "up",  // fill struct yourself based on the data-raw
}
payloadBytes, err := json.Marshal(data)
if err != nil {
	// handle err
}
body := bytes.NewReader(payloadBytes)

req, err := http.NewRequest("POST", "https://www.zhihu.com/api/v4/answers/123456789/voters", body)
if err != nil {
	// handle err
}
req.Header.Set("Authority", "www.zhihu.com")
req.Header.Set("Accept", "*/*")
req.Header.Set("Accept-Language", "zh-CN,zh;q=0.9,en;q=0.8")
req.Header.Set("Content-Type", "application/json")
// Other Headers

resp, err := http.DefaultClient.Do(req)
if err != nil {
	// handle err
}
defer resp.Body.Close()

代码

整个流程清楚了,那么下一步就是打开你的编辑器,来实现代码了。我这里实现了一个网站的预订的代码,来给大家讲解一下,登录我并没有实现,而是使用curl to go 生成了Go语言代码并根据go struct改造具体条件。在Cookie没过期的情况下可以循环调用。

自动预订代码:github.com

在这里插入图片描述

  1. query.go,查询的HTTP请求,把刚才curl-to-go生成的Go代码Copy进来,填上Payload就可以请求成功了。
  2. book.go,把你刚才query的结果传进来,根据你的需求过滤满足条件的Slot,直接预订即可。
  3. email.go,发送邮件的接口,我使用了gomail.v2的库,非常好用。
  4. config.go,配置文件,通过json输入
  5. parse.go,解析respone的,
  6. main.go,主函数,读取json配置,定时执行查询和预订的接口,根据response的结果看是否成功,成功后发送邮件给你。
  7. README.md,告诉你怎么执行这个工具的。

这是相对比较简单的流程。

所以我们要做的就是手动在浏览器登录(也可以代码模拟登录),然后把返回的token放到query的HTTP请求里面。更简单的做法是,直接把query的cURL拿来curl-to-go转成go语言,Cookie已经在Header里面了。

然后我们再写booking的的流程,正常来说在一段时间内的Header都是一样的,我们直接把query的Header存起来赋值给booking的HTTP请求即可。

然后再写定时,你可以开启一个定时器,可以每x秒执行一次,然后执行n次停下来,或者永久执行。只是这个token一段时间后会过期,需要重新从浏览器登录并拿到Token信息复制到代码里面执行。

下一步就是发邮件,我们使用SMTP请求发送邮件,需要配置两个邮件,A发给B,然后需要填写A邮箱的SMTP+Port+email+password

我这边使用了gomail.v2的go语言库。

官网链接:gomail.v2 以供参考。

这样我们就写完代码了,
执行 go run main.go 就可以执行了。

然后你就可以玩玩手机等着预订成功之后给你发邮件了,你也可以只是查询,查询到之后给你发邮件你自己登录进去再预订。

结语

代码放在了Github 上,有兴趣的小伙伴可以参考,只不过每个网站的HTTP调用的Header的Body的格式都不一样,还需要你自己修改一些代码。所以还需要有一定代码能力的人才可以改造成自己

但是整体的框架我已经搭好了,希望可以减少你大量的工作量。

请阅读你需要访问的网站的规定,是否禁止第三方脚本,避免自己的账号有被封禁的风险。请遵守法律法规。

<全文完>

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/102686.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

圆梦腾讯之路6面阿里、5面字节、4面腾讯,终斩腾讯Offer

6年前&#xff0c;BAT冲到了风口浪尖&#xff0c;美国上市的阿里成为中国体量最大的互联网公司&#xff0c;腾讯借助微信成为移动互联网的霸主&#xff0c;外企开始撤离中国&#xff0c;国企的光环也慢慢褪去。 到了近年&#xff0c;应届毕业生心中最炙手可热的公司换成了TMD及…

数据结构刷题训练营3

开启蓝桥杯备战计划&#xff0c;每日练习算法一题&#xff01;&#xff01;坚持下去&#xff0c;想必下一年的蓝桥杯将会有你&#xff01;&#xff01;笔者是在力扣上面进行的刷题&#xff01;&#xff01;由于是第一次刷题&#xff01;找到的题目也不咋样&#xff01;所以&…

[附源码]计算机毕业设计Python工程施工多层级管理架构(程序+源码+LW文档)

该项目含有源码、文档、程序、数据库、配套开发软件、软件安装教程 项目运行 环境配置&#xff1a; Pychram社区版 python3.7.7 Mysql5.7 HBuilderXlist pipNavicat11Djangonodejs。 项目技术&#xff1a; django python Vue 等等组成&#xff0c;B/S模式 pychram管理等…

逃离美国,跨越8000公里远程办公,他开发了世界上最强的虚拟机

“从前”有一门编程语言叫Smalltalk&#xff0c;它是世界上第一个纯粹的面向对象编程语言。 Smalltalk有很多忠实拥趸&#xff0c;在Java崛起之前&#xff0c;它独自可以抗衡C。 著名的《设计模式》一书&#xff0c;其中的代码示例就是C和Smalltalk。 但是Smalltalk运行速度太慢…

缓存架构,减少不必要的计算

前言&#xff1a; 互联网应用的主要挑战就是在高并发情况下&#xff0c;大量的用户请求到达应用系统服务器&#xff0c;造成巨大的计算压力。互联网应用的核心解决思路就是采用分布式架构&#xff0c;提供更多的服务器&#xff0c;从而提供更多的计算的资源&#xff0c;应对高…

VUE3-创建项目《一》

本案例使用vue3进行学习记录&#xff0c;和vue2有些是通用的。 1.需要了解HTML&#xff0c;CSS&#xff0c;JavaScript。 2.了解Node和NPM&#xff0c;node是vue的开发环境&#xff0c;npm是依赖管理包&#xff0c;npm就和Java的maven一样&#xff0c;和c#的NuGet一样&#x…

mac 微信备份到外接硬盘方案(软链接)

mac版本微信中并没有指定备份路径的功能&#xff0c;备份的聊天记录文件也在一个很难找的位置。对于使用256g硬盘的mac的用户&#xff0c;微信聊天记录动辄十几G、几十G的大小&#xff0c;会造成非常严重的硬盘容量恐慌。所以把微信备份文件迁移到外置硬盘是一件非常有意义的工…

实景三维数据汇交、接缝处理难?用网格大师轻松搞定!

为满足全国城市化、智慧化建设发展&#xff0c;实景三维建设进程加快&#xff0c;建设成果日渐增多&#xff0c;随之而来的数据汇交需求增大。然而在实际数据汇交过程中&#xff0c;不仅需要考虑到模型能否直接融合与替换的问题&#xff0c;还将面临几何接缝、色彩不均等问题。…

【DELM回归预测】基于matlab人工蜂群算法改进深度学习极限学习机数据回归预测【含Matlab源码 1885期】

⛄一、PSO-DELM简介 1 DELM的原理 在2004年&#xff0c;极限学习机&#xff08;extreme learning machine,ELM&#xff09;理论被南洋理工大学的黄广斌教授提出&#xff0c;ELM是一种单隐含层前馈神经网络&#xff08;single-hidden layer feedforward neural network,SLFN&am…

虹科新闻 | 虹科与RACOM正式建立合作伙伴关系

近日&#xff0c;虹科与RACOM正式建立合作伙伴关系&#xff0c;双方就工业应用自动化领域进行深入的交流与合作&#xff0c;未来将共同致力于为客户提供高效、可靠的工业通信解决方案&#xff0c;帮助客户布局工业信息系统。 虹科与RACOM都表示十分期待这次的合作。虹科CEO陈秋…

【信管4.3】确认与控制范围

确认与控制范围在范围管理中&#xff0c;我们已经讲完了 4 个管理过程&#xff0c;剩下的两个过程就是对范围的确认以及在整个项目执行过程中进行范围的监控管理。这两个过程的内容都不多&#xff0c;所以今天的内容还是非常轻松的&#xff0c;在正式学习之前&#xff0c;我们先…

再学C语言9:数据类型(7)——总结

一、sizeof()函数检测C环境中数据类型大小 代码&#xff1a; #include <stdio.h> int main(void) {printf("Type int has a size of %u bytes.\n", sizeof(int));printf("Type char has a size of %u bytes.\n", sizeof(char));printf("Type …

技术分享 | Jenkins 多任务关联

当有多个 Jenkins job 时&#xff0c;job 的执行需要按照先后顺序去执行&#xff0c;这个过程就是 Jenkins 的多任务关联。通常用于项目的编译、打包、执行冒烟、执行项目 case 多任务协助的场景中。 > 霍格沃兹测试学院 TestingStudio 触发条件 多任务关联的使用场景是有…

【大数据 clickhouse】clickhouse 数据字典使用详解

一、数据字典介绍 数据字典是ClickHouse提供一种非常简单且实用的存储媒介&#xff0c;他以键值和属性映射的形式定义数据。字典中的数据会主动或被动加载到内存并支持动态更新。由于字典数据常驻内存的特性&#xff0c;所以非常适合保存常量或经常使用的维度表数据&#xff0c…

没想到H5也是黑灰产的攻击重点?

近几年&#xff0c;在数字化与疫情的推动下&#xff0c;越来越多的企业开辟了线上业务&#xff0c;在互联网上通过各种方式开展业务。线上业务不仅使得企业效率提升&#xff0c;同时也面临着被黑灰产攻击的风险。黑灰产通过各种业务漏洞&#xff0c;能够攫取大量利益&#xff0…

[附源码]计算机毕业设计Python公共台账管理系统(程序+源码+LW文档)

该项目含有源码、文档、程序、数据库、配套开发软件、软件安装教程 项目运行 环境配置&#xff1a; Pychram社区版 python3.7.7 Mysql5.7 HBuilderXlist pipNavicat11Djangonodejs。 项目技术&#xff1a; django python Vue 等等组成&#xff0c;B/S模式 pychram管理等…

mysql的优化---定位低效率执行SQL-慢查询日志

-- 查看慢日志配置信息 show variables like %slow_query_log%-- 开启慢日志查询 set global slow_query_log 1-- 查看慢日志记录SQL的最低阈值时间,默认如果SQL的执行时间>10秒的&#xff0c;则算慢查询&#xff0c;则会将该操作记录到慢日志中去 show variables like lon…

文本生成项目(基于tensorflow1.14版本)

项目下载链接&#xff1a;链接: https://pan.baidu.com/s/1OfICplwlEtRBz_ta7Nwyyg?pwdyr5c 提取码: yr5c 复制这段内容后打开百度网盘手机App&#xff0c;操作更方便哦 --来自百度网盘超级会员v4的分享 1.模型代码&#xff1a;model.py # -*- coding: utf-8 -*- # file: m…

Qemu中SylixOS与VMware中Linux的通信链路搭建

1.适用范围 在与客户沟通交流后&#xff0c;ECSM管理Linux端docker及Linux与SylixOS间通信也成了客户比较关心的一部分。因此为了能够更好地给客户提供演示&#xff0c;必然需要搭建一套具有ECSM、SylixOS、linux的环境。 如果通过硬件搭建&#xff0c;一是携带麻烦&#xff0…

表哥推荐python自学书籍:从入门到精通,读这十本书就够了!

前言 人生苦短&#xff0c;我学python。 python编程语言在各种榜单上经常拿到前列位置&#xff0c;在全球范围内都非常受欢迎。 Python作为一种不受局限、跨平台的开源编程语言&#xff0c;其数据处理速度快、功能强大且简单易学。而且&#xff0c;Python采用解释运行的方式…