MEHAEI / NOTES
把技术,写得清楚一点。
持续记录编程、工程实践与生活里的有趣问题。
PythonEngineeringAI
~/mehaei
$ build --idea clarity
Ideas become systems.
221篇技术笔记
直接开始
小伙伴留言说, 某车之家的字体反爬脚本用不了了, 抽了空就先打开网站看一下, 结果发现看不见字符的源码了, 在控制台, 请求源码, 甚至python请求的html都变成了符号html中
控制面板源码中
python请求源码中
全部都变成了 一个方块一个问号(打不出来)
但是试......
字体反扒系列爬虫之路: 字体文件反爬一
爬虫之路: 字体文件反爬二(动态字体文件)
本文转自 [ 不止于python ]
开始吧!小伙伴留言说, 脚本用不了了, 抽了空就先打开网站看一下, 结果发现看不见字符的源码了, 在控制台, 源码, 甚至python请求的html都变成了符号
页面htm......
相关环境版本
123python 3.7.10fastapi 0.63.0Cython 0.29.22
报错文件
1234# main.pyfrom __future__ import annotations......# code
报错信息
1.
123456main.py:1:23:......
01
开始之前, 先看一行代码
1In [44]: "review.rb".strip(".rb")
猜猜结果是什么
按照目前我的理解结果应该是这样
1"review"
但正确结果是
12In [44]: "review......
看板娘 看板娘也就是别人博客右下角或者左下角的那个小人, 那如何把它加载到自己的博客园呢?
前提条件必须需要申请开通支持JS代码, 否则以下内容也就不用看了
配置侧边栏公告 将以下内容复制到: 博客侧边栏公告(支持HTML代码) (支持 JS 代码)
1234567891011121314......
小可爱入驻公众号今天让你的个人未订阅的微信公众号活跃起来, 其实特别简单, 只需要简简单单几个步骤
直接开始喽!
图灵配置图灵官网
http://www.turingapi.com/
注册账号:
创建机器人
配置机器人
创建成功后, 点击机器人列表后面的设置
添加公众号后, ......
前言
在抓包的时候, 配置过程顺利的话, 还行, 但有时候, 搜索了几百遍了教程了, 步骤都对, 但就是抓不到包, 今天来介绍几款手机版的抓包app, 摆脱配置证书, 一键开始抓包
安卓APP
1
抓包精灵
功能介绍
一款通过VPN抓取和解析安卓手机https网络请求的工具。对于......
点击上面“蓝字”关注我们
变量作用域层次
L(local)局部作用域
E(Enclosed)嵌套(闭包)作用域
G(Global)全局作用域
B(Built-in)内置作用域
作用域使用规则
作用域内变量可直接读取, 修改, 删除
......
目标地址
这篇来讲讲逆向破解js的方法, 先拿美团外卖的请求参数, X-FOR-WITH 练练手
请求地址:
https://h5.waimai.meituan.com/waimai/mindex/home
直接开始
打开Chrom, 打开控制台, 查看请求
发现需要解密的参数:......
抓取思路
结果: 最终实现通过经纬度、商家、关键字等抓取数据
使用charles进行抓包
Chrom调试
找出商品请求api
破解sign 和 其它请求参数
5. 使用代码请求单个api是否成功
6. 使用queue进行商店, 分类, 商品系统化抓取
使用协程并发抓取
8. ......