Python大数据实践:selenium爬取京东评论数据
Selenium是广泛使用的模拟浏览器运行的库，用于Web应用程序测试。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样，并且支持大多数现代 Web 浏览器。
如何保证API安全？
最近知识星球中有位小伙伴问了我一个问题：如何保证接口的安全性？根据我多年的工作经验，这篇文章从11个方面给大家介绍一下保证接口安全的一些小技巧，希望对你会有所帮助。
浏览器插件：WebScraper基本用法和抓取页面内容(不会编程也能爬取数据)
本文介绍了浏览器插件Wev Scraper的基本用法和抓取页面内容示例。即使你不会编程，也能爬取爬取数据。
pdd（web）逆向分析
歪日，真的复杂，不愧的pdd，诶，记下来踩点坑吧
Python爬虫之文件存储#5
摘要：TXT文件存储、JSON文件存储、CSV文件存储
Python从入门到网络爬虫（内置函数详解）
Python 内置了许多的函数和类型，比如print()，input()等，我们可以直接在程序中使用它们，非常方便，并且它们是Python解释器的底层实现的，所以效率是比一般的自定义函数更有效率。目前共有71个内置函数， 接下来让我们一起来看一看吧。Python学习-71个内置函数，我们把这71个按
Puppeteer结合测试工具jest使用（四）
Puppeteer是一个提供自动化控制Chrome或Chromium浏览器的Node.js库, Puppeteer支持与node测试工具进行配合集成，集成到一起进行自动化测试。Jest 是由 Facebook 提供的一款 JavaScript 测试框架，它可以帮助我们编写可靠的测试用例，并能够实现断
使用Charles进行网络抓包截取数据
最近遇上一个需求，通过逆向网络抓包的方式去截取某个网站的数据，此时我想到了Charles。
Python : Xpath简介及实例讲解
文章目录一、Xpath简介二、Xpath语法规则语法规则标签定位属性定位索引定位取文本内容三、语法规则练习前言本篇文章只是简单介绍一下Xpath及使用，总体来说比较基础。一、Xpath简介XPath（XML Path Language - XML路径语言），它是一种用来确定XML文档中某部分位置的语
什么是 API 安全？学习如何防止攻击和保护数据
API 安全是指保护 API 免受恶意攻击和滥用的安全措施。认证和授权：API 需要对请求进行身份验证和授权，以确保只有授权用户才能访问受保护的资源。加密和传输安全：API 通常需要使用 SSL/TLS 或其他加密协议，以确保请求和响应数据在传输过程中得到保护。输入验证和防止注入攻击：API 需要对
7种有效安全的网页抓取方法，如何避免被禁止？
网页抓取是一种从互联网上抓取网页内容的过程，但在网络抓取种相信您也经常遇到障碍？尤其是做跨境业务的，在抓取国外的网站时更有难度。但我们站在您的立场上，提供七种有效的方法来进行网页抓取而不被阻止，最大限度地降低网站禁令的风险，并帮助您应对相关风险。
三方接口调用设计方案
API密钥生成：为每个三方应用生成唯一的API密钥对（AK/SK），其中AK用于标识应用，SK用于进行签名和加密。AK：Access Key Id,用于标示用户。SK：Secret Access Key,是用户用于加密认证字符串和用来验证认证字符串的密钥，其中SK必须保密。通过使用Access Ke
7种有效安全的网页抓取方法，如何避免被禁止？
网页抓取是一种从互联网上抓取网页内容的过程，但在网络抓取种相信您也经常遇到障碍？尤其是做跨境业务的，在抓取国外的网站时更有难度。但我们站在您的立场上，提供七种有效的方法来进行网页抓取而不被阻止，最大限度地降低网站禁令的风险，并帮助您应对相关风险。
爬虫工具篇-fake_useragent_extended-随机请求头
fake_useragent_extended是一个基于fake_useragent的Python库，可以随机生成伪造的请求头信息。和fake_useragent相比，fake_useragent_extended增加了一些额外的功能，如随机生成浏览器插件信息、操作系统信息等。总之，fake_use
Python Request POST 上传文件 Multipart/form-data
python request.post 向服务器接口 上传文件
9.用python写网络爬虫，完结
前言前言这是python网络爬虫的最后一篇给大家做个总结，且看且珍惜把！截止到目前， 前几章本书介绍的爬虫技术都应用于一个定制网站，这样可以帮助我们更加专注于学习特定技巧。而在本章中，我们将分析几个真实网站，来看看这些技巧是如何应用的。首先我们使用 Google 演示一个真实的搜索表单，然后是依赖
[已成功破解] 阿里 taobao 滑条验证码 x5sec解密 slidedata参数
[已成功破解] 阿里 taobao 滑条验证码 x5sec解密 slidedata参数
BOSS直聘自动投简历聊天机器人的实现过程
这两年疫情，公司业务越来越差，必须得准备后路了，每天睡前都会在直聘上打一遍招呼，一直到打哈欠有睡意为止...,这样持续了一周，发现很难坚持，身为一名资深蜘蛛侠，怎么能这样下去呢？于是便萌生了对BOSS下手的念头。boss的web端功能已经挺完整了，所以直接使用无头浏览器(puppetter/play
Python Request get post 代理 基本使用
Python Request get post 代理 基本使用
[Python从零到壹] 九.网络爬虫之Selenium基础技术万字详解（定位元素、常用方法、键盘鼠标操作）
前一篇文章讲述了数据库操作知识，包括MySQL安装、SQL语句和Python操作数据库知识，这将为后续网络爬虫存储至数据库奠定基础。本文详细介绍Selenium基础技术，涉及基础入门、元素定位、常用方法和属性、鼠标操作、键盘操作和导航控制。基础性文章，希望对您有所帮助。欢迎大家来到“Python从零
