2022-04-10 设计模式 python设计模式 磨刀不误砍柴功 [TOC] 本文为笔记 原视频:https://www.bilibili.com/video/BV19541167cn?p=1 设计模式 设计模式:对软件设计中普遍存在(反复出现)的各种问题,所提出的解决方案。每一个设计模式系统的命名、解释
2022-03-29 爬虫日记-熙攘中文网 jsonpythonrequests 爬虫日记 123456环境window10python3使用到的库json 解析jsonrequests 网络请求 1 写在前面本次要采集的是 熙攘中文网 ,以采集一本小说为例,示例在爬虫采集中json格式的数据的处理方法 2 页面分析
2022-01-05 爬虫日记-一键下载****张壁纸-升级版版 彼岸 桌面壁纸 附源码 单文件一键可执行 pythontry except正则表达式爬虫 爬虫日记 1234567891011环境window10python3rerequestsetreethreadingthreadpoolredis [TOC] 源码地址 前言这次的升级版主要修复了上个程序的一些不足的地方,并且是为了用到之前总结
2021-12-15 踩坑 redis 做临时缓存、数据库使用 pythonredis缓存 磨刀不误砍柴工 123环境window10redis 前言使用到redis的原因,一是之前做的业务逻辑有需要对用户操作连续几个操作的逻辑判断和做一个时间上的有效性,二是做一下热数据的临时缓存。 redis的使用体验是很舒服,简单而又高效。 一点简介
2021-12-11 爬虫日记-一键下载****张壁纸-基础版 彼岸 桌面壁纸 附源码 可执行 pythontry except正则表达式爬虫 爬虫日记 12345678环境window10python3rerequestsetree 源码地址 [TOC] 前言这次来写一个基础版的获取网络上公开免费壁纸的爬虫,采集的网站为 彼岸桌面 ,网站打开是这个样子: 红色框框中为我们这次的目标。
2021-12-08 爬虫日记-采集 快代理 免费 代理ip 并 清洗 ip lxmlproxypythonrequests代理ip 磨刀不误砍柴工 123456环境window10python3使用到的库requests 网络请求lxml 网页源码解析 源码地址 [TOC] 摘要写爬虫被封ip是很正常的,所以代理ip也是爬虫生活必不可少的一部分,今天写一个网络上公开的免费的代理i
2021-12-07 爬虫日记-豆瓣新书速递 lxmlopenpyxlpythonrequests 爬虫日记 12345678环境window10python3使用到的库re 字符串匹配openpyxl 表格操作requests 网络请求lxml 网页源码解析 源码地址 步骤写爬虫之前首先要知道我要怎么写一个爬虫,就像如果要把大象塞进冰箱
2021-06-25 scrapy框架访问链接时,post请求的几种姿势 postpythonrequestscrapy 搬砖 在使用scrapy进行爬虫编写的时候,经常会遇到一些post请求,根据不同的header往往会有不同的参数提交方式,采坑记录。 Query String Parameters这种是相对简单的,参数可以直接拼接在url中,在url中?后面的
2021-06-20 爬虫编写中常用的cv代码 pythonrequestscrapytime 搬砖 CV 用的好,天天下班早(想得美)时间格式123456789101112131415161718# 时间有几天前,的那种论坛贴吧pubtime_string = response.xpath("//div[@class=
2021-05-10 python 使用 openpyxl 模块控制 excel 常用操作 excelopenpyxlpython 搬砖 使用的库openpyxl 1import openpyxl 作用的对象文件后缀名为 .xlsx excel几个操作单元 工作簿 workbook 表单 wooksheet 行、列、单元格 r