赵家富的个人博客

需求：有时候，我们使用selenium用来获取一些元素时，需要等待页面将某些元素加载网站才能够获取我们需要的数据，所以，这时候我们就需要等待页面的功能。 1、显示等待（推荐）显式等待是你在代码中定义等待一定条件发生后再进一步执行你的代码。 最糟糕的案例是使用time.sleep()，它将条件设置为等待一个确切的时间段。 这里有一些方便的方法让你只等待需要的时间。WebDriverWait结合... 阅读全文…

# 一、复制： FOR /F %%I IN ('DIR /B /S "E:\save_photo_from_video\*.*"') DO (COPY %%I "E:\004-dangdang")其中，E:\save_photo_from_video是需要复制的文件夹，下面的多级文件都会被复制到指定目录E:\004-dangda... 阅读全文…

# 一，md5加密 # 由于MD5模块在python3中被移除 # 在python3中使用hashlib模块进行md5操作 import hashlib # 待加密信息 str = "4CbLXeGSDxg" # 创建md5对象 m = hashlib.md5() # Tips # 此处必须encode # 若写法为m.update(str) 报错为... 阅读全文…

PyPI使用国内源通过几次 pip 的使用，对于默认的 pip 源的速度实在无法忍受，从国外下载很慢，于是便搜集了一些国内的pip源，如下： 阿里云 http://mirrors.aliyun.com/pypi/simple/ 中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/ 豆瓣(douban) http://pypi.douban.com... 阅读全文…

一、Max retries exceeded with url方法1、出现这个错误可能跟爬取速度过快而且没有关闭每次的请求有关，导致出错。requests使用了urllib3库，默认的http connection是keep-alive的，requests设置False关闭。 可以，每次请求的内容保存到其他变量后关闭请求。比如我的：我把response响应的结果赋值给deps之后就把resp... 阅读全文…

 Scrapy爬虫一个页面也爬取不到报错：[scrapy.extensions.logstats] INFO: Crawled 0 pages (at 0 pages/min), scraped 0 items (at 0 items/min) 解决方法俩种： 方法1，在settings.py中添加用户代理：USER_AGENT = 'Mozilla/5.0 (Macintosh... 阅读全文…

首先这个只能用递归的方式进行统计和计算，计算的数为全局变量 import os def get_file_num(path): global num_total, file_num # path = r"E:\004_kongfuz_selenium70_120W" os.chdir(path) ret = os.listdir() ... 阅读全文…

@[toc] 说明：这个是我js破解时遇到的，然后把代码抠出来了，现在整理一下，日后遇到其他加密，也会更新保留在博客里面。如果有需要可以参考，如果有转载，请标明作者和链接，违者必究。如果觉得不错，可以给我点个赞，如果有更好的加密方法，欢迎评论分享哈，Thanks♪(･ω･)ﾉ 1、JavaScript实现md5加密这个我直接上代码吧，可以运行出来，我这个是之前弄的，具体网站忘了，需要的可以... 阅读全文…

@[toc] 说明：今天突然看到一种好像是字符串的拼接方法substitute，但是不确定，于是就百度搜索了一下，然后搜到一个博客，写的不错，虽然他写的7中方法，除了这个substitute和第5种我不知道，其他的5种都知道，也都用过，今天也是学习俩种方法，Thanks♪(･ω･)ﾉ 1、直接通过+操作：s = 'Python'+'，'+'... 阅读全文…

说明工作中有时候总会遇到一些功能，比如排序，要么就自己写一个排序函数，这时候如果这个模块就可以使用了，可以大大的提高你的效率，节省你的时间。比如需要合并视频时，或者对文件夹下面的文件进行操作需要进行排序时。。。等 这个模块对英文和数字都有很好的效果。 一、安装pip install natsortnatsort模块官网地址：https://pypi.org/project/natsort/ ... 阅读全文…