Python
Java
PHP
IOS
Android
Nodejs
JavaScript
Html5
Windows
Ubuntu
Linux
Python3 configparse模块(配置)
Python3 configparse模块 配置 参考 https www cnblogs com bert227 p 9326313 html https www cnblogs com dion 90 p 7978081 html py
小点
configparse
python3
Python中from from __future__ import *的用法
from future import 参考 https blog csdn net zzc15806 article details 81133045 我们在读代码的时候 总是会看到代码开头会加上from future import 这样的
小点
from future
selenium元素等待
元素等待 js代码执行渲染期间 导致数据 标签加载缓慢 如果元素没有加载完成 直接通过find element去进行定位 会出现元素不存在的异常 3种方法 1 time sleep 10 强制性等待 不管元素在设置时间范围内是否加载出来 都
小点
selenium
爬虫
python
Python中常用的处理数据的方法——replace()方法
replace 方法 描述 Python replace 方法用于把字符串中指定的旧子字符串替换成指定的新子字符串 如果指定 count 可选参数则替换指定的次数 默认全部替换 replace 方法语法 S replace old new
小点
replace
python
MySQL数据库的异步写入
注意 数据库pymysql的commit 和execute 在提交数据时 都是同步提交至数据库 由于scrapy框架数据的解析和异步多线程的 所以scrapy的数据解析速度 要远高于数据的写入数据库的速度 如果数据写入过慢 会造成数据库写入
小点
python
scrapy爬虫
MySQL数据库异步写入
python计时模块——timeit
timeit模块 timeit 模块定义了接受两个参数的 Timer 类 两个参数都是字符串 第一个参数是你要计时的语句或者函数 传递给 Timer 的第二个参数是为第一个参数语句构建环境的导入语句 从内部讲 timeit 构建起一个独立的
小点
timeti
python
计时
爬虫保存cookies时重要的两个参数(ignore_discard和ignore_expires)的作用
代码如下 由于临时做的实例采用登录云打码平台的cookies import requests from lxml html import etree from fake useragent import UserAgent from htt
小点
爬虫
参数
ignorediscard和ignoreexpires
cookies
python随机数模块——random
近期遇到了一个很常见又不是很注意的随机数问题 随机数 gt 伪随机数 在这里特地的写下来作为提醒 随机数一般情况下我们直接使用random 但是random这个随机数有点假 伪随机 解析如下 Python3实现随机数 random是用于生成
小点
随机数
Random