最近的任务经常涉及到日志的记录，特意去又学了一遍logging的记录方法。跟java一样，python的日志记录也是比较繁琐的一件事，在写一条记录之前，要写好多东西。典型的日志记录的步
更新时间：2024-04-03
阅读（ 45 ）
编辑：佚名
Python中的logger和handler到底是个什么？
python3拉勾网爬虫之（您操作太频繁，请稍后访问）
你是否经历过这个：
在这里插入图片描述
那就对了~
因为需要post和相关的cookie来请求~
所以，一个简单的代码爬拉钩~~~
复制代码
1 import requests
2 import time
3 import
在这里插入图片描述
那就对了~
因为需要post和相关的cookie来请求~
所以，一个简单的代码爬拉钩~~~
复制代码
1 import requests
2 import time
3 import
更新时间：2024-04-03
阅读（ 39 ）
编辑：佚名
xpath 获取meta里的keywords及description的方法
html中的head的meta元素中的keywords与description标签如下：
<meta name="keywords" content="xxxx" >
<meta name="description" content="xxxx">
xpath获取属性使用@属性名
<meta name="keywords" content="xxxx" >
<meta name="description" content="xxxx">
xpath获取属性使用@属性名
更新时间：2024-04-03
阅读（ 41 ）
编辑：佚名
python向上取整以50为界
python向上取整以50为界方法
import math
def getNum(limit_num,num):
if num%limit_num==0:
print(num)
else:
num=math.ceil(num/limit_num)*lim
import math
def getNum(limit_num,num):
if num%limit_num==0:
print(num)
else:
num=math.ceil(num/limit_num)*lim
更新时间：2024-04-03
阅读（ 38 ）
编辑：佚名
scrapy xpath遇见乱码解决
首先查看页面的编码模式
response.encoding
显示为'cp1252'
response.xpath("//title/text()").getall()[0].encode('cp1252').decode('gbk')
解决
response.encoding
显示为'cp1252'
response.xpath("//title/text()").getall()[0].encode('cp1252').decode('gbk')
解决
更新时间：2024-04-03
阅读（ 34 ）
编辑：佚名
scrapy爬取后中文乱码,解决word转为html 时cp1252编码问题
解决思路1、
循环暴力寻找编码，但是不如思路3
复制代码
def parse(self, response):
print(response.text[:100])
body = response.body#直接是bytes,respo
循环暴力寻找编码，但是不如思路3
复制代码
def parse(self, response):
print(response.text[:100])
body = response.body#直接是bytes,respo
更新时间：2024-04-03
阅读（ 38 ）
编辑：佚名
scrapy采集—爬取中文乱码，gb2312转为utf-8
有段时间没怎么使用scrapy了，最近采集一个网页，发现网页编码是gb2312,
一开始就取搜索了下，发现各种操作都有，有在settings中设置
# FEED_EXPORT_ENCODING = 'utf-8'
一开始就取搜索了下，发现各种操作都有，有在settings中设置
# FEED_EXPORT_ENCODING = 'utf-8'
更新时间：2024-04-03
阅读（ 42 ）
编辑：佚名
linux清理vda1中deleted的文件
清理vda1
使用 df -h 命令查看 发现/dev/vdal 已经百分百
使用 du -sh * 命令查看占用比较大的文件或目录，看了三遍发现最大的就是30多M，百分之就是都是几十K，根本不可能满阿
使用 df -h 命令查看 发现/dev/vdal 已经百分百
使用 du -sh * 命令查看占用比较大的文件或目录，看了三遍发现最大的就是30多M，百分之就是都是几十K，根本不可能满阿
更新时间：2024-04-03
阅读（ 18 ）
编辑：佚名
网站日志出现Cookie: mstshash=Administr原因与解决方法
今天一位朋友用的“discuz”论坛程序，结果今天查看日志的时候发现了如下提示：
我朋友随意网上查了一下，说这串代码是“远程代码执行漏洞”的特征，然后就怀
我朋友随意网上查了一下，说这串代码是“远程代码执行漏洞”的特征，然后就怀
更新时间：2024-04-03
阅读（ 905 ）
编辑：佚名
nginx匹配url中包含Cookie: mstshash=Administr进行拒绝访问
nginx匹配url进行拒绝访问
复制代码
server {
#获取url完整请求
set $URL $scheme://$http_host$request_uri;
#根据获取的URL匹配一些限制字符，满足条件拒绝访
复制代码
server {
#获取url完整请求
set $URL $scheme://$http_host$request_uri;
#根据获取的URL匹配一些限制字符，满足条件拒绝访
更新时间：2024-04-03
阅读（ 156 ）
编辑：佚名
豫ICP备2021026617号-1
豫公网安备：41172602000185