火车头采集器采集网站域名是https开头的无法正常采集的解决方法
时间：2023年08月24日
/来源：网络
/编辑：佚名
火车头采集
火车头采集需要注意，如果是加了SSL证书的，域名是https开头的，要加入下面的配置，否则无法正常采集。
#HTTP_TO_HTTPS_START
set $flag 0;
if ($server_port !~ 443) {
set $flag "${flag}1";
}
if ($request_uri !~ "e/admin/caiji.php"){
set $flag "${flag}2";
}
if ($flag = "012"){
rewrite ^(.*)$ https://$host$1 permanent;
}
#HTTP_TO_HTTPS_END
火车头采集需要注意，如果是加了SSL证书的，域名是https开头的，要加入下面的配置，否则无法正常采集。
#HTTP_TO_HTTPS_START
set $flag 0;
if ($server_port !~ 443) {
set $flag "${flag}1";
}
if ($request_uri !~ "e/admin/caiji.php"){
set $flag "${flag}2";
}
if ($flag = "012"){
rewrite ^(.*)$ https://$host$1 permanent;
}
#HTTP_TO_HTTPS_END
新闻资讯 更多
- 【建站知识】查询nginx日志状态码大于400的请求并打印整行04-03
- 【建站知识】Python中的logger和handler到底是个什么？04-03
- 【建站知识】python3拉勾网爬虫之（您操作太频繁，请稍后访问）04-03
- 【建站知识】xpath 获取meta里的keywords及description的方法04-03
- 【建站知识】python向上取整以50为界04-03
- 【建站知识】scrapy xpath遇见乱码解决04-03
- 【建站知识】scrapy爬取后中文乱码,解决word转为html 时cp1252编码问题04-03
- 【建站知识】scrapy采集—爬取中文乱码，gb2312转为utf-804-03
猜你需要
豫ICP备2021026617号-1
豫公网安备：41172602000185