技术日志
记录分享邓杰律师从事网络技术工作点点滴滴。
记录分享邓杰律师从事网络技术工作点点滴滴。
一、数据爬虫特征：AhrefsBot/7.0; +http://ahrefs.com/robot/ 二、数据爬虫IP列表：3.80.147.2203.80.188.1743.82.191.893.83.87.243.84.6.1753.92.209.2273.93.17.2385.78.40.765.78.76.19318···2023-07-27
一、数据爬虫特征：zoominfobot at zoominfo dot com二、数据爬虫对应ip：34.23.75.13134.23.170.19934.74.29.20834.138.46.23234.138.75.22234.138.225.234.139.125.11534.139.212.12434.139.2···2023-07-27
一、数据爬虫特征：BLEXBot/1.0; +http://webmeup-crawler.com/ 二数据爬虫对应ip列表：148.251.4.36157.90.91.229157.90.181.206157.90.182.25157.90.182.27157.90.182.28157.90.182.30157.90.···2023-07-27
一、数据爬虫特征：Daum/4.1; +http://cs.daum.net/faq/15/4118.html?faqId=28966)二、数据爬虫ip：211.249.246.1472023-07-27
1.DotBot/1.2; +https://opensiteexplorer.org/dotbot; help@moz.com3.215.186.433.215.186.2333.227.217.2553.227.235.353.229.135.2363.231.229.1363.234.210.2293.235.184.1313.236.13.2513.···2023-07-27
在配置文件中查找到serve{··· ····} ，比如找到下面的代码 server_name abc.com www.abc.com;在其下面添加以下代码：#https跳转到http，使用的是腾讯云ssl证书。if ($scheme = https ) {···2023-05-04
日常分析服务器访问日志过程中，发现以下访问记录：180.163.220.125 - - [12/Apr/2023:01:25:51 +0800] "GET /sitemap.xml HTTP/1.1" 404 737 "http://qiyelaw.com/sitemap.xml&···2023-04-12
汇总各大搜索引擎IP，供处理网站安全时参考。2023-03-23