技术日志
记录分享邓杰律师从事网络技术工作点点滴滴。
记录分享邓杰律师从事网络技术工作点点滴滴。
一、数据爬虫特征：http://www.bsalsa.com 二、数据爬虫所用IP：27.42.72.10127.42.73.3527.42.73.7427.42.73.12227.42.73.19927.42.74.11227.45.217.22927.45.217.23842.51.28.17942.51.32.614···2023-07-27
一、数据爬虫特征：SurdotlyBot/1.0; +http://sur.ly/bot.html二、数据爬虫所用ip列表：34.232.23.13952.6.80.5852.206.84.1902023-07-27
一、数据爬虫特征：AhrefsBot/7.0; +http://ahrefs.com/robot/ 二、数据爬虫IP列表：3.80.147.2203.80.188.1743.82.191.893.83.87.243.84.6.1753.92.209.2273.93.17.2385.78.40.765.78.76.19318···2023-07-27
一、数据爬虫特征：zoominfobot at zoominfo dot com二、数据爬虫对应ip：34.23.75.13134.23.170.19934.74.29.20834.138.46.23234.138.75.22234.138.225.234.139.125.11534.139.212.12434.139.2···2023-07-27
一、数据爬虫特征：BLEXBot/1.0; +http://webmeup-crawler.com/ 二数据爬虫对应ip列表：148.251.4.36157.90.91.229157.90.181.206157.90.182.25157.90.182.27157.90.182.28157.90.182.30157.90.···2023-07-27
一、数据爬虫特征：Daum/4.1; +http://cs.daum.net/faq/15/4118.html?faqId=28966)二、数据爬虫ip：211.249.246.1472023-07-27
1.DotBot/1.2; +https://opensiteexplorer.org/dotbot; help@moz.com3.215.186.433.215.186.2333.227.217.2553.227.235.353.229.135.2363.231.229.1363.234.210.2293.235.184.1313.236.13.2513.···2023-07-27
在配置文件中查找到serve{··· ····} ，比如找到下面的代码 server_name abc.com www.abc.com;在其下面添加以下代码：#https跳转到http，使用的是腾讯云ssl证书。if ($scheme = https ) {···2023-05-04