网络相关 – 每天多彩心情 https://www.xucaidao.com Wed, 23 Nov 2022 17:33:02 +0000 zh-Hans hourly 1 https://wordpress.org/?v=6.9.1 python爬虫遵循的规则 https://www.xucaidao.com/python%e7%88%ac%e8%99%ab%e9%81%b5%e5%be%aa%e7%9a%84%e8%a7%84%e5%88%99/ https://www.xucaidao.com/python%e7%88%ac%e8%99%ab%e9%81%b5%e5%be%aa%e7%9a%84%e8%a7%84%e5%88%99/#respond Wed, 23 Nov 2022 14:55:48 +0000 http://www.xucaidao.com/?p=55 引自：https://www.cnblogs.com/kongyijilafumi/p/13969361.html

1.遵守Robots协议，谨慎爬取

2.限制你的爬虫行为，禁止近乎DDOS的请求频率，一旦造成服务器瘫痪，约等于网络攻击

3.对于明显反爬，或者正常情况不能到达的页面不能强行突破，否则是Hacker行为

4.如果爬取到别人的隐私，立即删除，降低进局子的概率。另外要控制自己的欲望

]]> https://www.xucaidao.com/python%e7%88%ac%e8%99%ab%e9%81%b5%e5%be%aa%e7%9a%84%e8%a7%84%e5%88%99/feed/ 0 DNS 基础知识,收藏起来有备无患 https://www.xucaidao.com/dns-%e5%9f%ba%e7%a1%80%e7%9f%a5%e8%af%86%e6%94%b6%e8%97%8f%e8%b5%b7%e6%9d%a5%e6%9c%89%e5%a4%87%e6%97%a0%e6%82%a3/ https://www.xucaidao.com/dns-%e5%9f%ba%e7%a1%80%e7%9f%a5%e8%af%86%e6%94%b6%e8%97%8f%e8%b5%b7%e6%9d%a5%e6%9c%89%e5%a4%87%e6%97%a0%e6%82%a3/#respond Wed, 23 Nov 2022 13:36:19 +0000 http://www.xucaidao.com/?p=48 UDP传输时间短，加密统一选择：https

DNS查询：https://dns.ip.cn/

阿里公共DNS：

223.5.5.5   类型选择：UDP

223.6.6.6   类型选择：UDP

阿里加密DNS：alidns_ip/dns-query   类型选择：https

阿里加密DNS：dns.alidns.com/dns-query   类型选择：https

腾讯公共DNS:

DNS：119.29.29.29  类型选择：UDP

腾讯加密DNS：doh.pub/dns-query  类型选择：https

腾讯加密DNS：sm2.doh.pub/dns-query  类型选择：https

360公共DNS

中国电信/铁通/移动：  101.226.4.6   218.30.118.6   类型选择：UDP

中国联通：  123.125.81.6      140.207.198.6   类型选择：UDP

百度公共DNS：180.76.76.76  类型选择：UDP

114DNS：114.114.114.114    114.114.115.115   类型选择：UDP

]]> https://www.xucaidao.com/dns-%e5%9f%ba%e7%a1%80%e7%9f%a5%e8%af%86%e6%94%b6%e8%97%8f%e8%b5%b7%e6%9d%a5%e6%9c%89%e5%a4%87%e6%97%a0%e6%82%a3/feed/ 0