1、爬虫就是能够自动访问互联网并将网站内容下载下来的的程序或脚本，类似一个机器人，能把别人网站的信息弄到自己的电脑上，再做一些过滤，筛选，归纳，整理，排序等等。网络爬虫能做什么：数据采集。网络爬虫是一个自动提取网页的程序，它为搜索引擎从万维网上下载网页，是搜索引擎的重要组成。
网站用户访问不了，游戏用户掉线上不去游戏 远程不上服务器 解决方法：1）使用高防服务器 云服务器基本没有什么防护，或者加防护的成本很高。方便转移数据重新搭建的话可以考虑使用高防服务器，市面上很多独享带宽，真实防御的高防服务器是很好的选择。
一旦服务器进入黑洞，首要任务是保持冷静。由于黑洞是服务提供商和运营商之间的协议，自动解封时间受限，通常为5小时，最长可达24小时，具体取决于攻击的持续性和频率。在此期间，用户无法手动解除，只能耐心等待系统处理。黑洞策略的实施是为了保护云网络免受DDoS攻击的影响，减少服务提供商的带宽成本。
定时扫描网络的主节点由于大多数网络恶意攻击都是对网络的主节点进行攻击，因此，服务商会定期扫描网络主节点，寻找可能存在的安全隐患去及时清理。 主节点配置有防火墙配置防火墙在主要节点上，能够过滤掉网络恶意攻击，极大程度去提高网络安全而降低由于网络恶意攻击带来的风险。
1、公网IP用于公网用户访问你的服务器。私网IP对于公网用户来说访问不了你的服务器，但通常你的服务器可以访问公网，已经云服务器运营商提供的其他服务，也就是你不能对外提供服务（一般用于爬虫、数据计算等不需要为用户提供直接服务）。
2、公网ip和私网ip的区别指代不同、特点不同、优势不同。指代不同 公有IP指以公网连接Internet上的非保留地址，私有IP是在本地局域网上的IP。
3、指代不同 公有IP：指以公网连接Internet上的非保留地址。私有IP：是在本地局域网上的IP。特点不同 公有IP：由InterNIC负责。这些IP地址分配给注册并向InterNIC提出申请的组织机构。通过直接访问互联网。
4、公网IP就是除了保留IP地址以外的IP地址，可以与Internet上的其他计算机随意互相访问。我们通常所说的IP地址，其实就是指的公网 IP。互联网上的每台计算机都有一个独立的IP地址，该IP地址唯一确定互联网上的一台计算机。这里的IP地址就是指的公网IP地址。
5、公网ip和私网ip的区别有：接入方式不同、特点不同、优势不同等。接入方式不同 公网IP以公网连接Internet上的非保留地址，私网IP则是在本地局域网上的IP，通过NAT才能够与公网进行通信。特点不同 公网IP由国际互联网络信息中心InterNIC负责，将IP地址分配给注册并向InterNIC提出申请的机构或组织。
6、私网IP主要用于内部网络，解决了大规模网络环境下IP资源紧张的问题，例如学校里的上万台电脑通过网络地址转换（NAT）技术，使用私网地址进行通信，共享有限的公网IP资源。再来谈谈固定IP和动态IP的区别。
1、调度器从引擎接收爬取请求（Request）并将它们入队，以便之后引擎请求它们时提供给引擎。一般来说，我们并不需要直接对调度器进行编程，它是由Scrapy主进程进行自动控制的。·下载器（Down-loader）下载器负责获取页面数据并提供给引擎，而后将网站的响应结果对象提供给蜘蛛（Spider）。
2、scrapy自带有去重set（）集合功能，但是set是在内存中的，一旦关机就要重新开始。那么我拿到数据不是在set里面，我把他存入redis，mysql，mongo，在取数据的时候，pop一下不就可以实现断点续传了。
3、只需要在重新启动爬虫之后，从Redis中加载上一次爬虫运行的状态，即可从上次停止的地方继续爬取数据。这种方式不仅可以保证爬虫的可靠性和稳定性，还可以提高爬虫的效率。
4、有些网站为了防止爬虫会采取一些措施，比如给你设计一个链接，你打开这个链接后跳到另一个页面，这个页面上还有一个链接，又链接到原来的页面，如果处理不好爬虫就在这死了。还有就是有些跳转会对爬虫有些干扰。其他的话有可能有些网站为了防止爬虫，直接返回403也有可能。
5、打开windows命令行，同样键入：scrapy shell http：//quotes.toscrape.com/ 会有请求信息返回。
1、云服务器的安全安全设置主要有一下几个比较重要的几个方面：首先是服务器的用户管理，很多的攻击和破解，首先是针对于系统的远程登录，毕竟拿到登录用户之后就能进入系统进行操作，所以首先要做的就是禁止root超级用户的远程登录。把ssh的默认端口改为其他不常用的端口。
2、如果说进入云服务器管理控制台是这样的话，你只需要移动一下鼠标，或者按任意键盘按键激活显示就可以的，或者是你可以重启一下云服务器（云服务器出现故障也会这样），方法是在控制台-云服务器ECS-找到你那台需要重启的ECS-更多-重启即可，这时会弹出提示框提示你是否重启，建议你选择强制重启。
3、第一，找到对应的实例，通过安全组配置选项进入设置。第二，点击“配置规则”，进入安全组规则设置。
4、Ecs服务器设置 云的安全设置主要包括以下几个重要方面：首先是服务器的用户管理，很多攻击和破解，首先是系统的远程登录。毕竟获得登录用户后，就可以进入系统进行操作了，所以首先要做的就是禁止root超级用户的远程登录。将ssh的默认端口更改为其他不常用的端口。
5、远程连接并登录到 Windows 实例。选择开始运行，输入msconfig，打开系统配置窗口。选择引导选项卡，勾选安全引导，按需求勾选安全引导选项。然后单击应用。登录ECS 控制台，找到该实例，选择更多重启。重启后系统将会自动按照上述所选的安全模式进行引导。
买这个云服务器，是用来弄一个网站的，搭建着玩，学习一下，流量也不大，数据也不多50G 1M带宽足够了。新手可以用来学习Linux或者测试、学习其他软件。
云服务器的磁盘里一般会有各种服务器操作系统，比如linux，和windows等。你在购买服务器的时候会让你选择装什么样的系统。多大磁盘够用，得根据你的网站的实际情况来。如果是普通的新站，一般起步的40g或者50g就够前期使用的了。可以后期等需求量大了，再往上加。
可以搭建网站，云服务器是可以理解为一个主机，只不过它位于互联网中，就是联网就能访问它的IP地址，能ping通它。在阿里云上买的云服务器，其实就相当于你自己买了一台服务器，放在阿里云的机房里，由阿里云进行托管一样，机器日常的运维你不用考虑，只需要使用即可。
到了不够用的时候，你的网站也很有名了，不会不舍得再掏钱买流量。
如果两千人同时访问的话，百分之百要崩。这个配置，最多能承受20左右的并发量。