利用nginx来屏蔽恶意网页爬虫的详细方法

对于大部分网站来说,每天都会面临大量的国外蜘蛛以及各种国内大平台,如华为,字节跳动等蜘蛛的访问抓取,特别是个别垃圾蜘蛛,例如python爬虫,它们访问特别频繁。这些垃圾流量多了之后,严重浪费服务器的带宽和资源。所以简单的通过判断user agent,在nginx中禁用这些蜘蛛可以节省一些流量,也可以防止一些恶意的访问,当然这只是初级的,只能抵挡2到3成的恶意访问,但是有总比没有好。 方法一:修改nginx.conf,禁止网络爬虫的user_agent,返回403。 1、进入nginx的配置目录,

亚马逊AWS服务器收费细则(仅供参考)

AWS 提供了一整套基础设施和应用程序服务,可以很方便的用于构建各种云端应用系统。在这些年的发展中,AWS也逐步形成了一套十分繁杂的计费系统。下面我们就来看看这笔账是怎么算的。 几个说明:1. 这里只讨论最普通的费用,即北弗吉尼亚,linux机型。AW大多产品根据所在区域,运行系统不一样,如linux、windows等,每种的价格都会有差异;基本上了解清楚一种,其他都可以类推。2. AWS的计费价格、计费内容会一直随着时间改变,比如推出新的产品、优惠、降价。基本上价格都在逐年递减。这里

【转】Ubuntu 18 免费SSL证书申请 自动续费 nginx配置https!

如果要启用HTTPS,我们就需要从证书授权机构(以下简称CA) 处获取一个证书,Let’s Encrypt 就是一个 CA。我们可以从 Let’s Encrypt 获得网站域名的免费的证书。这篇文章也主要讲的是通过 Let’s Encrypt + Nginx 来让网站升级到HTTPS。 Certbot 简介 Certbot 是Let’s Encrypt官方推荐的获取证书的客户端,可以帮我们获取免费的Let’s Encrypt 证书。Certbot 是支持所有 Unix 内核的操作系统的,像cen

【转】亚马逊服务器 EC2 利用Linux搭建WordPress教程(二)

1、开始配置一台wordpress服务器:安装相关软件 上一篇请看: https://www.rrdaj.com/hzseo/seoxin-shou-ru-men-xue-xi/wzrzfx/4013.html ,好了开始吧,执行: sudo apt-get update sudo apt-get upgrade 输入命令行,回车 不用怕输错,所有命令行都可以右键复制粘贴。 作为一个基本Web网站,我们需要至少这三样东西:Apache,PHP以及 MySQL。 传统意义上LAMP套装是Linux

【转】Linux Ubuntu中Apache2启动失败报错的不同解决方法!

为解决这个问题,花了一个下午,参考了120多条网络博文,很有成就感。但实际上是由于一个简单的配置原因导致的问题,希望以后可以更加细心。最初的现象,php代码没有解析.【 我参考了这位博主的经历,以及我自己的经历,大家可以少走弯路….. 】 phpinfo输出内容是 显然,只是代码,并没有成功解析php代码。事后分析,是Apache2服务的问题。 禁用ipv6网段 Job for apache2.service failed because the control process ex

亚马逊服务器 EC2 利用Linux搭建WordPress教程

Amazon Elastic Compute Cloud (Amazon EC2) 是一种基于 AWS Web 的一项云服务,特点是可在云中提供大小可调的计算量。它的服务接口非常简单,您可以轻松获取和配置容量,可以完全控制您的计算资源,甚至可以直接挂载他人开发的生物信息学工具集合的镜像,减少部署时间。 Amazon EC2 启动新服务器实例的速度非常快,当您的计算要求发生变化时,您便可以快速扩展计算容量。服务按您实际使用的容量和计算量收费,还为开发人员提供了创建故障恢复应用程序以及排除常见故障情

【转】Linux文件编辑常见命令详细整理集合!

刚接触Linux,前几天申请了个免费体验的阿里云服务器,选择的是Ubuntu系统,配置jdk环境变量的时候需要编辑文件。vi命令编辑文件,百度了一下,很多回答不是很全面,因此编辑文件话了一些时间。这里博主整理了一下,分享给大家。 一、vi编辑器有3种基本工作模式 首先需要知道vi编辑器有3种基本工作模式,分别是:命令模式、文本输入模式、和末行模式。 第一:命令行模式:该模式是进入vi编辑器后的默认模式。任何时候,不管用户处于何种模式,按下ESC键即可进入命令模式。在该模式下,用户可以输入vi命令

亚马逊 AWS E2C 如何启动配备Linux 虚拟机

Amazon Elastic Compute Cloud (EC2) 是用于在云中创建和运行虚拟机的 Amazon Web 服务。AWS 将这些虚拟机称为“实例”。本分步指南将帮助你在 AWS 免费套餐中的 Amazon EC2 上成功启动 Linux 虚拟机。 步骤 1.注册并登录 AWS服务器后台 本教程中的 Amazon EC2 不额外收取费用。在本教程中创建的资源符合免费套餐条件。单击按钮和链接会打开新选项卡,然后你可以按照本教程在 AWS 控制台中进行操作。创建免费

新手如何购买服务器(虚拟主机&云虚拟主机)

一般来说,新手站长或者企业主在选择主机之前需明确五类信息: 你是属于什么人群,学生党,技术人员,普通站长,企业主? 你自己手里的资金预算是多少元人民币?100以下/年?100-200/年?300-500/年?1000/年+? 你的网站采用哪种开发语言,比如是 ASP, .NET 还是 PHP 。 网站的数据库类型,比如是 ACCESS、SQL Server 还是 MySQL 数据库。 网站的类型,是CMS,论坛,还是企业官网等?以及网页空间需要大小。 如果你是学生党或者是技术人员,做做开发测试的

【Pycharm 使用】PyCharm(IDE)怎么用-新手详细教程攻略!

接下来在这个PyCharm教程中,让我们快速介绍Python在这里的使用。 Python开发环境 Python的另一个好处是,可以使用许多IDE。acconda,Eclipse,Notepad ++,Bluefish,Komodo和Vim的所有内容。   查看以下图片:       这些IDE均受广泛支持,我的建议是自己多尝试一下,只要觉得适合就可以继续使用,才能意识到这是否适合你,我个人倾向于Pycharm。   PyCharm简介 如今,许多

【转】连接MySQL数据库时常见故障问题的分析与解决

初学的mysql网友好象经常会碰到mysql无法连接的错误。特开贴收集这样问题的现象和原因。 先自己扔块砖头出来。 归纳如下: 故障现象 : 无法连接 mysql ============================================================================= 错误信息1 :ERROR 1045 (28000): Access denied for user ‘usera’@’localhost&#82

【转】linux系统扫描技术篇之nmap的使用优化!

发现这篇文章写得蛮详细的,分享出来,关于优化nmap的性能(目的是加快速度,提高准确性)(扫描方法:分步骤,原文:https://boke.wsfnk.com/archives/154.html),当然nmap的使用众说纷坛,大家可别用它做坏事啊……..     第一:快速判断是否在线(UDP和TCP不要同时进行) nmap -sP -n 117.169.17.1/24 #非常快速,速度与fping相差无几 第二步:控制扫描的端口,默认nmap扫描10

【转】WordPress免插件静态生成网站地图 (sitemap.xml)

网站地图(sitemap.xml)的作用就是使搜索引擎可以更加智能地抓取网站。加快收录效率。WordPress生成sitemap.xml的方法有很多,其中插件推荐大家用DX-SEO,使用插件的缺点大家都知道就是可能会影响网站的速度。所以不推荐大家使用插件,下边就说说怎么样免插件静态生成网站地图(sitemap.xml)吧!   PHP代码(来自张戈博客)   <?php require(‘./wp-blog-header.php’); header(“Content-t

Anaconda Spyder怎么查看安装的包以及汉化问题

【Python 】Anaconda Spyder-怎么查看安装的包以及汉化问题

Anaconda是一个用于科学计算的Python发行版( 个人觉得它很适合从R语言转过来的小伙伴,来做数据分析,因为它界面很像rstudio),支持 Linux, Mac, Windows系统,提供了包管理与环境管理的功能,可以很方便地解决多版本python并存、切换以及各种第三方包安装问题。Anaconda利用工具/命令conda来进行package和environment的管理,并且已经包含了Python和相关的配套工具。在这里大家自行去官网下载安装下,安装好就可以准备汉化了: 汉化准备:

Win10 本地运用MAMP搭建安装 WordPress 详细教程 !

为了更好的学习 WordPress ,以及做一些测试的更改,不用在正试网站上做修改而出问题,在本地搭建一个网站,是很有必要的,本文将指导你如何在本地电脑上安装 WordPress。   开始准备: 1、win10 电脑 2、下载 mamp 3、下载 wordpress 官方解压包   第一步、下载本地服务器软件MAMP 我们首先需要一个本地服务器软件来创建一个本地主机环境。在本教程中,我们使用 MAMP 来实现这一点(很好用),Mamp 是一个跨平台的 web 服务器包。因为

【已解决】wordpress从亚马逊服务器搬迁到虚拟主机的问题

今天跟大家分享我搬迁wp服务器的过程吧,虽然不是太难,但是也是搞得够呛!首先就是挑选服务器,我之前用的亚马逊服务器的EC2,由于之前忘了备份,所以后面的问题一个接一个,烦烦烦。亚马逊服务器确实是很快的,但是呢,和阿里云一样,不太适合新手我觉得,操作比较繁琐(相对来说更安全),新手往往处理问题会出现各种问题,你会崩溃的。当然了,当你的网站很成熟了,日访问量破5000了,那么还是建议用大品牌的服务器,比如阿里云,腾讯云,亚马逊这些…..如果你的网站很小,比如我的博客,那么是不建议用的,因

WordPress域名更换、网站服务器迁移(换服务器)教程

  有不少后台咨询,如何更换WordPress网站域名,又或者是网站空间更换了,如何迁移WordPress网站。在我看来,两个问题基本上是一致的,而且,网上随便谷歌一下,都有许多教程。不过,即然有人咨询,那我也就做一下搬运工,整理一下内容分享。   如何更换WordPress网站域名   情况一、空间不变,旧域名绑定不变,新域名已做好解析   这种情况WordPress网站域名更换最容易。只需要登陆网站的后台即可操作。   进入后台,点击 设置-常规   只要修改 WordPress 地址(UR