【转】爬虫与反爬虫技术简介
互联网的大数据时代的来临，网络爬虫也成了互联网中一个重要行业，它是一种自动获取网页数据信息的爬虫程序，是网站搜索引擎的重要组成部分。通过爬虫，可以获取自己想要的相关数据信息，让爬虫协助自己的工作，进而降低成本，提高业务成功率和提高业务效率。
本文一方面从爬虫与反反爬的角度来说明如何高效的对网络上的公开数据进行爬取，另一方面也会介绍反爬虫的技术手段，为防止外部爬虫大批量的采集数据的过程对服务器造成超
编程开发
那女孩｜That Girl
那女孩/That Girl
今天与大家分享一首我平时喜欢听的歌曲，曲名【That Girl 】
我对这首歌的歌手不是很熟， Olly Murs, 但我喜欢的是这首歌的歌词和旋律。
这首歌告诉我们，在茫茫人海中，一旦你遇见了对的人，千万不要错过，要大胆地对你爱的人表白，勇敢去接受爱，承担爱，珍惜爱，保护爱，不要轻易放手心底里的真爱，否则追悔莫及，遗憾终身，为了追求理想中的真爱，要大胆地去
spring-data-elasticsearch打印完整dsl
初学es，用spring-data-elasticsearch的模板方法组装、执行dsl，有时候碰到执行报错或者执行结果不如预期，这时候就很想看一下执行的dsl到底是什么，也方便在其他工具中直接修改看效果。
目前网络上只能找到如下的这些打印方式：
// 打印query语句
log.info(nativeSearchQuery.getQuery().toString());
// 打印分页语句
lo
Linux安装Nginx并配置启动命令
镜像下载、域名解析、时间同步请点击 阿里云开源镜像站
安装前准备工作
因为Nginx依赖于gcc的编译环境，所以，需要安装编译环境来使Nginx能够编译起来
yum install gcc-c++
Nginx的http模块需要使用pcre来解析正则表达式，需要安装pcre
yum install -y pcre pcre-devel
安装依赖的解压包
yum install -y zlib z
python 实现超快窗口截图，自动获取当前活动窗口并展示截图
实现思路是先获取到当前最上面活动的窗口信息，然后提取该窗口的名称信息。
file
【阅读全文】
之后获取窗口的坐标信息，即左上角的开始坐标及右下角的结束坐标。最后直接截图并将截图的图片进行展示。
其中用到了两个第三方模块，分别是win32gui和Pillow，安装命令如下：
pip install Pillow
pip install win32gui
将其中使用到的三个非标准库导入
【教3妹学算法】两个相同字符之间的最长子字符串
插： 前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站。
坚持不懈，越努力越幸运，大家一起学习鸭~~~
3妹
3妹：2哥，你有没有看到新闻，长沙电信大楼着火了。
2哥：看到了，几十层楼被熊熊大火包围了。
3妹：恩，好在人员有序撤离，没有人员伤亡。
2哥：嗯，也是不幸中的万幸了。
3妹：2哥，今天周六了，准备干什么去呀？
2哥：还是呆在
互联网是如何工作的？
细节可能会让你大吃一惊……
每个人都应该了解互联网的基础知识。
我们的世界越来越数字化和互联。作为这个新社会的公民，了解底层系统是有意义的。
作为软件开发人员，了解这一点至关重要。在今天的文章中，让我们更深入地了解底层协议。
查找收件人：IP 地址
在我上一篇文章中，我谈到了大规模网络以及它们是如何连接的。
但是计算机如何在如此庞大的网络上发现彼此呢？如果有适当的权限，我可以将我的计算机连接到您的
【算法题】2216. 美化数组的最少删除数
插： 前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站。
坚持不懈，越努力越幸运，大家一起学习鸭~~~
题目：
给你一个下标从 0 开始的整数数组 nums ，如果满足下述条件，则认为数组 nums 是一个 美丽数组 ：
nums.length 为偶数
对所有满足 i % 2 == 0 的下标 i ，nums[i] != nums[i + 1]
Python课程总结
HTTP
python启动HTTP Server的命令为:
python -m http.server
需要了解的状态码
•200 操作成功
•404 资源文件不存在
•403 网络不可访问
•500 服务器内部错误
requests
安装命令为: pip install requests
例子代码为：
import requests
r = requests.get('
Linux基础（二）-权限管理
列出目录的内容：ls
ls常用指令
如：列出当前目录中所有以“t”开头的目录的详细内容
ls -l t*
获取文件的状态信息：stat
语法：
stat [文件或目录]
stat命令输出
文件访问权限
用户控制一个给定的文件或目录的访问程度，使得一个文件或目录有读、写及执行权限：
读权限（r） ：对于文件，具有读取文件内容的权限；对于目录，具有浏览目录的权限。
写
