【转】爬虫与反爬虫技术简介
互联网的大数据时代的来临，网络爬虫也成了互联网中一个重要行业，它是一种自动获取网页数据信息的爬虫程序，是网站搜索引擎的重要组成部分。通过爬虫，可以获取自己想要的相关数据信息，让爬虫协助自己的工作，进而降低成本，提高业务成功率和提高业务效率。
本文一方面从爬虫与反反爬的角度来说明如何高效的对网络上的公开数据进行爬取，另一方面也会介绍反爬虫的技术手段，为防止外部爬虫大批量的采集数据的过程对服务器造成超
编程开发
spring-data-elasticsearch打印完整dsl
初学es，用spring-data-elasticsearch的模板方法组装、执行dsl，有时候碰到执行报错或者执行结果不如预期，这时候就很想看一下执行的dsl到底是什么，也方便在其他工具中直接修改看效果。
目前网络上只能找到如下的这些打印方式：
// 打印query语句
log.info(nativeSearchQuery.getQuery().toString());
// 打印分页语句
lo
那女孩｜That Girl
那女孩/That Girl
今天与大家分享一首我平时喜欢听的歌曲，曲名【That Girl 】
我对这首歌的歌手不是很熟， Olly Murs, 但我喜欢的是这首歌的歌词和旋律。
这首歌告诉我们，在茫茫人海中，一旦你遇见了对的人，千万不要错过，要大胆地对你爱的人表白，勇敢去接受爱，承担爱，珍惜爱，保护爱，不要轻易放手心底里的真爱，否则追悔莫及，遗憾终身，为了追求理想中的真爱，要大胆地去
Linux安装Nginx并配置启动命令
镜像下载、域名解析、时间同步请点击 阿里云开源镜像站
安装前准备工作
因为Nginx依赖于gcc的编译环境，所以，需要安装编译环境来使Nginx能够编译起来
yum install gcc-c++
Nginx的http模块需要使用pcre来解析正则表达式，需要安装pcre
yum install -y pcre pcre-devel
安装依赖的解压包
yum install -y zlib z
【教3妹学算法】两个相同字符之间的最长子字符串
插： 前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站。
坚持不懈，越努力越幸运，大家一起学习鸭~~~
3妹
3妹：2哥，你有没有看到新闻，长沙电信大楼着火了。
2哥：看到了，几十层楼被熊熊大火包围了。
3妹：恩，好在人员有序撤离，没有人员伤亡。
2哥：嗯，也是不幸中的万幸了。
3妹：2哥，今天周六了，准备干什么去呀？
2哥：还是呆在
Python课程总结
HTTP
python启动HTTP Server的命令为:
python -m http.server
需要了解的状态码
•200 操作成功
•404 资源文件不存在
•403 网络不可访问
•500 服务器内部错误
requests
安装命令为: pip install requests
例子代码为：
import requests
r = requests.get('
这个Python读取文件的方法，堪称天花板级别...
前言
嗨喽，大家好呀~这里是爱看美女的茜茜呐
又到了学Python时刻~
今天咱们来了解一下 fileinput 。
说到fileinput，可能90%的码农表示没用过，甚至没有听说过。
这不奇怪，因为在python界，既然open可以走天下，何必要fileinput呢？
但是，今天我还是要介绍fileinput这个方法，因为太奈斯了。
不止是香。是真香！
接下来，就跟着我，一起fi
互联网是如何工作的？
细节可能会让你大吃一惊……
每个人都应该了解互联网的基础知识。
我们的世界越来越数字化和互联。作为这个新社会的公民，了解底层系统是有意义的。
作为软件开发人员，了解这一点至关重要。在今天的文章中，让我们更深入地了解底层协议。
查找收件人：IP 地址
在我上一篇文章中，我谈到了大规模网络以及它们是如何连接的。
但是计算机如何在如此庞大的网络上发现彼此呢？如果有适当的权限，我可以将我的计算机连接到您的
【算法题】2216. 美化数组的最少删除数
插： 前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站。
坚持不懈，越努力越幸运，大家一起学习鸭~~~
题目：
给你一个下标从 0 开始的整数数组 nums ，如果满足下述条件，则认为数组 nums 是一个 美丽数组 ：
nums.length 为偶数
对所有满足 i % 2 == 0 的下标 i ，nums[i] != nums[i + 1]
Seurat的subset,数据提取方法
Idents(scRNA) <- scRNA$Majory_type
subset(scRNA, cells = c("cell.1","cell.2","cell.3",...), invert = F) #根据cell.id提取
subset(x = scRNA, idents = c("CD4 T cells", "CD8 T cells"))
subset(x = scRNA, su
