摘要：布隆过滤器的实现，包括标准计数标准扩容计数扩容。计数扩容布隆过滤器标准扩容布隆过滤器的子类，功能继承自标准扩容布隆过滤器，但支持删除元素的操作。 bloompy github:bloompy 布隆过滤器的Python3实现，包括标准、计数、标准扩容、计数扩容。更新自pybloom。 安装 pip install bloompy 使用 通过bloompy你可以使用四种布隆过滤器 标准布...
摘要：通常的解决办法是通过抓包，然后查看信息，接着捕获返回的消息。为了减少因为安装环境所带来的烦恼。代理因为我们已经用替换了。我们需要直接用来处理代理问题。根据上面这段代码，我们也不难猜出解决代理的方法了。 上周说到scrapy的基本入门。这周来写写其中遇到的代理和js渲染的坑。 js渲染 js是爬虫中毕竟麻烦处理的一块。通常的解决办法是通过抓包，然后查看request信息，接着捕获ajax...
摘要：高阶函数实参是一个函数名函数的返回值是一个函数传递的参数包含函数名。内置高阶函数函数函数接收两个参数一个是函数一个是序列将传入的函数依次作用到序列的每个元素并把结果作为新的返回。 高阶函数 实参是一个函数名 函数的返回值是一个函数 print(abs(-10)) f = abs print(f(-10)) #传递的参数包含函数名。 def myfun(x,y,fun): ...
摘要：注意本示例仅供学习参考混淆原理出于某种原因，明文信息通过自定义字体进行渲染，达到混淆目的。如果创建一种自定义字体，把渲染成，那么浏览者看到的便是这个数字。这样便达到混淆信息的效果，常见于对付爬虫之类的自动化工具。 注意：本示例仅供学习参考～ 混淆原理 出于某种原因，明文信息通过自定义字体进行渲染，达到混淆目的。 举个例子：网页源码 123 在正常字体的渲染下，浏览者看到的是 123 ...
摘要：写好项目后，要将项目部署到服务器上，可以采用，和的方式进行部署。安装虚拟环境当一台机器上部署多个项目的时候，各个项目依赖的包可能有冲突，互相影响。使用虚拟环境可以将各个项目的执行环境隔离，互不影响。 写好Django项目后，要将项目部署到服务器上，可以采用nginx，gunicorn和supervisor的方式进行部署。 安装虚拟环境 当一台机器上部署多个项目的时候，各个项目依赖的包可...
