Python爬虫-代理篇-TOR

Uncategorized
Tor介绍 TOR是全球有名的匿名网络，具有很高的匿名性，简单点说，Tor网络利用流量转发的方式，达到隐藏真实请求端(客户端)的目的，是目前比较受欢迎也比较有名气的的匿名工具。其原理图如下 由于出口IP随机轮换，且具有很强的匿名性，因此我们可以使用Tor网络作为爬虫代理，用来解决一些网站的IP封禁问题。…
阅读

Python爬虫-代理篇-TOR

技术
Tor介绍 TOR是全球有名的匿名网络，具有很高的匿名性，简单点说，Tor网络利用流量转发的方式，达到隐藏真实请求端(客户端)的目的，是目前比较受欢迎也比较有名气的的匿名工具。其原理图如下 由于出口IP随机轮换，且具有很强的匿名性，因此我们可以使用Tor网络作为爬虫代理，用来解决一些网站的IP封禁问题。…
阅读

联通大数据：安全的大数据才是靠谱的选择

Uncategorized
大数据是信息化发展的新阶段。随着信息技术和人类生产生活交汇融合，数据呈现爆发增长、海量集聚的特点，大数据已经成为推动经济发展、优化社会治理和政府管理、改善人民生活的创新引擎和关键要素。   但任何事物均具有两面性，数据的汇集加大了信息安全的风险，也为一些不法公司提供了非法获取、加工、售卖黑产数据而牟利的空间。…
阅读

吴恩达《深度学习》笔记三——卷积神经网络

Uncategorized
Writed by changfei_lovelife~ 目录 1.卷积神经网络 2.深层卷积网络实例探究 第一部分 卷积神经网络 1.边缘检测器 原理：利用过滤器，与原图矩阵进行卷积计算，可实现垂直/水平边缘检测。 卷积运算：逐元素相乘，然后相加…
阅读

X-Shadow暗影币如何保证交易的真实性？

darknet
比特币火了，区块链技术爆红，虚拟币如过江之鲫一般，一个接一个，大家总能听到新币的名字。新币里面，有浑水摸鱼的，可也有不少货真价实的，比如X-Shadow暗影币。这时候很多人要问了，这种交易怎么确保安全性呢？其实这个很简单。…
阅读

你不知道的CSS– >>> /deep/穿透

前端
解决Scoped CSS内想修改组件库组件样式问题： 分析：Scoped CSS规范是Web组件产生不污染其他组件，也不被其他组件污染的CSS规范。这样在打包的时候会生成一个独一无二hash值，这样父组件的样式就不会影响到子组件了…
阅读

koa 学习笔记

Uncategorized
一,初始化koa 1, npm init -y //初始化项目 2,npm install -g cnpm –registry=https://registry.npm.taobao.org //切换镜像 3, cnpm…
阅读

python3爬虫~~应对反爬策略

Python
通常防止爬虫被反主要有以下几个策略： 一.BAN IP 原因：某一个某一个时刻IP访问量特别特别大 ，或者是超出正常用户使用权限，导致服务器会偶尔把该IP放入黑名单 ，过一段时间再将其放出来 解决办法：分布式爬虫（分布式【分散url的手动分布式，以及框架分布式】）以及购买代理IP（Tor代理~~能买暗网代理），转化成app有的也有效…
阅读