注册会员   登录
2016年10月 代理IP知识问答
免费的IP代理是有风险的。以http代理访问淘宝为例,你访问淘宝等等这些网站所有的访问信息都可以被提供代理的主机看到。如果你有记录登录信息(“记住我”之类的选项),那么你的cookie,可以被人利用。由于数据是通过代理转发的,也就无法确认是否与实际情况一致,你访问的淘宝页面可能是伪造的钓鱼站点。你无法确认免费提供代理服务器的人是否可靠,也就无法确认他是不是会做以上的事儿。如果通过代理浏览facebook,然后上传了艳照,被人记录留档也是有可能发生的事儿。 ... 阅读全文
怎么利用爬虫爬取QQ空间中设置了权限的无法正常访问的内容?比如很多人的空间不允许别人访问,或者有些相册不允许别人访问 ... 阅读全文
6-16更新:目前回答和评论数很少,但都怀疑是我电脑或网络的问题。我在不同的时间测试了很多次了。还是下面截图这样的。方法步骤如下:打开http://amazon.cn;右上角点登陆;在密码输入框下方点击忘记密码。评论里发哈哈哈和猜测的人,有这功夫,为什么不去复验一下问题能否重现呢?再再再次重申,并非我网络问题。浏览器:火狐47 IE9系统:win7 64位--------------------------------------原问题如下:对比国内其他网站五花八门眼花缭乱的验证码,亚马逊的验证码清晰的让人觉得不可思议.既然是验证码,那其基本作用就是用来区分人和机器的.亚马逊验证码做的这么清晰,不担心这个问题吗?是否在链接或生成上采用了什么技术?附亚马逊的其中一个验证码链接:https:// ... 阅读全文
查看log发现有大量不同的ip访问网站的html静态页面和动态页面,请求次数非常频繁。nginx如何破解呢? ... 阅读全文
我一共搭建了五台linux,一个跑nginx,两台跑apache(做均衡),两台跑mysql(主从),前端nginx,反向代理给后端的两个apache服务器,两台apache服务器是典型的最简单的lamp的搭建结构,如何实现nginx的session共享,使得后面的任意一台apache挂掉后对服务都不影响。我尝试了使用ip_hash,他可以指定到特定的机器,但是挂了之后,session就没了,然后会代理到另一台机器,这样的话,原来的东西要重新来过。还有memcached保存session,还有使用cookie的。除了这几个有没有比较好的方式?上面的理解也许有错,直接指出,谢谢了 ... 阅读全文
在国外有一台vps,现在正在当ipv4的vpn服务器用。vps支持ipv6且ipv6的响应速度也比ipv4的快。突然想到学校里面ipv6出口是不计流量的,并且校内互联也不计流量,于是想到这样的方法:用宿舍的服务器当中继vpn server,平常的手机等设备连到宿舍的服务器,再又宿舍的服务器通过ipv6转发到vps上,既免了流量又顺便翻了墙。问题就是:1.支持ipv6的vpn有什么?现在的l2tp ipsec可以配置吗?2.宿舍的服务器流量转发怎么配置?(是Mac OS)或者有其他什么好的方法0 0 ... 阅读全文
nginx作为http web服务器时:max_clients = worker_processes * worker_connections;这个很好理解。nginx作为反向代理时是如何计算的,网上和书上都说:max_clients = worker_processes * worker_connections/4 问题是这个是怎么计算出来的? ... 阅读全文
如题,Shadowsocks是Socket 5代理,如果希望连到路由器的所有设备都能访问外网地址时都直接走代理通道是不是还需要装什么服务把Socket 5代理转换到其他通道?问题进阶,如果这个连Shadowsocke的路由器需要连接到另一个连接ADSL Modem拨号的路由器上网,如何在满足Shadowsocks路由器下设备全局走代理的同时,让这两个路由器下的设备在本地局域网内还可以互相访问?补充说明,之所以全局走代理是因为基本那个路由器只打算给PS4用,PS4即使国内有CDN节点(也可能没有?),但PS4上的网游大抵是不会有的,所以全局走代理也没什么损失。而电脑跟手机上我都可以直接装Shadowsocks的客户端,也用不着在路由器上折腾了。之所以问题进阶里希望两个路由器下的设备可以在一个网 ... 阅读全文
八爪鱼简单,容易上手,我个小白看几个视频就能操作了;缺点采集速度慢,有时候会有遗漏(看到有人这么说);gooseeker小巧,功能强大,上手难度中等,我看了好几天,勉强都搞定(人笨没办法;有时候夹杂一些土办法),支持爬虫群采集;常规任务现在我都用gooseeker。我感觉,这个学会了,基本能解决所有的采集问题。火车头,一度想学会使用,奈何智商不够,没学会…… ... 阅读全文
VPN只是一种技术, 被我们当代理用. 正常的用法是外网使用公司内网之类的.注意使用VPN的时候无论全局还是局部, 你的流量全部会经过它(指中间服务器或软件), 只不过局部的话可能会经过一层判断, 是导向国外的代理服务器还是直连国内, 具体的实现方式有所不同. 所以如果你不信任这个VPN代理商和它的客户端软件, 特别是它没有经过加密的时候, 不要在连接这个VPN的时候登陆重要账户.从长远来说, VPN是比较稳定的xx手段, 其它比较容易抽风. ... 阅读全文
最近在学习用python写爬虫,发现抓取动态网页比抓取静态网页难了不是一点。在抓取京东商品评价时遇到了无法解决的问题,在网上搜索无果后来知乎向各位大大求助。因为需要大量抓取,我觉得用模拟浏览器渲染js来实现速度似乎不可接受。这里打算分析京东商品评价的最后加载的url,用python模拟这一请求来获得地址。用过ie发现其url是这个 但一直分析不出callback=jsonp1427099305331&_=1427099313525 的两串数字是如何生成我,要如何去模拟这一行为,麻烦各位帮帮忙。如果有其他好的思路也请赐教(另外有一个问题是京东这个url(http://club.jd.com/productpage/p-1130531389-s-0-t-0-p-0.html?callback=j ... 阅读全文
理论上是可能的,看这个商家是不是做得很久的,做得久的没有闲功夫去干这事吧,因小失大。 ... 阅读全文
维基百科:根据匿名程度区分 高度匿名代理高度匿名代理会将我们的数据包原封不动的转发,在服务端看来就好像真的是一个普通客户端在访问,而记录的IP是代理服务器的IP。普通匿名代理普通匿名代理会在数据包上做一些改动,服务端上有可能发现这是个代理服务器,也有一定几率追查到你的真实IP。代理服务器通常会加入的HTTP头有HTTP_VIA和HTTP_X_FORWARDED_FOR 。 ... 阅读全文
只需要简单的访问主页即可,没有应用层上的需求,但需要模拟多个不同的源IP。Jmeter是否可以满足这个需求?或者请介绍一个易上手的测试软件,只要有比较清晰的统计信息即可。 ... 阅读全文
41篇,每页15篇   1 2 3   刷新
友情链接 (合作QQ207309712):  每日免费代理IP  代理IP知识问答  网站地图


©CopyRight 2012-2017    ICP备案:辽ICP备17012256号-2   
 
客服QQ:207309712   投诉建议:2219765152    站大爷代理IP交流群:417568497    爬虫开发者交流群:343030927

警告:本站资源仅限用来计算机技术学习参考及大数据爬虫应用等合法行为,用户所有操作行为均有日志记录存档并保留2个月,用户若擅自利用本站资源从事任何违反本国(地区)法律法规的活动,由此引起的一切后果与本站无关。