phantomjs安装

教你怎么用JavaScript检测当前浏览器是无头浏览器

什么是无头浏览器(headlessbrowser)？无头浏览器是指可以在图形界面情况下运行的浏览器。我可以通过编程来控制无头浏览器自动执行各种任务，比如做测试，给网页截屏等。为什么叫“无头”浏览器？“无头”这个词来源于最初的“无头计算机(Headlesscomputer)”。维基百科关于的“无头...

12个高效的Python爬虫框架，你用过几个?

实现爬虫技术的编程环境有很多种，Java、Python、C++等都可以用来爬虫。但很多人选择Python来写爬虫，为什么呢？因为Python确实很适合做爬虫，丰富的第三方库十分强大，简单几行代码便可实现你想要的功能。更重要的，Python也是数据挖掘和分析的好能手。那么，Python爬虫一般用什么框...

运维的报表之路，用 node.js 轻松发送 grafana 报表

在运维过程中，无论是监控还是报表，都会有一些通过邮件发送图表的需求，由于开源的zabbix，grafana和kibana等并不完全具有“想发送哪儿就发送哪儿”的图片生成功能，在grafana中我们也考虑了一些其他方法，比如grafanawebdav和grafana-image-r...

C#基于浏览器内核的高级爬虫（c#爬取网页内容）

基于C#.NET+PhantomJS+Sellenium的高级网络爬虫程序。可执行Javascript代码、触发各类事件、操纵页面Dom结构、甚至可以移除不喜欢的CSS样式。很多网站都用Ajax动态加载、翻页，比如携程网的评论数据。如果是用之前那个简单的爬虫，是很难直接抓取到所有评论数据的，我们需要...

如何优化一个秒杀项目?（秒杀实现思路）

问题1：使用jmeter性能压测，定位瓶颈代码步骤流程：线程组--->Http请求--->查看结果树--->聚合报告tips：host的文件--->优先调用映射，减少DNS的时间默认内嵌Tomcat配置---->参数调优server.tomcat.accept-coun...

Phantomjs怎样优雅屏蔽掉iframe的影响?

一.问题描述骚年，当你捋一遍文档，写几个小例子，觉得Phantomjs在手，天下我有的时候，也许某一次不经意的点击，发现，哎呦，选择器竟然选不中元素！！！再仔细检查，发现我用的是CSS3的选择器呀，XPath也试过，结果还是发出的API调用有如石沉大海，这怎么破？二.问题原因及出现场景以上问题很...

黑客在苹果公司网络中发现55个安全漏洞!11项被标记为“高危”

本周的一篇博客显示，一群黑客针对苹果公司庞大的在线基础设施，花费数月时间后发现了一系列漏洞，其中包括一些允许黑客窃取用户iCloud帐户中文件的漏洞。不过，与那些蓄意破坏的黑客不同，这些黑客以“白帽”的身份进行操作，这意味着他们的目标是向Apple发出警报，而不是窃取信息。这个黑客团队由20岁的Sa...

用宝塔面板免费防火墙屏蔽织梦扫描网站

今天教大家在免费的基础上屏蔽织梦扫描，首先您要安装宝塔面板，然后再安装免费的防火墙插件，我用的是Nginx免费防火墙，然后打开这个插件。设置GET-URL过滤设置一条简单的宝塔面板的正则规则就可以屏蔽织梦的规则扫描，代码如下图^/(data\/admin|include\/data|include\...

干货丨推荐十款高效率的Python爬虫框架，你用过几个?

实现爬虫技术的编程环境有很多种，Java、Python、C++等都可以用来爬虫。但很多人选择Python来写爬虫，为什么呢？因为Python确实很适合做爬虫，丰富的第三方库十分强大，简单几行代码便可实现你想要的功能。更重要的，Python也是数据挖掘和分析的好能手。那么，Python爬虫一般用什么框...

学习python怎么能没有练手项目呢?诺，给你70个拿去玩，附教程

写在前面相信正在学Python你一定为了没有练手项目而发愁，小编精心为同学们推荐出了70个Python的练手项目，相信能够喂饱大伙儿吧！哈哈！这里面的项目都很有代表性，不只是可以用来练手，而且在以后的工作中都有很实在的用处，里面的代码几句代表性和实用性，小伙伴们一起来学习吧~注意啦！！！注意啦！！！...