Pholcus(幽灵蛛)是一款纯Go语言编写的重量级爬虫软件,清新的GUI界面,优雅的爬虫规则、可控的高并发、任意的批量任务、多种输出方式、大量Demo,支持横纵向两种抓取模式,支持模拟登录和任务取消等,并且考虑了支持分布式布局。
通过本文,读者可以了解 Heritrix 的相关特点以及在 Eclipse 中的配置运行,能够从零开始构建特定站点的专有爬虫,从而为网站增加全文检索服务。 背景 随着网站内容的增加,为其添加搜索功能是一个常见的需求,搜索引
Netty是一个java开源框架。Netty提供异步的、事件驱动的网络应用程序框架和工具,用以快速开发高性能、高可靠性的网络服务器和客户端程序。 也就是说,Netty 是一个基于NIO的客户、服务器端编程框架,使用Netty
GNUnet 是一个P2P框架,专注于提供安全。所有在网络中的P2P消息都是加密和验证过的。这个框提供了一个抽象的转输层,当前能够将流量封装在UDP, TCP, HTTP, HTTPS, direct
SocketServer简化了网络服务器的编写。它有4个类:TCPServer,UDPServer,UnixStreamServer,UnixDatagramServer。这4个类是同步进行处理的,另
一个简单的 C++ 网络服务器框架, 使用这个框架, 可以帮助你快速上手, 编写自定义的 C++ 服务器应用, 避免繁琐的网络 IO 和连接管理等细节. Sim 的报文协议设计得非常巧妙, 使得你可以用
IVRE(又名DRUNK)是一款网络侦查框架,包括两个基于p0f和Bro的被动侦查模块和一个基于Nmap&Zmap的主动侦查模块,其功能类似于国内知道创宇公司推出的一款网络空间搜索引擎ZoomEye(钟馗之眼)。
这样的命令, 你想写 PHP 或者 Python 脚本, 也是非常简单的. 例如, 你采用 Sim 框架写了一个计算加法的服务器. 这时怎么测试呢? 很简单! 在命令行执行 $ nc 127.0 . 0
com/a/1190000002939797 chuck是一个单线程,异步的C网络库.同时导出了lua接口,可以通过lua方便的编写网络应用.下面演示一下如何使用chuck编写一个简单的echo服务. echo
Volley框架是在Google I/O 2013上Volley发布的,目的是使Android平台上的网络通信库,能使网络通信更快,更简单,更健壮。我们也简单了解下 Volley引入的背景,在Volley出现以前,
允许你用纯Python创建贝叶斯信念网络和其他图模型,目前支持四种不同的推理方法。 支持的图模型 离散变量的贝叶斯信念网络 有着高斯分布的连续变量的高斯贝叶斯网络 推理引擎 消息传递和联合树算法(Junction
次封装的网络框架,可以任意轻松切换使用的底层网络请求框架,AndNet使用Parser-Callback模式,可以轻松实现从网络请求到数据解析的整个操作步骤。 AndNet的网络请求框架默认使用O
com/platform/frameworks/volley 1. 什么是Volley 在这之前,我们在程序中需要和网络通信的时候,大体使用的东西莫过于AsyncTaskLoader,HttpURLConnection
Volley框架是在Google I/O 2013上Volley发布的,目的是使Android平台上的网络通信库,能使网络通信更快,更简单,更健壮。我们也简单了解下Volley引入的背景,在Volle
试了闭包/单例/命名空间/GCD/NSOperationQueue/的使用,包含图片下载队列和缓存框架。 项目主页: http://www.open-open.com/lib/view/home/1403571201795
在前两篇( 教你写Android网络框架之基本架构 、 教你写Android网络框架之Request、Response类与请求队列 )博客中,我们已经介绍了SimpleNet框架的基本结构,以及Reques
XDroidRequest XDroidRequest 是一款网络请求框架,它的功能也许会适合你。这是本项目的第三版了,前两版由于扩展性问题一直不满意,思考来 思考去还是觉得Google的Volley的扩展性最强
家多少也听过这个框架,下面我们就来一起学习下,讲真,学会之后这个框架用起来真的很爽,特别灵活。 按照习惯先来说一下它的优缺点 优点: 可以配置不同HTTP client来实现网络请求,如okhttp、httpclient等
C 语言版本的 acl 框架库而写的C++库,具备如下特性: 1)同步/异步网络通信框架;同步流既支持网络通信,又支持文件读写 2)多进程/多线程/非阻塞/触发器服务器框架 3)功能强大的 http
发布了,acl 是 one Advanced C/C++ library 的简称,主要包括网络通信库以及服务器框架库等功能,支持 Linux/Windows/Solaris/FreeBsd/MacOS 平台;整个