使用scrapy和pandas完成对知乎300w用户的数据分析 经验

overview 使用scrapy和pandas完成对知乎300w用户的数据分析。首先使用scrapy爬取知乎网的300w,用户资料, 最后使用pandas对数据进行过滤,找出想要的知乎大牛,并用图表的形式可视化。

wb26 2015-08-20   63915   0

一个开源的快速、轻巧的win32/64 CPU和内存分析器:dprofiler 经验

dprofiler是一个开源的快速、轻巧的win32/64 CPU和内存分析器。 goal 1, very low overhead and impact to target application

jopen 2014-12-23   19183   0

几个可用于数据挖掘和统计分析的java库 经验

的支持,使这些算法可以更高效的运行在云计算环境中。 matlab: JMulTi :时间序列分析开发库 来自: http://itindex.net/blog/2015/01/09/1420751820000

cwf8 2015-01-09   140171   0

殷鹏翔:51信用卡的日志分析变迁史和技术细节 经验

“移动时代互联网金融的架构趋势”主题线下沙龙中,分享了 51 信用卡的日志分析演变过程: 一、 日志变迁过程 1. 12 年初创期,用户数量在 50 万以内,处于原始数据积累期。日志分析主要用来关注每天新增用户、新增邮箱总数。整

jopen 2015-02-09   16022   0
日志  

使用Elasticsearch + Logstash + Kibana搭建日志集中分析平台实践 经验

讲。然后公司最近也需要实现一个日志集中分析平台。ASTA谢恰好也讲了他使用了Elasticsearch + Logstash + Kibana这个组合进行日志分析。回来之后就买了一本书然后各种goog

jopen 2015-10-28   26145   0

海量数据实时OLAP分析系统-Druid.io安装配置和体验 经验

关键字:druid、druid.io、实时olap、大数据实时分析 导读: 一、Druid简介 二、Druid架构组成及相关依赖 三、Druid集群配置 四、Druid集群启动

jopen 2015-11-18   136332   0
Druid  

analyze-css:CSS 选择器的复杂度和性能分析 经验

analyze-css - CSS selectors complexity and performance analyzer

jopen 2016-02-17   13087   0

用Kibana和logstash快速搭建实时日志查询、收集与分析系统 经验

收集、分析,并将其存储供以后使用(如,搜索),您可以使用它。说到搜索,logstash带有一个web界面,搜索和展示所有日志。 kibana 也是一个开源和免费的工具,他可以帮助您汇总、分析和搜索

qwesgssr5636 2016-02-04   74389   0

非侵入式监控PHP应用性能监控分析 经验

"/tmp/xhprof.log"); $xh_force_disable = false; //设置性能分析是否启用,设置为true表示关闭。 $max_time = 100; //millisecond $xh_enable

3o4i6u0s2u 2016-01-27   12162   0

淘宝新UI需求分析篇 - “四核”驱动的“三维”导航 经验

left|middle|right),由后面那个参数指定你将要展示的页面在哪个frame里出现。这样做的基本条件是,做好需求分析,仔细梳理页面之间的逻辑关系,使得每个页面都在一个预订的frame里展示。 旺信的导航逻辑可以抽象成这个样子:

Eloisa8912 2016-04-25   25412   0
UI  
P31

  基于JSP的网络问卷调查与分析系统设计与实现(本毕业科设计) 文档

中图分类号:TP391.9 本 科 生 毕 业 设 计 (申请学士学位) 论文题目 基于JSP的网络问卷调查与分析系统设计与实现 作者姓名 费 勤 涛 所学专业 计算机科学与技术 指导教师 庞明勇 赵瑞斌 2012年4月28日

12313123 2012-05-11   766   0
P3

  oracle函数介绍(6) 著名函数之分析函数 文档

 ORACLE函数介绍 第六篇 著名函数之分析函数 2007.8.28 1、 AVG([DISTINCT|ALL] expr) OVER(analytic_clause) 计算平均值。 例如: --聚合函数

zhouqg 2012-11-03   2701   0

一个可扩展的遥感和图像分析软件平台:Opticks 经验

Opticks 是一个可扩展的遥感和图像分析软件平台。它具有以下特性: 免费和开源 支持以下文件格式:NITF 2.0/2.1, GeoTIFF, ENVI, ASPAM/PAR, CGM, DTED

jopen 2013-04-04   23058   0
P124

  历年信息系统监理师下午试题分析与解答(2005-2011全) 文档

下午试题 8 2006上 信息系统监理师下午试题分析与解答 12 2006下信息系统监理师下午试题分析与解答 22 2007上信息系统监理师下午试题分析与解答 33 2007 年下半年 信息系统监理师

thl53 2012-12-19   2807   0
试题  

由浅入深探究 MySQL索引结构原理、性能分析与优化 经验

有限但很多(如中国城市)的时候,优化器在优化时组合起来的数量是很大,这样的话就要做好基准测试和性能分析,权衡得失,取得一个合理的优化方法。 (1.4)like mysql> explain select

码头工人 2015-05-26   26156   0

GitHub助力科研项目:帮助科学家分析DNA,建造开源火箭等 资讯

上宣布,Github 正在为科学研究做出贡献:在 GitHub 上托管的开源科学项目包括寻找太阳系外的 类地行星 , 分析 DNA ,制造 开源火箭 等。 GitHub 有两项机制来促进平台上的科研项目发展。首先是 GitHub

jopen 2014-05-16   9010   0
Github  

Android LayoutInflater原理分析,带你一步步深入了解View(一) 经验

那么这第三个参数attachToRoot又是什么意思呢?其实如果你仔细去阅读上面的源码应该可以自己分析出答案,这里我先将结论说一下吧,感兴趣的朋友可以再阅读一下源码,校验我的结论是否正确。 1

kuwei159763 2016-02-09   9056   0

技术分享:几种常见的JavaScript混淆和反混淆工具分析实战 经验

信息安全常被描述成一场军备竞赛,白帽与黑帽,渗透测试者与黑客,善与恶,本文将聚焦这场永无止境决斗中的一个小点。 HTML5 & JS 应用中充满着对输入进行验证/注入的问题,需要开发人员始终保持警惕。但同时还存在着另一个问题,就是应用中程序专用代码的易访问性。为了防止盗版或者至少使盗版更加困难,常会使用混淆工具对 JS 代码进行混淆。作为对立面,反混淆工具也可以将混淆过的 JS 代码进行还原。我曾经接触过双方的一些工具,下面是我的一些研究成果。

vneu4725 2016-03-05   35334   0

大数据基础框架设计——实时分析技术平台洞察与实践 经验

位大数据相关专家齐聚“2016 易观 A10 大数据应用峰会”对实时分析技术的看法和实践经验进行了分享和讨论,从技术角度解析了企业如何做到实时分析。 很久以前大数据有三个概念—— “三个V”:第一个V是非

edsh8445 2016-11-04   8886   0
1 2 3 4 5 6 7 8 9 10