仪器网(yiqi.com)欢迎您!

| 注册 登录
网站首页-资讯-专题- 微头条-话题-产品- 品牌库-搜索-供应商- 展会-招标-采购- 社区-知识-技术-资料库-方案-直播- 视频

问答社区

如何抓取和分析互联网公开数据

翟彦硕 2016-01-11 22:12:11 404  浏览
  •  

参与评论

全部评论(1条)

  • 如梦黄粱 2016-01-12 00:00:00
    导读:互联网蕴藏着丰富的公开数据资源,通过获取这些数据,作为城市研究的辅助支撑,是未来城市研究者必备的技能之一,近期我们也会继续介绍一些简单有趣的公开数据分析应用。 在互联网领域,对数据的抓取叫做“采集”,在采集工具的作用下,可以很快的抓取一个网站的整站数据,而如果这些数据能够辅助我们的部分决策,那么这个工具和方法值得一学。(本文中数据抓取工具为“火车头”软件) 西安建筑科技大学城市体验、模拟与分析实验ZX的郑晓伟为我们分享了他在开放数据获取方法及应用分析技术中的经验。 开放数据(大数据)的相关基础知识 开放数据和大数据的区别 开放数据:商业网站(大众点评、安居客等)数据、地图开放平台数据、社交媒体(新浪微博)数据、政府政务公开数据等。 大数据:手机信令数据、浮动车数据(例如车载GPS、公交刷卡、地铁刷卡)等。 大数据是近似全样本数据,而开放数据是非全样本数据:

    赞(11)

    回复(0)

    评论

获取验证码
我已经阅读并接受《仪器网服务协议》

热门问答

如何抓取和分析互联网公开数据
 
2016-01-11 22:12:11 404 1
数据采集、数据抓取和数据抽取
尽量清楚的说明数据采集、数据抓取和数据抽取的区别是什么?希望不要答自己以为的,尽量科学一点... 尽量清楚的说明数据采集、数据抓取和数据抽取的区别是什么?希望不要答自己以为的,尽量科学一点 展开
2013-08-19 10:15:50 637 2
互联网彩票技术数据的构成分析
 
2018-04-18 13:28:49 302 1
如何从网站或者软件中抓取数据
 
2018-11-17 06:01:28 202 0
互联网产品如何搭建数据指标体系进行数据分析
 
2018-07-29 11:28:49 329 1
有哪个数据抓取和文本分析的软件比较好用啊
我的毕业论文要对一个网站(8264网)上面的评论进行文本分析,有什么软件能把评论数据抓取下来呢,还有文本分析要用什么软件比较好啊... 我的毕业论文要对一个网站(8264网)上面的评论进行文本分析,有什么软件能把评论数据抓取下来呢,还有文本分析要用什么软件比较好啊 展开
2016-01-21 00:17:30 274 1
互联网+与大数据的关系
 
2016-05-10 00:49:30 257 4
火车头采集器,怎么查看已经抓取的数据?
各位大神,我已经设定好了采集规则,怎么把抓取到的数据保存在本地?当我把数据以文本的形式保存到本地时,发现抓取的数据全变成了下图的内容,数据消失了!!!!!... 各位大神,我已经设定好了采集规则,怎么把抓取到的数据保存在本地? 当我把数据以文本的形式保存到本地时,发现抓取的数据全变成了下图的内容,数据消失了!!!!! 展开
2016-06-15 17:52:28 386 1
请用唯物辩证法分析“互联网自由问题”
 
2011-04-10 11:05:51 363 2
请教如何分析BET 数据
 
2018-11-17 05:33:38 224 0
网络爬虫抓取数据 有什么好的应用
 
2016-06-29 17:10:20 413 1
数据文员具体做什么,如何分析销售数据?
怎样对销售数据进行统计、汇总?尤其是如何进行分析?需要精通什么办公软件?迷茫...... 怎样对销售数据进行统计、汇总?尤其是如何进行分析?需要精通什么办公软件?迷茫... 展开
2012-05-03 10:26:59 481 2
如何分析X射线粉末衍射图谱和数据
如题!急用,非常感谢!!!
2017-10-12 01:38:13 615 1
一套互联网用户行为分析系统多少钱
 
2014-12-23 22:39:06 298 2
怎么用VBA或网络爬虫程序抓取网站数据
 
2017-03-29 07:14:03 397 1
根据流式细胞仪的数据,如何分析?
根据下面两幅图中的数据,能否专业的解释细胞凋亡方面和细胞周期是否被阻滞?左边是对照,右边是实验组,急求急求,多谢专家!
2016-09-12 15:32:57 288 1
如何分析流式细胞仪显示的数据
 
2016-12-01 13:05:35 412 1
激光粒度仪测粒度数据如何分析?
 
2018-03-02 19:07:02 553 1
激光粒度仪测粒度数据如何分析
2012-05-04 19:59:52 307 2
如何使用ethereal软件来捕获和分析网络数据
 
2014-12-03 12:36:06 376 1

11月突出贡献榜

推荐主页

最新话题