期刊文献+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息

基于Scrapy和casperjs的电子商务网站信息采集系统研究 被引量：5

下载PDF
导出
摘要 针对大数据时代用户对电子商务信息采集与分析的需求,设计并实现了一个高扩展性的基于Scrapy的电商网站信息采集系统,能解决异步数据加载带来的数据采集困难的问题,系统采用了casperjs、redis、graphite等框架和技术进一步增强了对电商内容爬取的适应能力和可扩展性。系统能够工作在云计算环境下,具有非常高的应用价值。
作者 高荣
机构地区 广西财经学院信息与统计学院
出处 《数字技术与应用》 2015年第3期67-68,共2页 Digital Technology & Application
基金 广西财经学院数量经济学创新团队基金(2014CX02 2014CX03) 广西自科然科学基金(2013GXNSFBA019274) 广西教育厅基金(2013LX135) 广西财经学院基金(2012D13)
关键词 电子商务 Scrapy casperjs 信息采集
分类号 TN915 [电子电信—通信与信息系统]
  • 相关文献

参考文献3

二级参考文献29

  • 1王辉,高利军,王听忠.个性化服务中基于用户聚类的协同过滤推荐[J].计算机应用,2007,27(5):1225-1227. 被引量：43
  • 2吴颜,沈洁,顾天竺,陈晓红,李慧,张舒.协同过滤推荐系统中数据稀疏问题的解决[J].计算机应用研究,2007,24(6):94-97. 被引量：51
  • 3Intel. What happens in an Internet Minute? [ EB/OL]. [ 2014 - 05 - 18 ]. http ://www. intel, com/content/www/ us/en/communications/internet-minute-infographic, html.
  • 4Eppler,Martin J,Jeanne Mengis. The concept of informa- tion overload:A review of literature from organization sci- ence, accounting, marketing, MIS, and related disciplines [ J ]. The information society,2004, 20 (5) : 325 - 344.
  • 5Qin Z,Li D. The application research of E-Government- procurement in china based on business componentframe-work [ C ]//Proceedings of the 3rd International Conference on Digital Society ( ICDS' 09 ). USA : [ s. n. ] ,2009:30-39.
  • 6Dou Yijie, Joseph Sarkis, Chunguang Bai. Government Green Procurement:A Fuzzy-DEMATEL Analysis of Bar- riers [ J ]. Springer Berlin Heidelberg, 2014 ( 8 ) : 567 - 589.
  • 7Hong-Sik (Justin) Chung. Government Procurement in the United States-Korea Free Trade Agreement:Great Op- portunities for Both Sides? [J]. Nw J Int' 1 L Bus,2014, 34(2) :299.
  • 8ZHAO Z D, SHANG M S. User-based collaborative-ill- tering recommendation algorithms on hadoop [ C ]// Knowledge Discovery and Data Mining,WKDD' 10 Third International Conference on IEEE. USA : [ s. n. ] , 2010 : 478 -481.
  • 9Pazzani M. A framework for collaborative, content-based, and demographic filtering [ J ]. Artificial Intelligence Re- view, 1999,13 (5/6) : 393 - 408.
  • 10Shiva Rajaraman. Five Stars Dominate Ratings [ EB/ OL]. [ 2009 - 11 - 12 ]. http ://youtube-global. blogspot. com/2009/09/five-stars-dominate-ratings, html.

共引文献7

同被引文献23

引证文献5

二级引证文献10

数字技术与应用
2015年 第3期

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部