基于python的网络爬虫技术研究

基于python的网络爬虫技术研究

论文摘要

网络爬虫技术作为极具特色的搜索引擎,可以通过互联网来抓取网路上的网页来获取内容,特别是在当前大数据的发展背景之下,如何基于python来发展网络爬虫技术成为亟待解决的问题。本文将就python语言的特点及主要内容进行论述,并就在大数据环境下如何基于python发展网络爬虫技术提一些意见和建议。

论文目录

  • 1 引言
  • 2 对python语言主要内容及特点的论述
  • 3 如何利用python来发展网络爬虫技术
  •   3.1 充分发挥python语言的优势
  •   3.2 为网页抓取方式制定技术标准
  •   3.3 对各个控制模块进行优化管理
  • 4 网络爬虫的工作原理及分类
  • 5 结束语
  • 文章来源

    类型: 期刊论文

    作者: 毕森,杨昱昺

    关键词: 大数据环境,网络爬虫技术研究

    来源: 数字通信世界 2019年12期

    年度: 2019

    分类: 信息科技

    专业: 计算机软件及计算机应用,互联网技术

    单位: 宁波财经学院

    分类号: TP393.092;TP312.1

    页码: 107-108

    总页数: 2

    文件大小: 1506K

    下载量: 662

    相关论文文献

    标签:;  ;  

    基于python的网络爬虫技术研究
    下载Doc文档

    猜你喜欢