Python网络爬虫与信息提取-北京理工大学(精品课)

shaoling

地址:5号服务器----VIP资料下载七区\专题教程专区

游客，如果您要查看本帖隐藏内容请回复

Python网络爬虫与信息提取 - 北京理工大学(精品课) 完整版 有朋友需要的，包括了所有视频PPT课件教材，“The website is the API.”网络爬虫逐渐成为自动获取网络信息的主要形式。还等什么？快写个爬虫探索世界吧！

Python网络爬虫与信息提取 课程概述

    “The website is the API.”网络爬虫逐渐成为自动获取网络信息的主要形式。还等什么？快写个爬虫探索世界吧！
    本课程面向各类编程学习者，讲解利用Python语言爬取网络数据并提取关键信息的技术和方法，帮助学习者掌握定向网络数据爬取和网页解析的基本能力。
    本课程介绍Python计算生态中最优秀的网络数据爬取和解析技术，具体讲授Requests-BS4-Re和Scrapy两条构建网络爬虫的技术路线，所讲述内容广泛服务Amazon、Google、NSA、PayPal、Twitter等国际知名公司和组织。包括必修内容和选修内容。
    必修内容包括:
  （1）Python第三方库Requests，讲解通过HTTP/HTTPS协议自动从互联网获取数据并向其提交请求的方法；
  （2）Robots协议，网络爬虫排除标准，讲解礼貌合法获取信息的规范；
  （3）Python第三方库Beautiful Soup，讲解从所爬取HTML页面中解析完整Web信息的方法；
  （4）Python标准库Re，讲解从所爬取HTML页面中提取关键信息的方法。
    选修（介绍性）内容包括：
  （1）“网络爬虫引擎”的设计原理；
  （2）Python专业网络爬虫框架第三方库Scrapy，简要介绍构造专业网络爬虫的基本方法。
    本课程希望传递“理解和运用计算生态，培养集成创新思维”的理念，重点培养学习者运用当代最优秀第三方专业资源，快速分析和解决问题的能力。
    "人生苦短，不要刀耕火种“，嵩老师教你直面问题和需求，用最好的工具解决它！

预备知识
    本课程需要学习者具备Python语言编程的基本知识和初步技能，建议Python零基础学习者先修嵩老师的“Python语言程序设计”课程。具体地，学习者需要预先掌握Python的数字类型、字符串类型、分支、循环、函数、列表类型、字典类型、文件和第三方库使用等概念和编程方法。

授课大纲
    本专题课程共12个单元，包括8个内容单元和4个实战单元，每周3个单元。讲授Requests-BS4-Re和Scrapy两条技术路线。本课程注重实例的运用和讲解，全课程包括10+大小实例，将帮助学习者快速掌握网络爬虫与信息提取技术，体会运用Python语言将技术变为应用的乐趣。

    单元1      Requests库入门：Requests库的基本使用、主要接口函数介绍等
    单元2      网络爬虫的“盗亦有道”：Robots协议
    单元3      Requests库网络爬虫实战：5个使用Requests库的实用例子
    单元4      Beautiful Soup库入门：BS4库的基本使用、解析HTML网页信息方法等
    单元5      信息及信息提取方法：理解信息的结构和组织（XML、JSON、YAML）
    单元6+    实战：中国大学排名定向爬虫
    单元7      Re（正则表达式）库入门：Re库的基本使用、提取HTML页面关键信息的方法等
    单元8+    实战：淘宝商品比价定向爬虫
    单元9+    实战：股票数据定向爬虫
    单元10*   网络爬虫搜索引擎框架
    单元11*   Scrapy库入门
    单元12+* 实战：股票数据专业爬虫；表情包专业爬虫
    其中，+代表实战单元，非+标记为内容单元，*代表选修单元。

zhaoyj

谢谢，学习学习

nbkcq

感谢楼主分享！

swq2502

看看，谢谢大神分享

linux_lili

非常感谢

kejulin

666666666666

xzqlj

谢谢分享

hcier

很好，学习一下

icq9988

谢谢分享

happysky

谢谢楼主！

h12571912

谢谢