(第42册)Python项目案例开发从入门到实战——爬虫、游戏和机器学习(第2版) 夏敏捷 郑秋生 尚展垒著_python项目案例开发从入门到实战——爬虫、游戏和机器学习 程序源码-程序员宅基地

技术标签: 爬虫  python  游戏  

本书由Python基础开发入手,延伸至爬虫技术开发、游戏开发、人工智能开发、网络应用开发、图像处理和可视化开发6个Python经典开发方向; 全书共提供25个项目案例,以项目驱动方式展开各知识点的讲解,将Python知识点分解到不同案例、不同章节,致力于Python技术的应用实践。

本书案例均从特定领域的技术基础开始,展示项目设计思想和设计理念,从而启发读者的创新思维,达到举一反三、将技术应用与实战结合的目的。项目案例的选取具有较高的实用性,包含校园网搜索引擎、小小翻译器、模拟登录、爬取豆瓣影评生成词云等爬虫方向案例,基于朴素贝叶斯算法的文本分类、基于卷积神经网络的手写体识别、基于OpenCV实现人脸识别等面向机器学习的案例,连连看、推箱子、两人麻将、中国象棋、网络五子棋、人物拼图等大家耳熟能详的游戏案例。书中不仅列出了案例的完整代码,而且对所有的源代码进行了非常详细的解释,做到通俗易懂、图文并茂。

本书适用于Python语言学习者、程序设计人员和游戏编程爱好者。

目  录

第一篇Python基础开发

第1章  Python基础知识

1.1Python语言简介

1.2Python语法基础

1.3Python面向对象设计

1.3.1定义和使用类

1.3.2构造函数

1.3.3析构函数

1.3.4实例属性和类属性

1.3.5私有成员与公有成员

1.3.6方法

1.3.7类的继承

1.3.8多态

1.3.9面向对象设计应用案例——扑克牌发牌程序

1.4Python图形界面设计

1.4.1创建Windows窗口

1.4.2几何布局管理器

1.4.3Tkinter组件

1.4.4Tkinter字体

1.4.5Python事件处理

1.4.6图形界面设计应用案例——开发猜数字游戏

1.5Python文件的使用

1.5.1打开/建立文件

1.5.2读取文本文件

1.5.3写文本文件

1.5.4文件内移动

1.5.5文件的关闭

1.5.6二进制文件的读/写

1.6Python的第三方库

第2章 序列应用——猜单词游戏

2.1猜单词游戏功能介绍

2.2程序设计的思路

2.3关键技术——random模块

2.4程序设计的步骤

第3章数据库应用——智力问答测试

3.1智力问答测试功能介绍

3.2程序设计的思路

3.3关键技术

3.3.1访问数据库的步骤

3.3.2创建数据库和表

3.3.3数据库的插入、更新和删除操作

3.3.4数据库表的查询操作

3.3.5数据库使用实例——学生通讯录

3.4程序设计的步骤

3.4.1生成试题库

3.4.2读取试题信息

3.4.3界面和逻辑设计

第二篇爬虫技术开发

第4章  调用百度API应用——小小翻译器

4.1小小翻译器功能介绍

4.2程序设计的思路

4.3关键技术

4.3.1urllib库简介

4.3.2urllib库的基本使用

4.3.3JSON使用

4.4程序设计的步骤

4.4.1设计界面

4.4.2使用百度翻译开放平台API

4.5API调用拓展——爬取天气预报信息

第5章 爬虫应用——校园网搜索引擎

5.1校园网搜索引擎功能分析

5.2校园网搜索引擎系统设计

5.3关键技术

5.3.1正则表达式

5.3.2中文分词

5.3.3安装和使用jieba

5.3.4为jieba添加自定义词典

5.3.5文本分类的关键词提取

5.3.6deque

5.4程序设计的步骤

5.4.1信息采集模块——网络爬虫的实现

5.4.2索引模块——建立倒排词表

5.4.3网页排名和搜索模块

第6章 爬虫应用——爬取百度图片

6.1程序功能介绍

6.2程序设计的思路

6.3关键技术

6.3.1图片文件下载到本地

6.3.2爬取指定网页中的图片

6.3.3BeautifulSoup库概述

6.3.4用BeautifulSoup库操作解析HTML文档树

6.3.5requests库的使用

6.4程序设计的步骤

6.4.1分析网页源代码和网页结构

6.4.2设计代码

6.5动态网页爬虫拓展——爬取今日头条新闻

6.5.1找到JavaScript请求的数据接口

6.5.2分析JSON数据

6.5.3请求和解析数据接口

第7章selenium操作浏览器应用——模拟登录

7.1模拟登录程序功能介绍

7.2程序设计的思路

7.3关键技术

7.3.1安装selenium库

7.3.2selenium详细用法

7.3.3selenium应用实例

7.4程序设计的步骤

7.4.1selenium定位iframe(多层框架)

7.4.2模拟登录豆瓣网站

7.5基于Cookie绕过验证码实现自动登录

7.5.1为什么要使用Cookie

7.5.2查看Cookie

7.5.3使用Cookie绕过百度验证码自动登录账户

7.6selenium实现AJAX动态加载抓取今日头条新闻

7.6.1selenium处理滚动条

7.6.2selenium 动态加载抓取今日头条新闻

7.7selenium实现动态加载抓取新浪国内新闻

第8章MySQL数据库存储——微博采集爬虫

8.1微博采集爬虫功能介绍

8.2微博采集爬虫设计思路

8.3关键技术

8.3.1查看Cookie

8.3.2模拟登录实例

8.3.3使用Python操作MySQL数据库

8.3.4Base64加密

8.4程序设计步骤

8.4.1模拟登录

8.4.2获取网页

8.4.3数据入库

第9章爬虫框架——Scrapy框架

9.1Scrapy框架简介与安装

9.1.1Scrapy框架简介

9.1.2Scrapy安装

9.2第一个Scrapy爬虫

9.3Spider开发流程

9.3.1继承scrapy.Spider

9.3.2为Spider起名字

9.3.3设置起始爬取点

9.3.4实现页面解析函数

9.4Scrapy选择器

9.4.1Selector类

9.4.2Response内置Selector

9.4.3使用CSS选择器

9.4.4爬取京东商品信息

9.5Scrapy数据容器

9.5.1Item和Field

9.5.2Item扩展

9.5.3爬取“百度贴吧”信息

9.6Scrapy常用命令行工具

9.7Scrapy数据处理

9.7.1实现Item Pipeline

9.7.2Item Pipeline举例

9.7.3启用Item Pipeline

9.8爬取文件和图片

9.9Scrapy模拟登录

第三篇游 戏 开 发

第10章益智游戏——连连看游戏

第11章益智游戏——推箱子游戏

第12章娱乐游戏——两人麻将游戏

12.1麻将游戏介绍

12.1.1麻将术语

12.1.2牌数

12.2两人麻将游戏设计的思路

12.2.1素材图片

12.2.2游戏的逻辑实现

12.2.3碰/吃牌的判断

12.2.4和牌算法

12.2.5实现计算机智能出牌

12.3关键技术

12.3.1声音的播放

12.3.2返回对应位置的组件

12.3.3对保存麻将牌的列表排序

12.4两人麻将游戏设计的步骤

第13章娱乐游戏——贪吃蛇游戏

第14章益智游戏——人机对战黑白棋游戏

第15章益智游戏——中国象棋游戏

第16章娱乐游戏——人物拼图游戏

第17章基于Pygame的游戏设计

17.1Pygame基础知识

17.1.1安装Pygame库

17.1.2Pygame的模块

17.2Pygame的使用

17.2.1Pygame开发游戏的主要流程

17.2.2Pygame的图像/图形绘制

17.2.3Pygame的键盘和鼠标事件的处理

17.2.4Pygame的字体使用

17.2.5Pygame的声音播放

17.2.6Pygame的精灵使用

17.3基于Pygame设计贪吃蛇游戏

17.4基于Pygame设计飞机大战游戏

17.4.1游戏角色

17.4.2游戏界面显示

17.4.3游戏的逻辑实现

第四篇人工智能开发

第18章机器学习案例——基于朴素贝叶斯算法的

文本分类

18.1文本分类功能介绍

18.2程序设计的思路

18.3关键技术

18.3.1贝叶斯算法的理论基础

18.3.2朴素贝叶斯分类

18.3.3使用Python进行文本分类

18.4程序设计的步骤

18.4.1收集训练数据

18.4.2准备数据

18.4.3分析数据

18.4.4训练算法

18.4.5测试算法并改进

18.4.6使用算法进行文本分类

18.5使用朴素贝叶斯分类算法过滤垃圾邮件

18.5.1收集训练数据

18.5.2将文本文件解析为词向量

18.5.3使用朴素贝叶斯算法进行邮件分类

18.5.4改进算法

18.6使用ScikitLearn库进行文本分类

18.6.1文本分类常用的类和函数

18.6.2案例实现

第19章深度学习案例——基于卷积神经网络的

手写体识别

19.1手写体识别案例需求

19.2深度学习的概念及关键技术

19.2.1神经网络模型

19.2.2深度学习之卷积神经网络

19.3Python深度学习库——Keras

19.3.1Keras的安装

19.3.2Keras的网络层

19.3.3用Keras构建神经网络

19.4程序设计的思路

19.5程序设计的步骤

19.5.1MNIST数据集

19.5.2手写体识别案例实现

19.5.3制作自己的手写图像

第20章人工智能实战——基于OpenCV实现人脸识别

20.1功能介绍

20.2程序设计的思路

20.3关键技术

20.3.1OpenCV基础知识

20.3.2OpenCV变换操作

20.3.3检测人脸

20.4程序设计的步骤

20.4.1检测人脸

20.4.2获取人脸检测信息和对应标签

20.4.3识别器训练

20.4.4识别人脸

20.5知识拓展——使用Face_Recognition库轻松实现人脸识别

20.5.1Face_Recognition库安装

20.5.2Face_Recognition检测识别人脸

第五篇网络应用开发

第21章网络编程案例——基于TCP的在线聊天程序

第22章网络通信案例——基于UDP的网络五子棋游戏

22.1网络五子棋游戏简介

22.2五子棋游戏的设计思想

22.3关键技术

22.3.1UDP编程

22.3.2自定义网络五子棋游戏的通信协议

22.4网络五子棋游戏程序设计的步骤

22.4.1服务器端程序设计的步骤

22.4.2客户端程序设计的步骤

第23章网络邮件实战——自动发送邮件

23.1功能介绍

23.2程序设计的思路

23.3关键技术

23.3.1Python SMTP发送邮件

23.3.2Python SMTP发送文本邮件

23.3.3Python SMTP发送带附件的邮件

23.3.4Python SMTP发送内嵌资源的邮件

23.3.5定时自动发送邮件

23.4程序设计的步骤

第六篇图像处理和可视化开发

第24章图像处理——生成二维码和验证码

第25章可视化应用——学生成绩分布柱状图展示

第26章词云实战——爬取豆瓣影评生成词云

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/xiamin/article/details/127344893

智能推荐

ctf 网络安全比赛简介_简单的ctf竞赛-程序员宅基地

文章浏览阅读1k次。MISC(安全杂项):全称Miscellaneous。题目涉及流量分析、电子取证、人肉搜索、数据分析、大数据统计等等,覆盖面比较广。我们平时看到的社工类题目;给你一个流量包让你分析的题目;取证分析题目,都属于这类题目。主要考查参赛选手的各种基础综合知识,考察范围比较广。PPC(编程类):全称Professionally Program Coder。题目涉及到程序编写、编程算法实现。算法的逆向编写,批量处理等,有时候用编程去处理问题,会方便的多。当然PPC相比ACM来说,还是较为容易的。_简单的ctf竞赛

数学建模预测方法之 微分方程模型_微分方程预测模型-程序员宅基地

文章浏览阅读6.7k次,点赞7次,收藏42次。微分方程模型适用于基于相关原理的因果预测模型,大多是物理或几何方面的典型问题,假设条件,用数学符号表示规律,列出方程,求解的结果就是问题的答案。短、中、长期的预测都适合。反应事物内部规律及其内在关系,但由于方程的建立是以局部规律的独立性假定为基础,当作为长期预测时,误差较大,且微分方程的解比较难以得到。传染病的预测模型、经济增长(或人口)的预测模型、Lanchester战争预测模型、药物在体内的分布与排除预测模型、烟雾的扩散与消失模型..._微分方程预测模型

C#调用Oracle数据库_c# oracle-程序员宅基地

文章浏览阅读3.8k次。目前为止所用过的c#访问orale数据库的方式有两种,一种是使用 Oracle.ManagedDataAccess.Client方式来调用,另一种是使用System.Data.OracleClient方式来调用,两者的区别是第一种方式是最新的方式,使用起来也比第二种方式要简单的多,但是缺点可能无法访问旧版的Oracle数据库例如 9i,尤其是当oracle数据库的各种权限、角色等各种参数由于各种原因不允许对其修改时可能会无法访问的情况,第二种方式是一种过时的方式,它的优点是可以弥补第一种方..._c# oracle

Network_Card/DR600VX-Qualcomm-Atheros-QCA9880-2T2R-MIMO-802.11ac-Mini-PCIe-Wi-Fi-Module-Dual-Ba_dr600vx网卡-程序员宅基地

文章浏览阅读328次。https://www.wallystech.com/Network_Card/DR600VX-Qualcomm-Atheros-QCA9880-2T2R-MIMO-802.11ac-Mini-PCIe-Wi-Fi-Module-Dual-Band-2.4GHz-5GHz.htmlcontact:​​[email protected] max 24dBm & 5GHz max 23dBm o..._dr600vx网卡

快速学会创建uni-app项目并了解pages.json文件_uni中的page-程序员宅基地

文章浏览阅读3.2k次,点赞103次,收藏96次。学习目标:1.学会创建uni-app项目 2.了解uni-app中pages.josn文件的作用_uni中的page

【js】JavaScript手动回收垃圾_js手动触发gc-程序员宅基地

文章浏览阅读1.5w次,点赞2次,收藏5次。如何手动触发 JavaScript 垃圾回收行为?垃圾回收,即 garbage collect,简称 “GC”。这里的 “手动” 指有效地、显式地、可控地触发浏览器 JavaScript 引擎的垃圾回收行为,比如通过点击页面中的按钮来调用 JS 方法,或使用浏览器提供的功能。IEIE 实际上提供了一个未公开的 JS 方法 CollectGarbage()。至少在 I_js手动触发gc

随便推点

回炉夜话 - 序-程序员宅基地

文章浏览阅读159次。有志足风流,惜诺自可亲 这是我大学时代信奉的格言。转眼年至不惑,回想人生倒也是感慨万千。 在这里,作为一个老码农,我想梳理下自己的技术栈。为继续做一个码农而努力。 一、首先,对于各种技术的掌握程度作出如下定义: 了解: 阅读过相关资料或书籍,有可能..._回炉夜话全集

Android问题解决--“signal 11 (SIGSEGV), code 2 (SEGV_ACCERR), fault addr 0xxxxxxx” 又出现了_to unreadable libraries. for unwinds of apps, only-程序员宅基地

文章浏览阅读1.2w次。今天,调试一个app,又出现“signal 11 (SIGSEGV), code 2 (SEGV_ACCERR), fault addr 0xxxxxx”问题了。而且只在Android10以上版本才会有,导致的现象是app崩溃,这怎么怎?问题log:signal 11 (SIGSEGV), code 2 (SEGV_ACCERR), fault addr 0x739ae8d004全部log如下:05-08 10:21:31.065 D/a.module(1890.._to unreadable libraries. for unwinds of apps, only shared libraries

工件SSMwar exploded 部署工件时出错。请参阅服务器日志了解详细信息_正在构建工件 'ssm0950my8t:war exploded': 正在复制文件…-程序员宅基地

文章浏览阅读1.9k次。因此我收集了一份《java开发全套学习资料》送给大家,初衷也很简单,就是希望帮助到想自学又不知道该从何学起的朋友,同时减轻大家的负担。由于监听器过早的生效时间导致我们自动注入的bean的引用名称还没有生效(实际上bean已经注入了,但是监听器此时识别不到,小写类名首字母也没有用),这时候就要用到自定义bean名称了!仔细想一下,查看我监听器的代码,监听器实现了ServletContextListener接口,是一个全局监听器,也就是项目刚启动是就会生效,于是我添加了一条输出信息,就是“进入监听器”..._正在构建工件 'ssm0950my8t:war exploded': 正在复制文件…

字符串(python)_首先创建一个字符串str为“a little girl”,提取第3到13个字符,并组成新的字符串b-程序员宅基地

文章浏览阅读217次,点赞2次,收藏2次。(2)请统计字符串出现的每个字母的出现次数(忽略大小写,a 与 A 是同一个字母),并输出成一个字典。‘aAsmr3idd4bgs7Dlsf9eAF’,经过去除后,输出 ‘asmr3id4bg7lf9e’(4)按字符串中字符出现频率从高到低输出到列表,如果次数相同则按字母顺序排列。(3)请去除字符串多次出现的字母,仅留最先出现的一个,大小写不敏感。(1)请将字符串的数字取出,并输出成一个新的字符串。_首先创建一个字符串str为“a little girl”,提取第3到13个字符,并组成新的字符串b

JVisualVM 手动生成 Java Core Dump_手动生成coredump-程序员宅基地

文章浏览阅读2k次。最近在研究 Java Core Dump 查看及使用问题,这里我采了JDK自带工具jvisualvm ,这个工具可协助生成 Java Core Dump 文件1, Java Core Dump 文件是什么Java Core Dump 文件呢,是针对 JVM 虚拟机发生致命问题或者 JVM 中运行的程序造成致命问题时,所产生的记录文件,通常会存在2个文件1.1,Java Cor..._手动生成coredump

谈谈开源技术选型_开源技术 选型-程序员宅基地

文章浏览阅读4.7k次。有时感觉技术选型就像个伪命题,胜出的技术占据绝对的主流,就像 java 领域中 ejb 被 ssh/ssi 框架取代。 大部分项目使用近似的模式搭建,选型在工程中变得似乎可有可无。 时间上胜出的开源技术帮助开发者在客观上做出了选择,我们先了解下影响选型的客观因素。客观因素客观因素包括如下:1. 广泛性我们都倾向于选择更广泛应用的开源技术以规避未知性风险。2. 质量质量我们会_开源技术 选型