Python网络爬虫技术与实践 课件全套 第1--10章 Python基础及网络爬虫---爬虫框架SCRAPY与反爬虫.pptx

;;;目录;1.1;;;1.1 了解Python语言;1.1 了解Python语言;1.1.2 Python的应用现状;国内的例子也很多，著名的豆瓣网（国内一家受年轻人欢迎的社交网站）和知乎（国内著名问答网站）都大量使用了Python进行开发。可见，Python在业界的应用可谓五花八门，总结起来，在系统编程、图形处理、科学计算、数据库、网络编程、Web应用、多媒体应用等各个方面都有它的身影。在2017年的IEEE Spectrum Ranking中，Python力压群雄，成为了最流行的编程语言。众所周知，学习一门程序语言最有效的方法就是边学边用，边用边学。通过我们对Python爬虫的逐步学习，相信能够很好地提高对整个Python语言的理解和应用。;1.1.2 Python的应用现状;1.2　;;访问Python官网并下载与计算机架构对应的 Python 3安装程序，一般而言只要有新版本，就应该选择必威体育精装版的版本。这里需要注意的是选择对应架构的版本，我们需要首先搞清楚自己的系统是32位还是64位的，如图1-1所示。; 根据安装程序的导引，我们一步步进行，就能完成整个安装。如果最终看到类似图1-2这样的提示，就说明安装成功。;这时检查我们的“开始”菜单，就能看到Python3.x的应用程序，见图1-3，其中有一个“IDLE”（意为“integrated development environment”）程序，我们可以单击此项目开始在交互式窗口中使用Python Shell，见图1-4。;Ubuntu是诸多Linux发行版中受众较多的一个系列。我们可以通过Applicatons中的添加应用程序进行安装，在其中有哪些信誉好的足球投注网站Python3，并在结果中找到对应的包，进行下载。如果安装成功，我们将在Applications（应用程序）中找到Python IDLE，进入Python Shell中。 访问 Python官网并下载对应的 Mac 平台安装程序，根据安装包的指示进行操作，我们最终将看到类似图1-5的成功提示：;关闭该窗口，并进入Applications（或者是从LaunchPad页面打开）中，我们就能找到Python Shell IDLE，启动该程序，看到的结果应该和Windows平台上的结果类似。;1.2.3 IDE的使用：以PyCharm为例;Pycharm支持Windows、Mac、Linux三大平台，并提供Professional和Community Edition两种版本选择（见图1-6）。其中前者需要购买正版（提供免费试用），后者可以直接下载使用。前者功能更为丰富，但后者也足以满足一些普通???开发需求。;选择对应的平台并下载后，安装程序（见图1-7）将会导引我们完成安装，安装完成后，从“开始”菜单中（对于Mac和Linux系统是从Applications中）打开PyCharm，我们就可以创建自己的第一个Python项目了（见图1-8）。;创建项目后，我们还需要进行一些基本的配置。可以在菜单栏中使用File→Settings打开PyCharm设置。首先是修改一些UI上的设置，比如修改界面主题，见图1-9。; 在编辑界面中显示代码行号，见图1-10。; 修改编辑区域中代码的字体和大小，见图1-11。;如果是想要设置软件UI中的字体大小，可在AppearanceBehavior中修改，见图1-12。;在运行我们编写的脚本前，需要添加一个Run/Debug配置，主要是选择一个Python解释器，见图1-13。;我们还可以更改代码高亮规则，见图1-14。;最后，PyCharm提供了一种便捷的包安装界面，使得我们不必使用pip或者easyinstall命令（两个常见的包管理命令）。在设置中找到当前的Python Interpreter，单击右侧的“+”按钮（见图1-15），有哪些信誉好的足球投注网站想要安装的包名，单击安装即可。;Jupyter Notebook并不是一个IDE工具，正如它的名字，这是一个类似于“笔记本”的辅助工具。Jupyter是面向编程过程的，而且由于其独特的“笔记”功能，代码和注释在这里会显得非常整齐直观。我们可以使用“pip install jupyter”命令来安装。在PyCharm中也可以通过Interpreter管理来安装，如图1-16所示。;如果在安装过程中碰到了问题，可访问Jupyter安装官网获取更多信息。 在PyCharm中新建一个Jupyter Notebook文件，见图1-17。;单击“运行”按钮后，会要求输入token，这里我们可以不输入，直接单击“Run Jupyter Notebook”，按照提示进入笔记本页面（见图1-18）。;Jupyter Notebook还支持插入数学公式、制作演示文稿、特殊关键字等。