大数据处理与分析.pptx
《大数据处理与分析.pptx》由会员分享,可在线阅读,更多相关《大数据处理与分析.pptx(520页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、乘风破浪,世界就在眼前第第1 1章章 开发环境搭建开发环境搭建目录目录 Python解释器的安装单击此处添加备注.1 Anaconda的安装及环境搭建1.2 Jupyter Notebook与Pycharm的安装及工程环境设置1.31.1 Python解释器安装解释器安装TEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add herePython是什么?是什么?Python是是1989年荷兰人年荷兰人Guido van Rossum发明的一种面向对象的解发明的一种面向对象的解释型编程语言。释型编程语言。
2、Python语言语言简洁简洁、易读以及可扩展性好,语法非常、易读以及可扩展性好,语法非常清晰,而且清晰,而且Python的拓展库丰富,具有脚本语言中最丰富和强大的的拓展库丰富,具有脚本语言中最丰富和强大的类库。类库。Python语言及其众多的扩展库构成的开发环境十分适合语言及其众多的扩展库构成的开发环境十分适合工程工程技术、科研人员处理实验数据、制作图表,甚至开发科学计算技术、科研人员处理实验数据、制作图表,甚至开发科学计算应用应用程序程序。1.1 Python解释器安装解释器安装MAC OS下安装解释器安装流程第一个hello world程序代码运行Windows安装解释器安装流程Linux
3、下安装解释器虚拟机与安装流程1.1.1 在在Windows系统下安装系统下安装Python解释器解释器TEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add here1.准备工作准备工作(1)一台装有)一台装有Windows系统的计算机。系统的计算机。(2)在)在Python官网上下载相应版本的安装包。官网上下载相应版本的安装包。 进入进入Python官网后在首页单击官网后在首页单击“Downloads”,如图,如图1-1所示;所示;然后选择然后选择all releases或或Windows后进入版本选
4、择页面,选择相应版后进入版本选择页面,选择相应版本;最后下载本;最后下载X86的的64位版本中的可执行安装器即可(位版本中的可执行安装器即可(executable installer)1.1.1 在在Windows系统下安装系统下安装Python解释器解释器TEXT add hereTEXT add hereTEXT add here点击下载点击下载选择版本选择版本1.1.1 在在Windows系统下安装系统下安装Python解释器解释器TEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add here2
5、.具体安装步骤具体安装步骤 (1)单击运行安装包,开始安装)单击运行安装包,开始安装Python,如图,如图所示。所示。选择选择 Customize installation(自定义安装)(自定义安装),暂不勾选暂不勾选Add Python 3.7 to PATH。单击单击“Customize installation”进入下一步。进入下一步。1.1.1 在在Windows系统下安装系统下安装Python解释器解释器TEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add here2.具体安装步骤具体安装
6、步骤 (2)在)在Python的安装配置界面中,将所有选项全部勾选后,单击的安装配置界面中,将所有选项全部勾选后,单击“Next”按钮进入下一步,如按钮进入下一步,如下下图所示图所示。1.1.1 在在Windows系统下安装系统下安装Python解释器解释器TEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add here2.具体安装步骤具体安装步骤(3)此时进入高级选项步骤,)此时进入高级选项步骤,选择下图中的选项,并选择下图中的选项,并在在Customize install location中选择相应
7、的安装目录后,单击中选择相应的安装目录后,单击“Install”按钮进行安装,按钮进行安装,如图所示。如图所示。1.1.1 在在Windows系统下安装系统下安装Python解释器解释器TEXT add hereTEXT add hereTEXT add here2.具体安装步骤具体安装步骤(4)等待安装完毕后显示安装成功界面。)等待安装完毕后显示安装成功界面。1.1.1 在在Windows系统下安装系统下安装Python解释器解释器TEXT add hereTEXT add hereTEXT add here3.环境变量配置环境变量配置(1)进入控制面板)进入控制面板所有控制面板项所有控制面
8、板项系统,选择系统,选择“高级高级”活页夹,活页夹,可进入系统属性界面,如可进入系统属性界面,如下图下图所示,单击右下角所示,单击右下角“环境变量环境变量”按钮,进按钮,进入环境变量配置。入环境变量配置。1.1.1 在在Windows系统下安装系统下安装Python解释器解释器TEXT add hereTEXT add hereTEXT add here3.环境变量配置环境变量配置(2)进入环境变量界面后,选择)进入环境变量界面后,选择Path,单击,单击“编辑编辑”,如,如下图下图所示。在所示。在其中添加其中添加Python安装目录和安装目录安装目录和安装目录下下Scripts文件这两个路径
9、即可文件这两个路径即可。(3)在)在命令行命令行中输入中输入python命令,命令,出现相应的出现相应的Python版本号,就说明环版本号,就说明环境变量配置成功。境变量配置成功。1.1.2 Linux系统下安装系统下安装Python解释器解释器TEXT add hereTEXT add hereTEXT add here1.准备工作准备工作(1)一台装有)一台装有Linux系统的计算机或安装了系统的计算机或安装了Linux系统的虚拟机系统的虚拟机,Linux系统采用系统采用Cent OS7。一般情况下一般情况下Linux系统自带有系统自带有Python,但可能不是,但可能不是Python 3
10、版本,如果版本,如果要确认要确认Python版本的话,可以分别在终端输入命令:版本的话,可以分别在终端输入命令:python或或python3,运行后的界面如运行后的界面如下图下图所示。所示。1.1.2 Linux系统下安装系统下安装Python解释器解释器1.准备工作准备工作(2)Python 3源码包,可通过自带的火狐浏览器直接到源码包,可通过自带的火狐浏览器直接到Python官网下官网下载,或者在终端输入载,或者在终端输入“su root”命令后键入用户密码,获取命令后键入用户密码,获取root权限,权限,输入以下命令:输入以下命令:wget https:/www.python.org/
11、ftp/python/3.7.0/Python-3.7.0.tgz用此方法下载源码包,用此方法下载源码包,安装成功如图所示。安装成功如图所示。1.1.2 Linux系统下安装系统下安装Python解释器解释器2.具体安装步骤具体安装步骤(1)为了方便管理,首先在)为了方便管理,首先在/usr/local/下面创建一个文件,作为安装下面创建一个文件,作为安装Python的目标文件,文件名任意,这里取名为的目标文件,文件名任意,这里取名为Python3。在。在Linux中一般中一般习惯把用户安装的软件安装在习惯把用户安装的软件安装在/usr/local/XXX/下。下。使用以下命令进入使用以下命令
12、进入/usr/local/创建文件,创建后可以用创建文件,创建后可以用“ls”命令查看命令查看当前路径下的目录,如当前路径下的目录,如下图下图所示,可以发现新增了所示,可以发现新增了Python3目录目录。1.1.2 Linux系统下安装系统下安装Python解释器解释器2.具体安装步骤具体安装步骤(2)回到起始路径,输入以下命令解压下载好的)回到起始路径,输入以下命令解压下载好的Python安装压缩包。安装压缩包。rootlocalhost dd# tar -zxvf Python-3.7.0.tgz(3)解压完成后,输入命令:)解压完成后,输入命令:cd Python-3.7.0/,进入生
13、成的目录。,进入生成的目录。rootlocalhost dd# cd Python-3.7.0/接着执行命令:接着执行命令:./configure -prefix=/usr/local/Python3,设置,设置Python的的安装目录为安装目录为/usr/local/Python3。 # ./configure -prefix=/usr/local/Python3(4)配置完成之后执行命令:)配置完成之后执行命令:make,开始编译源码。,开始编译源码。rootlocalhost Python-3.7.0# make1.1.2 Linux系统下安装系统下安装Python解释器解释器2.具体安
14、装步骤具体安装步骤编译成功后如右图所示。编译成功后如右图所示。(5)编译完成后,执行命令:)编译完成后,执行命令:make install,开始安装,开始安装Python。rootlocalhost Python-3.7.0# make install(6)在第五步)在第五步make install的安装过程中,可能遇到如的安装过程中,可能遇到如下下问题。问题。zipimport.ZipImportError: cant decompress data; zlib not availablemake: * install Error 11.1.2 Linux系统下安装系统下安装Python解释
15、器解释器2.具体安装步骤具体安装步骤该问题是缺少相应的该问题是缺少相应的Python 3依赖包引起的,可以通过以下命令安装所依赖包引起的,可以通过以下命令安装所有包来解决。有包来解决。rootlocalhost Python-3.7.0# yum install zlib*或者也可以通过安装所需要的部分包来解决。或者也可以通过安装所需要的部分包来解决。rootlocalhost Python-3.7.0# yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-d
16、evel gdbm-devel db4-devel libpcap-devel xz-devel 该问题解决后可能还会再遇到以下问题。该问题解决后可能还会再遇到以下问题。ModuleNotFoundError: No module named _ctypes此时还需要额外安装依赖。此时还需要额外安装依赖。yum -y install libffi-devel1.1.2 Linux系统下安装系统下安装Python解释器解释器2.具体安装步骤具体安装步骤解决问题后再次执行解决问题后再次执行make install命令进行安装,安装成功后就会显示命令进行安装,安装成功后就会显示下下图图所示界面。所示
17、界面。1.1.2 Linux系统下安装系统下安装Python解释器解释器3.更改默认指向更改默认指向安装完成后,在终端输入安装完成后,在终端输入python或或python3命令,如果出现的版本依然命令,如果出现的版本依然是原来的默认版本,那么就需要创建链接。在终端中输入以下命令删除原是原来的默认版本,那么就需要创建链接。在终端中输入以下命令删除原有对有对Python 2的软链接。的软链接。rm /usr/bin/python再创建新的链接。再创建新的链接。ln -s /usr/local/Python3/bin/python3 /usr/bin/pythonln -s /usr/local/
18、Python3/bin/pip3 /usr/bin/pip最后再使用最后再使用python命令查看默认版本,命令查看默认版本,观察观察Python默认版本默认版本是否是否已经更已经更换为你安装的最新版换为你安装的最新版。1.1.3 在在MacOS系统下安装系统下安装Python解解释器释器1.准备工作准备工作(1)一台装有)一台装有Mac OS系统的计算机。系统的计算机。(2)Python可执行安装包,可到可执行安装包,可到Python官网下载。官网下载。2.安装步骤安装步骤(1)进入)进入Python官网,选择相应的官网,选择相应的Mac OS版本版本Python安装包进行下载。安装包进行下
19、载。(2)下载完成后,打开安装包进行安装,单击)下载完成后,打开安装包进行安装,单击“继续继续”按钮,显示如按钮,显示如下图下图所示界面所示界面。1.1.3 在在MacOS系统下安装系统下安装Python解解释器释器1.准备工作准备工作(3)根据每一步的提示进行操作,安装成功后显示如)根据每一步的提示进行操作,安装成功后显示如下图下图所示的界面。所示的界面。(4)查看安装是否成功,打开终端输入)查看安装是否成功,打开终端输入python查看默认版本查看默认版本即可即可。1.1.4 运行第一个运行第一个hello world程序程序在计算机里还没有安装在计算机里还没有安装Python的集成开发环
20、境时,有以下两种方式写出的集成开发环境时,有以下两种方式写出第一个程序。第一个程序。(1)使用)使用cmd命令行。打开命令行。打开cmd,输入,输入python后,就可以在命令行里编后,就可以在命令行里编写写Python程序了。如写入以下代码:程序了。如写入以下代码:print(hello world!)按下回车键后就能看见输出的结果,再输入以下命令即可退出按下回车键后就能看见输出的结果,再输入以下命令即可退出Python编编写。写。exit()(2)使用)使用Python Shell来编写。在主菜单左下角搜索来编写。在主菜单左下角搜索Python,找到,找到Python Shell,启动后在
21、里面同样书写,启动后在里面同样书写print(hello world!),按下回车键,按下回车键,即可得到如即可得到如下图下图所示的结果所示的结果。1.2 Anaconda的安装及环境变量配置的安装及环境变量配置安装Anaconda安装流程Anaconda简介介绍环境变量配置环境变量1.2.1 Anaconda简介简介TEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereAnaconda是基于是基于Python的数据处理和科学计算平台,它内置了许的数据处理和科学计算平台,它内置了许多非常有用的
22、第三方库,其内部包含了多非常有用的第三方库,其内部包含了conda、Python在内的超过在内的超过180个个科学包及其依赖项。科学包及其依赖项。Anaconda是在是在conda(一个包管理器和环境管理器)(一个包管理器和环境管理器)上发展出来的。安装上发展出来的。安装Anaconda,就相当于把,就相当于把Python和一些如和一些如Numpy、Pandas、Scrip、Matplotlib等常用的库自动安装好了,比在常规等常用的库自动安装好了,比在常规Python环环境下安装这些组件更容易。境下安装这些组件更容易。如果计算机中已经安装了如果计算机中已经安装了Python,也建议安装上,也
23、建议安装上Anaconda,因为,因为使用使用Anaconda进行开发时默认进行开发时默认Python还是选取的还是选取的Anaconda附带的附带的Python。不会和原来已安装的不会和原来已安装的Python产生冲突。产生冲突。1.2.1 Anaconda简介简介TEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add here 总结起来,总结起来,Anaconda具有四大特点:开源;集成安装;高性具有四大特点:开源;集成安装;高性能使用能使用Python和和R语言;免费的社区支持。语言;免费的社区支
24、持。 此外此外Anaconda还有很多预知的相关包以及可安装的三方库:还有很多预知的相关包以及可安装的三方库:1.科学计算相关包科学计算相关包(1)iPython(2)NumPy(3)Matplotlib(4)beautiful-soup 2.机器学习和数据挖掘相关包机器学习和数据挖掘相关包(2)Pandas(3)scikit-learn(4)nltk 1.2.1 Anaconda简介简介TEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add here3.其他重要其他重要的预置工具的预置工具(1)con
25、da(2)IPython Notebook(3)Spyder(4)PyQt(5)CPython 1.2.2 安装安装AnacondaTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add hereTEXT add here安装步骤如下:安装步骤如下:(1)到)到Anaconda官网官网寻找要安装的相应版本,这里选择寻找要安装的相应版本,这里选择Windows的的64位位Python 3.7图形化安装包,单击下载,如图形化安装包,单击下载,如下图下图所示所示。1.2.2 安装安装AnacondaTEXT add hereTEXT
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据处理 分析
限制150内