农业信息技术chapter3农业数据库系统31053.pptx

《农业信息技术chapter3农业数据库系统31053.pptx》由会员分享，可在线阅读，更多相关《农业信息技术chapter3农业数据库系统31053.pptx（77页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、农业信息技术农业信息技术农业信息技术农业信息技术第三章第三章 农业数据库系统农业数据库系统3&数据库系统概述&农业数据库建设&农业管理信息系统&农业数据处理与统计分析 第一节 数据库系统概述一、数据库系统的构成与特点二、数据库管理系统三、数据库中的数据模型 四、数据库设计 第一节 数据库系统概述一、数据库系统的构成与特点（一）数据管理与数据库系统（一）数据管理与数据库系统n数据管理技术是指对数据进行分类、编码、存储、检索和维护，它数据管理技术是指对数据进行分类、编码、存储、检索和维护，它是数据处理的中心问题。是数据处理的中心问题。n数据管理技术经历了人工管理、文件系统、数据库系统、高级数据数据

2、管理技术经历了人工管理、文件系统、数据库系统、高级数据库等发展阶段。库等发展阶段。n数据库系统（数据库系统（database systems）是计算机应用系统中一种专门管）是计算机应用系统中一种专门管理数据资源的系统，由数据库、数据库管理系统和用户应用三部分理数据资源的系统，由数据库、数据库管理系统和用户应用三部分组成。组成。第一节 数据库系统概述n数据库（数据库（database，DB）是按照数据结构来组织、存储和管理）是按照数据结构来组织、存储和管理数据的仓库。数据的仓库。n详细讲，数据库是长期存储在计算机内、与应用彼此独立的、以详细讲，数据库是长期存储在计算机内、与应用彼此独立的、以一定

3、的组织方式存储在一起的、彼此相互关联的、具有较少冗余一定的组织方式存储在一起的、彼此相互关联的、具有较少冗余的、能被多个用户共享的数据集合。的、能被多个用户共享的数据集合。n数据库类型多样，有最简单的存储各种数据的表格，也有存储海数据库类型多样，有最简单的存储各种数据的表格，也有存储海量数据的大型数据库系统，有文字型、数字型、图像型和声音型量数据的大型数据库系统，有文字型、数字型、图像型和声音型等不同数据形式。等不同数据形式。n多媒体数据库（多媒体数据库（Multimedia DataBase，MDB）能提供图像、文）能提供图像、文本、声音等信息的全方位本、声音等信息的全方位“立体化立体化”的

4、服务方式。的服务方式。一、数据库系统的构成与特点（一）数据管理与数据库系统（一）数据管理与数据库系统第一节 数据库系统概述一、数据库系统的构成与特点（一）数据管理与数据库系统（一）数据管理与数据库系统分类标准分类标准类类 别别用户数量用户数量单用户数据库单用户数据库 多用户数据库多用户数据库数据类型和表现形式数据类型和表现形式文献型数据库文献型数据库 数值型数据库数值型数据库 事实型数据事实型数据库库文本型数据库文本型数据库 它们的结合型数据库它们的结合型数据库数据存诸介质类型数据存诸介质类型磁带数据库磁带数据库 硬盘数据库硬盘数据库 光盘数据库光盘数据库数据结构和存取方法数据结构和存取方法关

5、系型数据库关系型数据库 层次型数据库层次型数据库 网络型数据网络型数据库库数据存放地点数据存放地点集中式数据库集中式数据库 分布式数据库分布式数据库第一节 数据库系统概述一、数据库系统的构成与特点（一）数据管理与数据库系统（一）数据管理与数据库系统n数据库是为获取数据而设计，而数据仓库是为分析数据而设计。数据库是为获取数据而设计，而数据仓库是为分析数据而设计。n数据仓库（数据仓库（Data warehouse，DW）是决策支持系统和联机分析应用数据）是决策支持系统和联机分析应用数据源的结构化数据环境，是一个面向主题的、集成的、相对稳定的、反映历源的结构化数据环境，是一个面向主题的、集成的、相对

6、稳定的、反映历史变化的数据集合，用于支持管理决策。史变化的数据集合，用于支持管理决策。n数据仓库系统是一个信息提供平台，包含数据获取（数据仓库系统是一个信息提供平台，包含数据获取（Data Acquisition）、）、数据存储（数据存储（Data Storage）、数据访问（）、数据访问（Data Access）三个关键部分，）三个关键部分，为用户提供各种手段从数据中获取信息和知识。为用户提供各种手段从数据中获取信息和知识。第一节 数据库系统概述（二）数据库系统的构成（二）数据库系统的构成 一、数据库系统的构成与特点数据库系统简图数据库系统简图 数据库数据库用户用户 软件软件 硬件硬件 终端

7、用户终端用户应用程序员应用程序员 数据库管理员数据库管理员 数据库管理系统数据库管理系统 DBMS 存储数据库存储数据库运行运行DBMS(DBMS(包括操作系统包括操作系统)的硬件资源的硬件资源 第一节 数据库系统概述（二）数据库系统的构成（二）数据库系统的构成 一、数据库系统的构成与特点n数据库系统的数据库系统的4个组成部分构成了一个复杂的层次系统个组成部分构成了一个复杂的层次系统 第一节 数据库系统概述（三）数据库系统的特点（三）数据库系统的特点 一、数据库系统的构成与特点（1）数据的结构化）数据的结构化（2）数据共享性好）数据共享性好（3）数据独立性好）数据独立性好（4）用户接口简单）用

8、户接口简单（4）系统运行可靠）系统运行可靠（5）能够重组数据）能够重组数据（6）基于某种数据模型，能够充分描述数据间的内在联系）基于某种数据模型，能够充分描述数据间的内在联系第一节 数据库系统概述二、数据库管理系统n数据库管理系统（数据库管理系统（Data Base Management System，DBMS）是一种操纵和管理数据库的大型软件，用于建立、）是一种操纵和管理数据库的大型软件，用于建立、使用和维护数据库，对数据库进行统一的管理和控制，使用和维护数据库，对数据库进行统一的管理和控制，以保证数据库的安全性和完整性。以保证数据库的安全性和完整性。n用户通过用户通过DBMS访问数据库中的

9、数据，数据库管理员也通访问数据库中的数据，数据库管理员也通过过DBMS进行数据库的维护工作。进行数据库的维护工作。第一节 数据库系统概述二、数据库管理系统（一）数据库管理系统的功能（一）数据库管理系统的功能 （1）数据定义功能）数据定义功能（2）数据存取功能）数据存取功能（3）数据库运行管理功能）数据库运行管理功能（4）数据库建立和维护功能）数据库建立和维护功能（5）数据库的传输）数据库的传输 第一节 数据库系统概述二、数据库管理系统（二）数据库管理系统的层次结构（二）数据库管理系统的层次结构 n根据处理对象的不同，数据库管理系统的层次结构由高级根据处理对象的不同，数据库管理系统的层次结构由高

10、级到低级依次为到低级依次为l应用层应用层l语言翻译处理层语言翻译处理层l数据存取层数据存取层l数据存储层数据存储层l操作系统操作系统 第一节 数据库系统概述（三）常用的数据库管理系统（三）常用的数据库管理系统 二、数据库管理系统（1 1）OracleOracle（2 2）Microsoft SQL ServerMicrosoft SQL Server（3 3）Microsoft AccessMicrosoft Access第一节 数据库系统概述三、数据库中的数据模型 n在数据库中用数据模型（在数据库中用数据模型（data model）来抽象、表示和处理）来抽象、表示和处理现实世界中的数据和信息

11、。现实世界中的数据和信息。n数据模型是指描述反映客观事物的数据及其联系。数据模型是指描述反映客观事物的数据及其联系。n按照应用层次，数据模型分为概念数据模型、逻辑数据模型按照应用层次，数据模型分为概念数据模型、逻辑数据模型和物理数据模型等三类。和物理数据模型等三类。第一节 数据库系统概述三、数据库中的数据模型（一）概念模型（一）概念模型 n概念数据模型也称信息模型，它是按用户的观点来对数据和信息建概念数据模型也称信息模型，它是按用户的观点来对数据和信息建模，主要用于数据库设计。模，主要用于数据库设计。n是现实世界到机器世界的一个中间层次，是数据库设计的有力工具。是现实世界到机器世界的一个中间层

12、次，是数据库设计的有力工具。它不依赖于某个它不依赖于某个DBMS支持的数据模型，同时又可以转换为某一支持的数据模型，同时又可以转换为某一DBMS支持的特定数据模型。支持的特定数据模型。n概念模型的特点是：概念模型的特点是：具有较强的语义表达能力，能够方便、直具有较强的语义表达能力，能够方便、直接地表达应用中的各种语义知识；接地表达应用中的各种语义知识；简单、清晰、易于用户理解，简单、清晰、易于用户理解，是用户与数据设计人员之间进行交流的语言。是用户与数据设计人员之间进行交流的语言。第一节 数据库系统概述三、数据库中的数据模型（一）概念模型（一）概念模型 1.1.信息世界中的基本概念信息世界中的

13、基本概念 2.2.概念模型的表示方法概念模型的表示方法 （1）实体）实体（2）属性）属性（3）键）键（4）域）域（5）实体型）实体型（6）实体集）实体集（7）关联）关联 nE-R方法称为实体方法称为实体-联系方法（联系方法（Entity-Relationship Approach），该方法能），该方法能够方便、准确地表示出上述信息世界够方便、准确地表示出上述信息世界中常用的概念，它用中常用的概念，它用E-R图来描述现实图来描述现实世界的概念模型。世界的概念模型。E-R方法也称为方法也称为E-R模型，它是概念模型常用的方法。模型，它是概念模型常用的方法。n此外，还有扩充的此外，还有扩充的E-R模

14、型、面向对象模型、面向对象模型及谓词模型等。模型及谓词模型等。第一节 数据库系统概述三、数据库中的数据模型（二）数据模型（二）数据模型 n逻辑数据模型又被简称为数据模型，主要包括网状模型，层次逻辑数据模型又被简称为数据模型，主要包括网状模型，层次模型，关系模型等，它是按计算机系统的观点对数据建模，主模型，关系模型等，它是按计算机系统的观点对数据建模，主要用于要用于DBMS的实现的实现。n层次模型、网状模型是早期的数据模型。通常把它们称为格式层次模型、网状模型是早期的数据模型。通常把它们称为格式化数据模型，因为它们是属于以化数据模型，因为它们是属于以“图论图论”为基础的表示方式。为基础的表示方式

15、。关系模型是用关系模型是用“二维表二维表”（或称关系）来表示数据之间的联系。（或称关系）来表示数据之间的联系。第一节 数据库系统概述三、数据库中的数据模型（二）数据模型（二）数据模型 1.1.层次模型层次模型 n层次数据模型实质上是一种有根结点的定向有序树（在数学中层次数据模型实质上是一种有根结点的定向有序树（在数学中“树树”被定义为一个无回的连通图），即用被定义为一个无回的连通图），即用“树树”结构表示实体集结构表示实体集之间的关联，其中实体集（用矩形框表示）为结点，而树中各结之间的关联，其中实体集（用矩形框表示）为结点，而树中各结点之间的连线表示它们之间的关联。点之间的连线表示它们之间的关

16、联。n根据根据“树树”结构的特点，建立数据的层次模型需要满足下列两个结构的特点，建立数据的层次模型需要满足下列两个条件：条件：有且仅有一个结点无有且仅有一个结点无“父父”结点称为根结点；结点称为根结点；其他数其他数据记录有且只有一个据记录有且只有一个“父父”结点。按照层次模型建立的数据库系结点。按照层次模型建立的数据库系统称为层次模型数据库系统，其典型代表是管理信息系统统称为层次模型数据库系统，其典型代表是管理信息系统（Management Information System，MIS）。）。第一节 数据库系统概述三、数据库中的数据模型（二）数据模型（二）数据模型 1.1.层次模型层次模型 n

17、不能很好的表示两个不能很好的表示两个以上实体型之间的复以上实体型之间的复杂关联和实体型之间杂关联和实体型之间多对多关联多对多关联 优点优点n数据模型简单数据模型简单n 对具有一对多的层次关系描对具有一对多的层次关系描述自然、直观，容易理解述自然、直观，容易理解n性能优于关系模型，不低于性能优于关系模型，不低于网状模型网状模型n层次数据模型提供了良好的层次数据模型提供了良好的完整性支持完整性支持缺点缺点第一节 数据库系统概述三、数据库中的数据模型（二）数据模型（二）数据模型 2.2.网状模型网状模型n能很好地解决了实体间复杂关系的表达问题能很好地解决了实体间复杂关系的表达问题n有致命的弱点，即当

18、需求扩展时，对原有数据结构及应用程序的修有致命的弱点，即当需求扩展时，对原有数据结构及应用程序的修改会产生严重的后果改会产生严重的后果n网状模型的特点：网状模型的特点：可以有一个以上的结点无可以有一个以上的结点无“父父”；至少至少有一个结点有多于一个的有一个结点有多于一个的“父父”n按照网状数据结构建立的数据库系统称为网状数据库系统，其典型按照网状数据结构建立的数据库系统称为网状数据库系统，其典型代表是代表是DBTG（Data Base Task Group）n用数学方法可将网状数据结构转化为层次数据结构用数学方法可将网状数据结构转化为层次数据结构 第一节 数据库系统概述三、数据库中的数据模型

19、（二）数据模型（二）数据模型 3.3.关系模型关系模型n关系模型是以人们经常使用的二维表格形式来表示实体本身及其关系模型是以人们经常使用的二维表格形式来表示实体本身及其相互之间的关联，它以关系理论为坚实的基础，是经典数据模型相互之间的关联，它以关系理论为坚实的基础，是经典数据模型中建模能力最强的一种，对于各种类型数据联系都可描述，成为中建模能力最强的一种，对于各种类型数据联系都可描述，成为当今实用数据库系统的主流。当今实用数据库系统的主流。n在关系模型中，把数据看成一个二维表格，每个二维表格就是一在关系模型中，把数据看成一个二维表格，每个二维表格就是一个关系，由多列和多行组成，每列描述实体的一

20、个属性，每行描个关系，由多列和多行组成，每列描述实体的一个属性，每行描述一个具体实体。述一个具体实体。n对于一个表示关系的二维表格，其最基本的要求是，不允许表中对于一个表示关系的二维表格，其最基本的要求是，不允许表中再有表。再有表。第一节 数据库系统概述三、数据库中的数据模型（二）数据模型（二）数据模型 3.3.关系模型关系模型n一个关系称为一个数据库，若干个数据库可以构成一个数据库系统。一个关系称为一个数据库，若干个数据库可以构成一个数据库系统。n在关系数据库中，对数据的操作几乎全部建立在一个或多个关系表格在关系数据库中，对数据的操作几乎全部建立在一个或多个关系表格上，通过对这些关系表格的分

21、类、合并、连接或选取等运算来实现数上，通过对这些关系表格的分类、合并、连接或选取等运算来实现数据的管理。据的管理。n由关系数据结构组成的数据库系统被称为关系数据库系统。由关系数据结构组成的数据库系统被称为关系数据库系统。第一节 数据库系统概述三、数据库中的数据模型（二）数据模型（二）数据模型 3.3.关系模型关系模型优点优点缺点缺点 数据结构简单数据结构简单 具有很高的数据独立性具有很高的数据独立性 可以直接描述多对多的关联可以直接描述多对多的关联 有坚实的理论基础有坚实的理论基础n当数据库很大时，当数据库很大时，查找满足特定关系查找满足特定关系的数据费时，对空的数据费时，对空间关系无法满足。

22、间关系无法满足。第一节 数据库系统概述四、数据库设计（一）数据库设计的步骤（一）数据库设计的步骤 第一节 数据库系统概述（二）概念结构设计（二）概念结构设计 四、数据库设计 n概念模型是对实际应用对象概念模型是对实际应用对象形象而又具体的描述形象而又具体的描述n概念结构设计要借助于某种概念结构设计要借助于某种方便又直观的描述工具。方便又直观的描述工具。nE-R图提供了表示实体型、属图提供了表示实体型、属性和关联的方法（如图）：性和关联的方法（如图）：实体型实体型属性属性关联关联某校教学管理数据库的某校教学管理数据库的E-RE-R图图 nE-R图中的关系连线上的图中的关系连线上的“1”、“0”，

23、表示实体的最小基数，菱，表示实体的最小基数，菱形框内的数字表示的是最大基数。形框内的数字表示的是最大基数。n“1”，表示在关联中这一侧必须，表示在关联中这一侧必须存在一个实体，存在一个实体，“0”表示实体可表示实体可以不存在。以不存在。第一节 数据库系统概述（三）关系数据库设计（三）关系数据库设计四、数据库设计 n关系数据库就是依据关系模型建立的数据库。关系数据库就是依据关系模型建立的数据库。n将将E-R数据模型转化为关系模型的过程，可分为以下数据模型转化为关系模型的过程，可分为以下3个步骤：个步骤：将用将用E-R图描述的数据库概念模型转化一组关系模式图描述的数据库概念模型转化一组关系模式 根

24、据关系型数据库规范化理论对这组关系模式进行规根据关系型数据库规范化理论对这组关系模式进行规范化处理范化处理 根据数据库的完整性和一致性要求以及系统查询效率根据数据库的完整性和一致性要求以及系统查询效率要求，对所得模式进行优化要求，对所得模式进行优化 第二节 农业数据库建设一、农业数据库的类型二、国外农业数据库三、中国农业数据库第二节 农业数据库建设一、农业数据库的类型农业资源数据库农业资源数据库 地理资源数据库地理资源数据库种质资源数据库种质资源数据库基因资源数据库基因资源数据库人力资源数据库人力资源数据库 农业技术数据库农业技术数据库 农业统计数据库农业统计数据库 企业与产品数据库企业与产品

25、数据库生产信息统计数据库生产信息统计数据库农业气象资料数据库农业气象资料数据库农业生产数据库农业生产数据库 农业企业与产品数据库农业企业与产品数据库农业市场信息数据库农业市场信息数据库 农业政策法规数据库农业政策法规数据库 农业科技文献数据库农业科技文献数据库 第二节 农业数据库建设二、国外农业数据库（一）国外数据库发展概况（一）国外数据库发展概况 n国外的数据库建设起步较早，在国外的数据库建设起步较早，在20 世纪世纪60年代中期，美国就开始了年代中期，美国就开始了数据库方面的建设；数据库方面的建设；n70年代中期，欧洲各国和日本相继建立和发展了本国的数据库；年代中期，欧洲各国和日本相继建立

26、和发展了本国的数据库；n到了到了80 年代后期，数据库联机检索系统开始在经济发达国家兴起，年代后期，数据库联机检索系统开始在经济发达国家兴起，这时出现了光盘数据库。这时出现了光盘数据库。n随后，伴随计算机技术及互联网的快速发展，农业数据库的发展除了随后，伴随计算机技术及互联网的快速发展，农业数据库的发展除了在光盘数据库、网络在线数据库等方面不断发展壮大以外，各国农业在光盘数据库、网络在线数据库等方面不断发展壮大以外，各国农业信息网络系统也在不断涌现。信息网络系统也在不断涌现。n目前，国际上最著名的农业数据库系统是目前，国际上最著名的农业数据库系统是CABI、AGRICOLA、AGRIS 三大数

27、据库三大数据库。第二节 农业数据库建设二、国外农业数据库（二）国外农业文摘数据库（二）国外农业文摘数据库 1.CAB Abstracts 2.AGRICOLA3.AGRIS4.FSTA 5.Pest-Bank6.BIOSIS Previews7.TROPAG&RURAL8.Zoological Records9.Derwent Biotechnology Abstracts10.FOODLINE11.Wilson Biological&Agricultural Index12.Pollution and Toxicology13.ASFA第二节 农业数据库建设二、国外农业数据库（三）国外农业全

28、文数据库（三）国外农业全文数据库 1.EBSCO 全文数据库全文数据库2.ScienceDirect 电子期刊数据库电子期刊数据库3.ProQuest 博硕士论文全文数据库博硕士论文全文数据库4.Annual Reviews 电子期刊电子期刊5.Blackwell 出版社电子期刊出版社电子期刊6.Springer Link（Springer出版社电子期刊数据库）出版社电子期刊数据库）7.ProQuest 生物和农业全文期刊数据库生物和农业全文期刊数据库8.BioOne 全文数据库全文数据库9.Nature 系列电子期刊系列电子期刊10.ASABE Technical Library11.Tay

29、lor&Francis 农业百科全文数据库农业百科全文数据库12.OECD 农业与食品数据库和电子图书资源农业与食品数据库和电子图书资源13.CABI Publishing Journals（Your Journals OVID）14.Taylor&Francis Journals Online三、中国农业数据库第二节 农业数据库建设（一）中国农业数据库建设概况（一）中国农业数据库建设概况 n经过了经过了70 年代的起步、年代的起步、80 年代上半期的普及阶段后，从年代上半期的普及阶段后，从1987 年进年进入数据库的提高阶段，到现在数据库的建设已进入快速发展的时入数据库的提高阶段，到现在数据

30、库的建设已进入快速发展的时代。中国农业信息方面的数据库建设不断发展进步，经历了从题代。中国农业信息方面的数据库建设不断发展进步，经历了从题录文献库到全文库，从光盘库到网络库的发展。录文献库到全文库，从光盘库到网络库的发展。n主要问题是：（主要问题是：（1）农业数据库数量不足，规模不大，覆盖面不广，）农业数据库数量不足，规模不大，覆盖面不广，信息不全，质量不高，利用率低。（信息不全，质量不高，利用率低。（2）缺乏统筹规划，重复建设）缺乏统筹规划，重复建设现象严重，标准化和规范化较低，封闭现象严重，兼容性和共享现象严重，标准化和规范化较低，封闭现象严重，兼容性和共享性差。（性差。（3）数据库内容以

31、文摘型、题录型为主，而全文数据库、）数据库内容以文摘型、题录型为主，而全文数据库、多媒体数据库比重较低。（多媒体数据库比重较低。（4）数据库建设和管理不规范，重建设）数据库建设和管理不规范，重建设轻维护，重形式轻功能，重硬件轻软件。轻维护，重形式轻功能，重硬件轻软件。三、中国农业数据库第二节 农业数据库建设（二）综合性农业数据库（二）综合性农业数据库 1.中国农业科技文献数据库中国农业科技文献数据库 2.中国期刊全文数据库中国期刊全文数据库3.中文科技期刊数据库中文科技期刊数据库4.全国报刊索引数据库全国报刊索引数据库（三）典型农业专题数据库（三）典型农业专题数据库 1.中国作物种质资源数据库

32、（中国作物种质资源数据库（CGRIS）2.中国农业科学数据中心（中国农业科学数据中心（agridata）3.热带农业数据库热带农业数据库4.中国土壤数据库中国土壤数据库5.资源环境遥感数据库资源环境遥感数据库6.中国西南药用植物资源数据库中国西南药用植物资源数据库 7.中国经济植物资源数据库中国经济植物资源数据库 第三节 农业管理信息系统一、农业管理信息系统的类型二、农业管理信息系统的构成与开发流程 三、农业管理信息系统的设计与实现 第三节 农业管理信息系统一、农业管理信息系统的类型1.土地资源信息系统土地资源信息系统2.土壤资源信息系统土壤资源信息系统3.水资源信息系统水资源信息系统4.农业

33、气候资源信息系统农业气候资源信息系统5.肥料资源信息系统肥料资源信息系统6.农业种质资源信息系统农业种质资源信息系统 第三节 农业管理信息系统二、农业管理信息系统的构成与开发流程 n农业管理信息系统农业管理信息系统AMIS是一个是一个GIS专题信息系统，由计算机硬件、计专题信息系统，由计算机硬件、计算机软件、数据、应用模型和系统组织管理者组成算机软件、数据、应用模型和系统组织管理者组成 农业管理信息系统构成框图示例农业管理信息系统构成框图示例 第三节 农业管理信息系统二、农业管理信息系统的构成与开发流程 n农业管理信息系统开发农业管理信息系统开发过程包括可行性研究、过程包括可行性研究、系统分析

34、、系统总体方系统分析、系统总体方案设计、系统技术方案案设计、系统技术方案分析、系统实施、系统分析、系统实施、系统评价与维护等评价与维护等6个阶段个阶段 第三节 农业管理信息系统三、农业管理信息系统的设计与实现 1.1.系统分析系统分析（1）用户类型与需求分析）用户类型与需求分析（2）可行性分析）可行性分析 2.2.系统设计系统设计 系统功能设计系统功能设计软硬件选择软硬件选择 3.3.系统应用设计系统应用设计 4.4.系统的组织实现系统的组织实现农业管理信息系统基本功能框图农业管理信息系统基本功能框图 第四节 农业数据处理与统计分析一、数据处理与统计软件简介二、数据处理软件中数据文件的基本结构

35、 三、SAS程序简介 四、用SAS进行数据分析实例 第四节 农业数据处理与统计分析一、数据处理与统计软件简介 类型类型功能功能软件例举软件例举文本编辑类文本编辑类使用基本文本格式创建使用基本文本格式创建和编辑文本文件，用于和编辑文本文件，用于数据的录入和管理数据的录入和管理EditPlus、EmEditor、UltraEdit等等电子表格类电子表格类数据的录入和管理、基数据的录入和管理、基本的数据分析、简单的本的数据分析、简单的图表制作等图表制作等Microsoft Office Excel 2003、WPS Office 2005金山表金山表格等格等统计分析类统计分析类数据访问和录入、数据数

36、据访问和录入、数据管理、数据挖掘和分析、管理、数据挖掘和分析、数据呈现等数据呈现等SAS、SPSS、STATA、Minitab、S-Plus、DPS等等第四节 农业数据处理与统计分析一、数据处理与统计软件简介 nSAS（Statistical Analysis System）是美国）是美国SAS软件研究所研制的一套软件研究所研制的一套用于数据分析与决策支持的大型集成式模块化软件包，能够完成以数用于数据分析与决策支持的大型集成式模块化软件包，能够完成以数据为中心的四大任务据为中心的四大任务:数据访问、数据管理、数据分析和数据呈现，广数据访问、数据管理、数据分析和数据呈现，广泛应用于政府行政管理、

37、科研、教育、生产和金融等不同领域。泛应用于政府行政管理、科研、教育、生产和金融等不同领域。nSAS系统中提供的主要分析功能包括统计分析、经济计量分析、时间系统中提供的主要分析功能包括统计分析、经济计量分析、时间序列分析、决策分析、财务分析和全面质量管理工具等。序列分析、决策分析、财务分析和全面质量管理工具等。nSAS系统的功能特点：（系统的功能特点：（1）模块式结构、把数据管理和数据分析融为）模块式结构、把数据管理和数据分析融为一体；（一体；（2）数据接口丰富；（）数据接口丰富；（3）语言编程能力强；（）语言编程能力强；（4）统计分析）统计分析方法丰富，使用简单。方法丰富，使用简单。（一）（一

38、）SASSAS第四节 农业数据处理与统计分析一、数据处理与统计软件简介 nSPSS（Statistical Package for the Social Science）社会科学统计软社会科学统计软件包是美国件包是美国SPSS公司开发。公司开发。SPSS for Windows是一个组合式软件包，集是一个组合式软件包，集数据整理、分析功能于一身。使用数据整理、分析功能于一身。使用Windows的窗口方式展示各种管理和的窗口方式展示各种管理和分析数据方法的功能，使用对话框展示出各种功能选择项，分析结果清分析数据方法的功能，使用对话框展示出各种功能选择项，分析结果清晰、直观、易学易用，可以直接读取

39、晰、直观、易学易用，可以直接读取EXCEL及及DBF数据文件。数据文件。nSPSS的基本功能包括数据管理、统计分析、图表分析、输出管理等等。的基本功能包括数据管理、统计分析、图表分析、输出管理等等。nSPSS的主要缺点在于它很难与一般办公软件如的主要缺点在于它很难与一般办公软件如Office等直接兼容，在撰等直接兼容，在撰写报告时往往要用电子表格软件及专业制图软件来重新绘制相关图表；写报告时往往要用电子表格软件及专业制图软件来重新绘制相关图表；SPSS统计分析功能与统计分析功能与SAS相比仍有一定欠缺，但由于操作简单，已经在相比仍有一定欠缺，但由于操作简单，已经在我国的社会科学、自然科学的各个

40、领域发挥了巨大作用。我国的社会科学、自然科学的各个领域发挥了巨大作用。（二）（二）SPSSSPSS第四节 农业数据处理与统计分析一、数据处理与统计软件简介 nStata最初由美国计算机资源中心（最初由美国计算机资源中心（Computer Resource Center）研制，现在为研制，现在为Stata公司的产品，其最新版本为公司的产品，其最新版本为10.0版。版。nStata和和SAS、SPSS一起，被称为新的三大权威统计软件。一起，被称为新的三大权威统计软件。nStata突出特点是短小精悍、功能强大，包含全部的统计分析、数突出特点是短小精悍、功能强大，包含全部的统计分析、数据管理和绘图等功

41、能，其统计分析功能极为全面。据管理和绘图等功能，其统计分析功能极为全面。nStata在分析时将数据全部读入内存，在计算全部完成后才和磁盘在分析时将数据全部读入内存，在计算全部完成后才和磁盘交换数据，因此运算速度极快。交换数据，因此运算速度极快。（三）（三）StataStata第四节 农业数据处理与统计分析一、数据处理与统计软件简介 nStata的操作方式以命令行程序为主，辅以菜单操作系统，其命令的操作方式以命令行程序为主，辅以菜单操作系统，其命令语句简洁明快，命令设置条理性好，用户极易上手。语句简洁明快，命令设置条理性好，用户极易上手。nStata的用户接口非常简洁，数据格式简单，分析结果输出

42、简洁明快，的用户接口非常简洁，数据格式简单，分析结果输出简洁明快，易于阅读。易于阅读。nStata的另一个特点是他的许多高级统计模块均是编程人员用其宏语的另一个特点是他的许多高级统计模块均是编程人员用其宏语言写成的程序文件（言写成的程序文件（ADO文件），这些文件可以自行修改、添加和文件），这些文件可以自行修改、添加和下载。用户可随时到下载。用户可随时到Stata网站寻找并下载最新的升级文件。网站寻找并下载最新的升级文件。nStata已经在科研、教育领域得到了广泛应用，联合国世界卫生组织已经在科研、教育领域得到了广泛应用，联合国世界卫生组织（WHO）已将）已将Stata作为主要的统计分析工作软

43、件。作为主要的统计分析工作软件。（三）（三）StataStata第四节 农业数据处理与统计分析一、数据处理与统计软件简介 nDPS是我国浙江大学研制的具有自主知识产权的统计分析是我国浙江大学研制的具有自主知识产权的统计分析软件。软件。n从从20世纪世纪90年代开始，年代开始，DPS软件功能不断扩充，不断地完软件功能不断扩充，不断地完成了数学生态、生物测定、地理统计、遗传育种、生存分成了数学生态、生物测定、地理统计、遗传育种、生存分析、水文频率分析、量表分析、质量控制图、析、水文频率分析、量表分析、质量控制图、ROC曲线分曲线分析等内容，已成为析等内容，已成为21世纪初期国内统计分析功能最全的软

44、世纪初期国内统计分析功能最全的软件包。件包。（四）（四）DPSDPS第四节 农业数据处理与统计分析二、数据处理软件中数据文件的基本结构 n统计分析软件对数据文件的组织和管理类似于数据库管理软件统计分析软件对数据文件的组织和管理类似于数据库管理软件n可以形象地将数据集、数据文件、数据表等看作一个可以形象地将数据集、数据文件、数据表等看作一个“表表”n其中每一行代表一条信息或一个对象，其中每一行代表一条信息或一个对象，SAS中称作观测中称作观测（Observation），），SPSS中称作事件（中称作事件（Case），这相当于数据库中的记），这相当于数据库中的记录（录（Record）n如某一个样本

45、、某一个品种；如某一个样本、某一个品种；每一个观测或事件均有相同数量的列，每一个观测或事件均有相同数量的列，每一列代表一个变量（每一列代表一个变量（Variable），每一个变量均表达了单条信息或对），每一个变量均表达了单条信息或对象某一方面的属性，就相当于数据库中的字段，如每一个品种均有象某一方面的属性，就相当于数据库中的字段，如每一个品种均有5个个性状，这性状，这5个性状就是个性状就是5个变量。个变量。第四节 农业数据处理与统计分析二、数据处理软件中数据文件的基本结构 n例如，有例如，有10个小麦品系的株高和千粒重数据如表个小麦品系的株高和千粒重数据如表1所示。在建立数所示。在建立数据文件

46、时，我们不能直接按表据文件时，我们不能直接按表1中的排列填入数据表，而应该将每中的排列填入数据表，而应该将每一个品系占一行，株高和千粒重分别占一列。即：一个品系占一行，株高和千粒重分别占一列。即：品系品系9702977498459832987699459979001200340067株高株高(cm)78798676828190738280千粒重千粒重(g)35434150423839434137VarHeightWeight970278359774794300678037n至于变量的名称，不同的统计软件对变量至于变量的名称，不同的统计软件对变量名称的设置方法不同。名称的设置方法不同。n一般情况

47、下，变量的名称可以用英文缩写一般情况下，变量的名称可以用英文缩写或汉语拼音，长度不超过或汉语拼音，长度不超过8个字符，大小个字符，大小写具有同样的功效。写具有同样的功效。n为便于各种软件之间的数据交换，不推荐为便于各种软件之间的数据交换，不推荐使用汉字作为变量名称。使用汉字作为变量名称。第四节 农业数据处理与统计分析二、数据处理软件中数据文件的基本结构 n有时原始数据与表的形式差距较大，这就需要一定的方法构造便于进有时原始数据与表的形式差距较大，这就需要一定的方法构造便于进行数据分析的数据结构。行数据分析的数据结构。培养液培养液盆盆 号号123123123生长量生长量5035 45 5055

48、55 8565 72 5535 40 45 60 45 60 70 70 40 30 40 50 50 65 90 80 68 354050455055856573TreatPotRepeatGrowthA1150A1255A1340A1435A2135A2235C2380C2465C3172C3270C3368C3473n如在温室内以如在温室内以3种培养液培养某作种培养液培养某作物，每种物，每种3盆，每盆盆，每盆4株，一个月后株，一个月后测定其株高生长量（测定其株高生长量（mm），每盆），每盆测定测定4株，得结果见表。株，得结果见表。第四节 农业数据处理与统计分析二、数据处理软件中数据文件的

49、基本结构 n统计分析软件具有较好的辨识和处理缺失数据的功能。统计分析软件具有较好的辨识和处理缺失数据的功能。n如果原始数据中某些变量存在缺失值，在建立数据表时应该给以恰当如果原始数据中某些变量存在缺失值，在建立数据表时应该给以恰当的标识，在的标识，在SAS、SPSS等常用统计软件中用英文点号等常用统计软件中用英文点号“”表示缺表示缺失数据，不能简单地将缺失写成失数据，不能简单地将缺失写成0。n例如，计算例如，计算5名学生的的选修课成绩，原始数据如表所示名学生的的选修课成绩，原始数据如表所示 NO.NameEnglishAgronomyComputerStatisticsChinese4张三张三

50、76858998508李四李四.6769899813王五王五87.964924刘六刘六459078.8927赵七赵七67.91第四节 农业数据处理与统计分析三、SAS程序简介（一）（一）SASSAS数据步数据步 nSAS数据步就是把原始数据作为输入，建立数据步就是把原始数据作为输入，建立SAS数据集，为过程数据集，为过程步准备数据。步准备数据。n建立建立SAS数据集有多种途径，下面只介绍在编辑（数据集有多种途径，下面只介绍在编辑（editor）窗口）窗口直接建立数据集的方法。直接建立数据集的方法。n数据步的语句和结构为：数据步的语句和结构为：DATA 数据集名数据集名;INPUT 变量列表变量