金属软管公司工程项目数据采集分析与知识管理(工程项目组织与管理).docx
《金属软管公司工程项目数据采集分析与知识管理(工程项目组织与管理).docx》由会员分享,可在线阅读,更多相关《金属软管公司工程项目数据采集分析与知识管理(工程项目组织与管理).docx(27页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、泓域咨询/金属软管公司工程项目数据采集分析与知识管理金属软管公司工程项目数据采集分析与知识管理xx投资管理公司一、 工程咨询信息采集途径调查方法可分为普查与抽样调查两大类,这两类都有文案调查、实地调查、问卷调查、实验调查等几种。选择调查方法要考虑收集信息的能力、调查研究的成本、时间要求、样本控制和人员效应的控制程度。上述各种方法,各有利弊,各有适用范围。文案调查是上述各种调查方法中最简单、最一般和常用的方法,也是其他调查方法的基础。实地调查能够控制调查过程,应用灵活,信息充分,但耗时长、费用多,调查对象易受心理暗示影响,不够客观。问卷调查适应范围广、简单易行、费用较低,得到了大量应用。实验调查
2、最复杂、费用高、应用范围有限,但调查结果可信度较高。(一)文案调查法文案调查法是指对已经存在的各种资料档案,以查阅和归纳的方式进行的市场调查。文案调查法又称二手资料或文献调查。文案资料来源很多,主要有:国际组织和政府机构资料;行业资料;公开出版物;相关企业和行业网站;有关企业的内部资料。(二)问卷调查法这种方法是调查人员以面谈、电话询问、网上填表或邮寄问卷等方式,了解调查对象的行为方式,从而收集信息。问卷调查法是市场调查常用方法,尤其在消费者行为调查中大量应用,其核心工作是设计问卷,实施问卷调查。(三)实地调查法此法是调查人员通过跟踪、记录调查对象的行为取得第一手资料的方法。这种方法是调查人员
3、直接到市场或某些场所(商品展销会、商品博览会、商场等)亲身感受或借助于某些摄录设备和仪器,跟踪、记录调查对象的活动、行为和事物的特点,获取所需信息资料。(四)实验调查法该法是指调查人员在调查过程中,通过改变某些影响调查对象的因素,观察调查对象行为的变化,从而获得消费行为和某些因素之间的内在因果关系。该法主要用于消费行为的调查,企业推出新产品、改变产品外形和包装、调整产品价格、改变广告方式时,都可以用这种方法。二、 网络信息搜索和提取方法(一)概过现在,虽然不能说人类所有文献与其他信息都上了互联网,但是网上的信息极为丰富,许多都可用于咨询。但是,许多咨询人员还不善于甚至不知道如何从网上快速、安全
4、、有效地获得自己需要的信息和知识。咨询工程师应当知晓网上有何利信息,应掌握从网上获取信息的方法与基本技巧。对于网上的信息,可利用浏览器和搜索引擎获取。浏览器是供用户阅读网页内容的软件;而搜索引擎,指从互联网上搜集信息的特定电脑程序。早期的搜索引擎是收集互联网中服务器的地址,按这些服务器拥有的资源类型将其编成不同的目录,各个目录再逐层分类。搜索引擎则沿着此类层级向下搜索,找到用户想要的信息。这种方式只适用于互联网信息不多的时代。随着互联网上信息的迅猛增长,出现了新式搜索引擎,性能大为改进,能够找到网站每一页的起始地址,随后搜索网上所有超级链接,把代表超级链接的所有词汇放入一个数据库。搜索引擎的功
5、能不再限于搜索,已经添加了电子商务、新闻信息服务、个人免费电子信箱服务等。(二)搜索引擎工作原理搜索引擎有信息搜集、信息整理和接受用户查询三部分,各自工作原理大致如下:1搜集信息:搜索引擎利用称为网络蜘蛛(spider)的自动搜索机器人程序,从少数几个网页开始,将各个网页的超链接连结在一起,只要网页上有适当的超链接,机器人便可以遍历绝大部分网页。2整理信息:这个过程称为“建立索引”。搜索引擎不仅要保存搜集到的信息,还要按照一定规则编排之。这样,搜索引擎无须重新翻查已保存的所有信息,便能迅速找到所要的资料,从而能够大大加快搜索速度。3接受查询:对于每时每刻都会接到的大量用户几乎同时发出的查询请求
6、,搜索引擎按照各个用户的要求检查自己的索引,能在极短时间内找到用户需要的资料,并交给用户。目前,搜索引擎交给用户的主要是网页链接,用户按照这些链接便能找到含有自己所需资料的网页。搜索引擎一般会在这些链接下加一段有关这些网页的摘要,以便用户判断此网页是否含有自己需要的内容。(三)搜索引擎种类现在,搜索引擎有很多种,可以从不同的角度分类。按搜索方法,分全文索引、目录索引、元搜索、垂直搜索、集合式搜索、门户搜索、个性搜索、专家型搜索与免费链接列表等。按搜索对象,分购物、自然语言、新闻、MP3、图片等搜索引擎。按搜索范围,分桌面、地址栏、本地等搜索引擎。按出现的时间,分第三代、第四代搜索引擎等。现在,
7、用的较多的搜索引擎有Google,百度、Yahoo、MSNSearch,Webcrawler,Lycos,CNetSearch,LookSmart等。(四)搜索方法与技巧要想使搜索引擎能在网上快速找到有关咨询的资料,首先要明确查询目的。目的不同,查询策略与方法不同。在明确目的之后,还应了解查询的种类与技巧,学会恰当地使用关键词。搜索方法的选择取决于搜索的内容。不同搜索引擎的复杂条件查询功能和实现方法各有不同,网站中一般都有“帮助”和“说明”解释各自的功能和方法。现在的搜索引擎都有模糊查询功能。当用户输入关键词时,搜索引擎不但交给用户关键词的网址,还发来与关键词意义相近的内容。比如,查找“建筑报
8、”一词时,模糊查询搜索的结果会有“建筑报”“建设报”“建筑时报”等的网址。网址的排列,一般是完全符合关键词在最前边,其次是相近的。模糊查询的结果往往并非用户所需,为了排除不需要的结果,各种搜索引擎也设置了相应的功能。三、 现代工程咨询方法的特点现代工程咨询方法的特点是,定性分析和定量分析相结合,重视定量分析;静态分析与动态分析相结合,重视动态分析;统计分析与预测分析相结合,重视预测分析。定性分析与定量分析1定性分析定性分析是通过研究事物构成要素间的相互联系来揭示事物本质的方法,它是在逻辑分析、判断推理的基础上,对客观事物进行分析与综合,从而找出事物发展内在规律性,确定事物的本质。在工程咨询研究
9、中,许多难以用计量表达的场合,定性分析方法可以发挥重要作用。2定量分析定量分析是依据统计数据,选择建立合适的数学模型,计算出分析对象的各项指标及其数值的一种方法。它是通过反映一定质的事物量的关系来揭示事物内在规律的方法,在数学、统计学、运筹学、计量学、计算机等学科基础之上,通过方程、数学图表和模型等方式来研究事物的本质。在工程咨询工作中采用定量分析的方法,对复杂事物进行数据处理,进行比较分析,可以使问题更为清晰,解决方案更精确。静态分析与动态分析1静态分析静态分析是观测和评价事物某一时点状态的一种方法。如项目评价中通过计算静态投资回收期、总投资收益率、资本金净利润率等指标,可以对项目的财务效益
10、得出初步的判断。2动态分析在工程咨询服务的各个阶段,特别是在项目决策评价阶段,要树立动态观念,如考虑资金时间价值、市场供求变化、技术发展变化、社会经济环境的变化等。现代项目财务评价一般以动态分析为主,主要进行项目现金流量分析,计算财务净现值、内部收益率等指标,并进行风险概率分析等。统计分析与预测分析1统计分析统计分析是对分析对象过去和现在的信息进行收集、整理、统计和分析。在现代工程决策研究咨询中经常需要采取多种方法和渠道,收集大量的统计数据,包括行业、区域、市场、技术、企业等的统计资料和信息,从而分析、归纳和总结事物的发展规律,把握发展动向;在项目执行阶段,也需要对项目的执行情况进行监控,对投
11、资、质量、进度等进行统计分析,并与计划进行比较,判断项目的进展情况,以便采取有针对性的应对措施,促进项目的顺利进行。2预测分析预测分析是依据分析对象过去和现在的信息,采用一定的方法,对事物未来发展趋势进行分析、推测、判断的方法。预测分析是现代工程咨询的重要方法,尤其是在投资前期决策阶段,预测分析是项目咨询的重要工作。投资项目决策是建立在对未来预测的基础上的,需要对未来的社会经济环境、产业政策走向、技术发展趋势、市场需求变化、原材料供应、配套条件约束、资金市场等进行预测。四、 数据分析与挖掘概述(一)信息分析信息分析是根据咨询问题的具体需要,对与之有关的信息进行整理、鉴别、评价、分析和综合,以便
12、取得咨询所需新信息的过程。信息分析有如下几种用途:1跟踪。所谓跟踪,就是及时了解各领域新动向、新发展,从而发现问题、提出问题。2比较。比较各种事物的内部矛盾之后,把握事物间的联系,认识事物的本质,从而提出问题、确定目标、拟定方案并作出选择。3预测。利用已掌握的信息、知识和手段,推断事物的未来或未知方面。4评价。进行评价时应选择合适的变量和评价指标,应当考虑评价对象之间的可比性。信息分析所用方法,可分为定性和定量分析两种。定性方法主要靠逻辑推理;而定量方法涉及数据间的数量关系,要建立数学模型,计算、求解。如今,信息越来越复杂,定性与定量分析已无法单独奏效,只能越来越多地结合起来。(二)数据分析数
13、据分析是信息分析的一部分,数据分析是对收集数据进行系统的分析,建立适当的模型,揭示数据中隐含的技术、经济、社会和其他关系,以及发展趋势,为有关的咨询活动提交的有用的数字、信息或建议。数据分析的对象可分为时间序列和截面数据。如企业历年的咨询收入、利润总额等就是时间序列。截面数据是在同一时间的数据,如企业同一年咨询业务数目、营业额、费用、收入、人工耗费等。两种数据都要注意样本容量大小。对于截面数据,常用线性或非线性回归模型体现数据之间的各种关系。数据分析属定量分析,包括数据统计分析、时间数据分析、空间数据分析。(三)数据挖掘数据挖掘就是从数据中挖掘出隐含、先前未知、有潜在用途,最终可为人理解的关系
14、、模式、趋势和其他有用信息,并建立模型,用于预测、判断或决策,帮助企业更好地适应变化并做出更明智的决策的过程。数据挖掘广泛应用于制造、金融、零售、保健、中医药及电信等行业的客户关系管理、风险防范、供应链管理、竞争优势分析、部门分析等领域。数据挖掘要用到统计分析、人工智能、数据库和神经网络等方面的知识,如记忆推理、聚类分析、关联分析、决策树、神经网络、基因算法等。数据挖掘需要用户参与,并非某种单一工具、技术或软件即可独自完成。另一方面,并非所有信息查询都可视为数据挖掘。例如,使用数据库管理系统查找个别记录,或用搜索引擎查找互联网特定的网页,属于信息检索,不能视为数据挖掘。当然,数据挖掘技术也有强
15、大的信息检索能力。五、 大数据系统和数据挖掘技术(一)数据挖掘概述1大数据大数据是指超过既往数据库系统规模、传输速度和处理能力,或者既往数据库系统结构无法容纳的数据。大数据常以万亿或EB衡量,且种类多、实时性强,蕴藏的商业价值大。很多现有的新或旧的信息基础设施、工具和技术可用来开发和利用大数据中蕴藏的价值。大数据有各种各样的来源:传感器、气候信息、公开的信息、如杂志、报纸、文章、买卖记录、网络日志、病历、事监控、视频和图像档案,及大型电子商务。大数据是数据挖掘产生与生存发展的土壤。如今数据每五年翻一番,面对前所未有的海量数据,为了从中发现有用的信息必须进行数据挖掘。此外,计算机存储、处理大量数
16、据,以及运算的能力大为增强,为数据挖掘创造了条件,使其成为一门独特的学科和技术。2数据挖掘与数据分析的区别数据挖掘与数据分析的主要区别在于:(1)处理工作量。数据分析的数据量可能并不大,而数据挖掘的数据量极大。(2)制约条件。数据分析是从某些假设出发,建立方程或模型,而数据挖掘不作假设,可以自动建立方程。(3)处理对象。数据分析往往是针对数字型数据,而数据挖掘对象类型繁多,例如图像、声音、文本等。(4)处理结果。数据分析可以解释结果的含义;数据挖掘的结果不易解释,着眼于预测未来,并提出决策建议。想要从数据中发现规律(即认知),往往需将数据分析和数据挖掘结合起来。(二)数据挖掘步骤按挖掘对象,数
17、据挖掘分为数据库与数据仓库挖掘和网络挖掘两种,各自步骤分述如下。1数据库与数据仓库挖掘数据挖掘一般有信息收集、数据集成、数据规约、数据清理、数据变换、数据挖掘、模式评估和知识表示8个步骤。(1)信息收集。从确定的挖掘对象中提取特征,然后选择合适的收集方法,将收集到的信息存入数据库。对于海量数据,必须选择合适的数据仓库。(2)数据集成。把来源、格式、特点、性质不同的数据按逻辑或物理属性加以编排,以便以后使用。(3)数据规约。多数数据挖掘算法耗时很长,商业数据往往较多,数据挖掘更耗时间。数据规约就是简化已有可用数据集的表示,规约后数量大减,但仍能保持原数据的完整性,对规约数据的挖掘结果,与对规约前
18、数据的挖掘结果相同或几乎相同。(4)数据清理。有些数据不完整(属性缺少属性值)、含噪声(属性值错误),不一致(同一信息有多种表示),需要清理,使其完整、正确、一致后存入数据仓库。(5)数据变换。将数据变换成适合数据挖掘的形式。实数型数据,可将其分层和离散化。(6)数据挖掘。根据数据格式、属性与特点,选择合适的处理工具,例如统计方法、事例推理、决策树、规则推理、模糊集,甚至神经网络,取得有用的信息。(7)模式评估。由行业专家核实数据挖掘结果是否合理、是否可用。(8)知识表示。将数据挖掘得到的信息以可视方式交给用户,或作为新的知识存人知识库,供其他应用程序使用。并非所有的数据挖掘都要走上述的每一步
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 金属软管 公司 工程项目 数据 采集 分析 知识 管理 组织
限制150内