物流与大数据学习教案.pptx

物流与大数据物流与大数据(shj)第一页，共19页。引言：一场生活，工作与思维(swi)的大变革大数据开启了一次重大的时代转型。就像望远镜让我们能够感受宇宙，显微镜让我们能够观测微生物一样，大数据正在改变我们的生活以及理解世界的方式，成为(chngwi)新发明和新服务的源泉，而更多的改变正蓄势待发.数据化意味着我们要从一切太阳底下的事物中汲取信息，甚至包括很多我们以前认为(rnwi)和“信息”根本搭不上边的事情。第1页/共19页第二页，共19页。大数据大数据(shj)(shj)时代的思维变革时代的思维变革0101更多：不是随机样本，而是全体数据更多：不是随机样本，而是全体数据 当数据处理技术已经发生了翻天覆地的变化时，在大数据时代进行抽样分析就像在汽车时代骑当数据处理技术已经发生了翻天覆地的变化时，在大数据时代进行抽样分析就像在汽车时代骑马马 一样。一样。一切都变了，我们需要的是所有的数据一切都变了，我们需要的是所有的数据“样本样本=总体总体”0202更杂：不是精确性，而是混杂更杂：不是精确性，而是混杂(hnz)(hnz)性性 执迷于精确性是信息缺乏时代和模拟时代的产物。只有执迷于精确性是信息缺乏时代和模拟时代的产物。只有5%5%的数据是结构化且能适用于传统数据的数据是结构化且能适用于传统数据库的。如果接受混乱，剩下库的。如果接受混乱，剩下95%95%的非结构化数据都无法被利用，只有接收不精确性；我们才能的非结构化数据都无法被利用，只有接收不精确性；我们才能打开一扇从未涉足的世界的窗户。打开一扇从未涉足的世界的窗户。0303更好：不是更好：不是 因果关系，而是相关关系因果关系，而是相关关系 知道知道“是什么是什么”就够了，没必要知道就够了，没必要知道“为什么为什么”。在大数据时代，我们不必非得知道现象背后的原因，。在大数据时代，我们不必非得知道现象背后的原因，而是要让数据自己而是要让数据自己“发声发声”第2页/共19页第三页，共19页。推动大数据发展的两个(lin)重要因素人类测量，记录和分析世界(shji)的渴望以传感技术、互联网、移动智能终端为代表的一系列新的信息技术，使得信息的获取、利用、集聚在数量上发生了突飞猛进的变化。第3页/共19页第四页，共19页。中国的大数据早期发展(fzhn)阶段1 1、数据的丰富和开放程度不够、数据的丰富和开放程度不够丰富的数据源是大数据产业发展的前提。而我国数字化丰富的数据源是大数据产业发展的前提。而我国数字化的数据资源总量远远低于美欧，每年新增数据量仅为美的数据资源总量远远低于美欧，每年新增数据量仅为美国的国的7%7%，欧洲的，欧洲的12%12%，其中政府和制造业的数据资源积，其中政府和制造业的数据资源积累远远落后于国外。就已有有限的数据资源来说，还存累远远落后于国外。就已有有限的数据资源来说，还存在标准化、准确性、完整性低，利用价值不高的情况，在标准化、准确性、完整性低，利用价值不高的情况，这大大降低了数据的价值。这大大降低了数据的价值。同时，我国政府、企业和行业信息化系统建设往往缺少同时，我国政府、企业和行业信息化系统建设往往缺少统一规划和科学论证，系统之间缺乏统一的标准，形成统一规划和科学论证，系统之间缺乏统一的标准，形成了众多了众多“信息孤岛信息孤岛”，而且受行政垄断，而且受行政垄断(lngdun)(lngdun)和商业利和商业利益所限，数据开放程度较低，以邻为壑、共享难，这给益所限，数据开放程度较低，以邻为壑、共享难，这给数据利用造成极大障碍。数据利用造成极大障碍。原因：原因：政策法规不完善大数据挖掘缺乏相应的立法，无法既保政策法规不完善大数据挖掘缺乏相应的立法，无法既保证共享又防止滥用，一方面欠缺推动政府和公共数据的证共享又防止滥用，一方面欠缺推动政府和公共数据的政策，另一方面数据保护和隐私保护方面的制度不完善政策，另一方面数据保护和隐私保护方面的制度不完善抑制了开放的积极性。抑制了开放的积极性。第4页/共19页第五页，共19页。2 2、数据挖掘与分析工具有待完善、数据挖掘与分析工具有待完善要以低成本和可扩展的方式处理大数据，这就需要对整要以低成本和可扩展的方式处理大数据，这就需要对整个个ITIT架构进行重构，开发先进的软件平台和算法。架构进行重构，开发先进的软件平台和算法。而我国数据处理技术基础薄弱，总体上以跟随为主，难而我国数据处理技术基础薄弱，总体上以跟随为主，难以满足大数据大规模应用以满足大数据大规模应用(yngyng)(yngyng)的需求。如果把大数的需求。如果把大数据比作石油，那数据分析工具就是勘探、钻井、提炼、据比作石油，那数据分析工具就是勘探、钻井、提炼、加工的技术。我国必须掌握大数据关键技术，才能将资加工的技术。我国必须掌握大数据关键技术，才能将资源转化为价值。应该说，要迈过这道坎，开源技术为我源转化为价值。应该说，要迈过这道坎，开源技术为我们提供了很好的基础。们提供了很好的基础。3 3、模式创新和业务拓展尚显不足、模式创新和业务拓展尚显不足虽然虽然20152015年大数据应用年大数据应用(yngyng)(yngyng)已延伸至各个领域，已延伸至各个领域，但应用但应用(yngyng)(yngyng)模式多有雷同，应用模式多有雷同，应用(yngyng)(yngyng)模式创模式创新还有待进一步加强。企业应用新还有待进一步加强。企业应用(yngyng)(yngyng)大数据的目的大数据的目的鲜有拓展新业务、开发新产品和创新增值服务，多是在鲜有拓展新业务、开发新产品和创新增值服务，多是在改善现有业务、推销已有产品或控制成本等。尽管改善现有业务、推销已有产品或控制成本等。尽管20142014年部分大数据应用年部分大数据应用(yngyng)(yngyng)尝试使用非结构化数据，但尝试使用非结构化数据，但依然是将非结构化数据进行结构化处理后，再按照常规依然是将非结构化数据进行结构化处理后，再按照常规方法使用方法使用第5页/共19页第六页，共19页。20162016年大数据行业年大数据行业年大数据行业年大数据行业(hngy)(hngy)增长将成为常态，增长将成为常态，增长将成为常态，增长将成为常态，行业行业行业行业(hngy)(hngy)关注领域将发生变化关注领域将发生变化关注领域将发生变化关注领域将发生变化云计算模式将颠覆软件行业，一切皆服务云计算模式将颠覆软件行业，一切皆服务云计算正在逐步渗透产业互联网各个垂直领域，软件公司在云端云计算正在逐步渗透产业互联网各个垂直领域，软件公司在云端“重生重生”，具备低成本高速扩张能，具备低成本高速扩张能力。力。未来未来5 5年，大数据与云融合依托云提供大数据服务的公司将大量涌现，未来的产业图景中，共享经年，大数据与云融合依托云提供大数据服务的公司将大量涌现，未来的产业图景中，共享经济将从个人扩展到企业，企业将以其最擅长的能力模块和最稀缺的资源模块参与济将从个人扩展到企业，企业将以其最擅长的能力模块和最稀缺的资源模块参与APIAPI经济，从而使经济，从而使APIAPI价值最大化价值最大化。IDCIDC最近发布的报告显示，全球大数据技术及服务市场复合年增长率最近发布的报告显示，全球大数据技术及服务市场复合年增长率(CAGR)(CAGR)将达将达31.7%31.7%，20162016年收年收入将达入将达238238亿美元；中国大数据市场规模将从亿美元；中国大数据市场规模将从20112011年的年的77607760万美元增加到万美元增加到20162016年的年的6.176.17亿美元，未亿美元，未来来5 5年的复合增长率达年的复合增长率达51.4%51.4%，市场规模将增长近，市场规模将增长近7 7倍。倍。另外，随着国内政策的变化，通信、制造另外，随着国内政策的变化，通信、制造(zhzo)(zhzo)、物流行业政府支持热度有所下降，通信行业的、物流行业政府支持热度有所下降，通信行业的政策热度降幅较大；政府与金融行业的政策热度将持续高涨。政策热度降幅较大；政府与金融行业的政策热度将持续高涨。第6页/共19页第七页，共19页。物流定义：物流从供应地向接受地的实体流动中，根据实际需要，将运输，储存，装卸，搬运，包装，流通加工，配送(pisn)，信息处理等功能有机结合起来实现客户要求的过程。第7页/共19页第八页，共19页。物流的发展(fzhn)历史2020世纪世纪7070年代末，流通企业开始年代末，流通企业开始(kish)(kish)组建储运公司，从商品经营机构分离出来。这个时期我们称为储运组建储运公司，从商品经营机构分离出来。这个时期我们称为储运时代。时代。19791979年我国才开始年我国才开始(kish)(kish)使用物流一词。我国物资工作者代表团赴日本参加第三届国际物流会议，回国后使用物流一词。我国物资工作者代表团赴日本参加第三届国际物流会议，回国后在考察报告中第一次引用和使用物流这一述语，并介绍了日本物流的发展情况。在考察报告中第一次引用和使用物流这一述语，并介绍了日本物流的发展情况。9090年代中期，现代物流才在中国真正的崛起。年代中期，现代物流才在中国真正的崛起。19941994年广州宝供的出现，标志着中国本土第一个第三方物流年广州宝供的出现，标志着中国本土第一个第三方物流企业的诞生，拉开了现代物流组织的序幕。企业的诞生，拉开了现代物流组织的序幕。20012001年中国物流与采购联合会的成立，可以说是中国物流业历史发展的一次飞跃。年中国物流与采购联合会的成立，可以说是中国物流业历史发展的一次飞跃。20062006年的年的“十一五十一五”规划，在中国历史上第一次把现代物流业写进我们的五年计划，这么一段文字明确了中规划，在中国历史上第一次把现代物流业写进我们的五年计划，这么一段文字明确了中国物流在国民经济中的产业地位。国物流在国民经济中的产业地位。第8页/共19页第九页，共19页。大数据(shj)智慧物流物流大数据(shj)的收集和分析1.物流大数据的收集(shuj)互联网，物联网，车联网，传感器，移动设备等无一不是物流大数据的重要来源。因此，首先通过多渠道获得数据，然后通过数据的实时分析，掌握和利用有用的信息。2.物流大数据的分析A深度学习提高精度，在对大数据分析应对社交网络，电子商务等产生的大量数据进行有效的分析，表达，解释和学习。B知识计算挖掘深度：在物流配送服务过程中，对配送路线的路况及最优路线网络进行分析与计算，可以使得物流成本减少。C社会计算促进认知：对社交网络的分析可以从中得出社会新媒体数据的特征：a信息碎片化严重且内容信息相关性小b虚拟互联网逐渐转化为现实中人的联网所以当今我们要深度挖掘人的联网，从而能使物流数据变得更加可视化。第9页/共19页第十页，共19页。大数据(shj)智慧物流物流大数据(shj)的可视化转化第10页/共19页第十一页，共19页。大数据(shj)智慧物流物流大数据(shj)可视化信息系统在物流配送中的应用。第11页/共19页第十二页，共19页。大数据(shj)对物流的影响(1)(1)信息对接，掌握企业运作信息信息对接，掌握企业运作信息过去传统数据收集、分析处理方式已经不能满足物流企业对每一个节点过去传统数据收集、分析处理方式已经不能满足物流企业对每一个节点的信息需求，这就需要通过大数据把信息对接起来，将每个节点的数据的信息需求，这就需要通过大数据把信息对接起来，将每个节点的数据收集并且整合，通过数据中心分析、处理转化为有价值的信息，从而掌收集并且整合，通过数据中心分析、处理转化为有价值的信息，从而掌握物流企业的整体握物流企业的整体(zhngt)(zhngt)运作情况。运作情况。(2)(2)提供依据，帮助物流企业做出正确的决策提供依据，帮助物流企业做出正确的决策传统的根据市场调研和个人经验来进行决策已经不能适应这个数据化的传统的根据市场调研和个人经验来进行决策已经不能适应这个数据化的时代，只有真实的、海量的数据才能真正反映市场的需求变化。时代，只有真实的、海量的数据才能真正反映市场的需求变化。第12页/共19页第十三页，共19页。(3)(3)培养客户粘性，避免客户流失培养客户粘性，避免客户流失需要物流企业以数据中心为支撑，通过对数据挖掘和分析，合理地运用这些需要物流企业以数据中心为支撑，通过对数据挖掘和分析，合理地运用这些分析成果，进一步巩固和客户之间的关系，增加客户的信赖分析成果，进一步巩固和客户之间的关系，增加客户的信赖(xnli)(xnli)，培养客，培养客户的粘性，避免客户流失。户的粘性，避免客户流失。(4)(4)数据数据“加工加工”从而实现数据从而实现数据“增值增值”只有一小部分结构化数据是可以直接分析利用的，绝大部分非结构化数据必只有一小部分结构化数据是可以直接分析利用的，绝大部分非结构化数据必须要转化为结构化数据才能储存分析。这就造成了并不是所有的数据都是准须要转化为结构化数据才能储存分析。这就造成了并不是所有的数据都是准确的、有效的，很大一部分数据都是延迟、无效、甚至是错误的确的、有效的，很大一部分数据都是延迟、无效、甚至是错误的第13页/共19页第十四页，共19页。大数椐在物流企业(qy)中的应用(1)(1)市场预测市场预测在过去，我们总是习惯于通过采用调查问卷和以往经验来寻找客户的在过去，我们总是习惯于通过采用调查问卷和以往经验来寻找客户的来源。而当调查结果总结出来时，结果往往已经是过时的了，延迟、来源。而当调查结果总结出来时，结果往往已经是过时的了，延迟、错误的调查结果只会让管理者对市场需求做出错误的信计。而大数据错误的调查结果只会让管理者对市场需求做出错误的信计。而大数据能够帮助企业完全勾勒出其客户的行为和需求信息，通过真实而有效能够帮助企业完全勾勒出其客户的行为和需求信息，通过真实而有效的数据反映市场的需求变化，从而对产品进入市场后的各个阶段作出的数据反映市场的需求变化，从而对产品进入市场后的各个阶段作出预测，进而合理的控制物流企业库存和安排运输预测，进而合理的控制物流企业库存和安排运输(ynsh)(ynsh)方案。方案。(2)(2)物流中心的选址物流中心的选址物流中心选址问题要求物流企业在充分考虑到自身的经营特点、商品物流中心选址问题要求物流企业在充分考虑到自身的经营特点、商品特点和交通状况等因素的基础上，使配送成本和匿定成本等之和达到特点和交通状况等因素的基础上，使配送成本和匿定成本等之和达到最小。针对这一问题，可以利用大数据中分类树方法来解决。最小。针对这一问题，可以利用大数据中分类树方法来解决。第14页/共19页第十五页，共19页。(3)(3)优化配送线路优化配送线路物流企业运用大数据来分析商品的特性和规格、客户的物流企业运用大数据来分析商品的特性和规格、客户的不同需求（时间和金钱）等问题，从而用最快的速度对不同需求（时间和金钱）等问题，从而用最快的速度对这些影响配送计划的因素做出反映（比如选择哪种运输这些影响配送计划的因素做出反映（比如选择哪种运输方案、哪种运输线路等），制定最合理的配送线路。而方案、哪种运输线路等），制定最合理的配送线路。而且企业还可以通过配送过程中实时产生的数据，快速地且企业还可以通过配送过程中实时产生的数据，快速地分析出配送路线的交通状况，对事故多发路段的做出提分析出配送路线的交通状况，对事故多发路段的做出提前预警。精确分析配送整个过程的信息，使物流的配送前预警。精确分析配送整个过程的信息，使物流的配送管理智能化，提高了物流企业的信息化水平和可预见性。管理智能化，提高了物流企业的信息化水平和可预见性。(4)(4)仓库储位优化仓库储位优化合理的安排商品储存位置对于合理的安排商品储存位置对于(duy)(duy)仓库利用率和搬仓库利用率和搬运分拣的效率有着极为重要的意义。对于运分拣的效率有着极为重要的意义。对于(duy)(duy)商品商品数量多、出货频率快的物流中心，储位优化就意味着工数量多、出货频率快的物流中心，储位优化就意味着工作效率和效益。哪些货物放在一起可以提高分拣率，哪作效率和效益。哪些货物放在一起可以提高分拣率，哪些货物储存的时间较短，都可以通过大数据的关联模式些货物储存的时间较短，都可以通过大数据的关联模式法分析出商品数据间的相互关系来合理的安排仓库位置。法分析出商品数据间的相互关系来合理的安排仓库位置。第15页/共19页第十六页，共19页。大数据大数据(shj)(shj)对物流行业发展的意义对物流行业发展的意义（1 1）降低物流成本，提高配送效率）降低物流成本，提高配送效率大数据涵盖大数据涵盖(hni)(hni)了许多高新技术，主要包括大数了许多高新技术，主要包括大数据存储、管理和大数据检索使用（包括数据挖掘和智据存储、管理和大数据检索使用（包括数据挖掘和智能分析）等技术。这些技术对物流行业发展的各个环能分析）等技术。这些技术对物流行业发展的各个环节都有着重要的影响。节都有着重要的影响。通过在这些环节中对大数据的充分利用，物流企业可通过在这些环节中对大数据的充分利用，物流企业可以有效的管理公司员工，快速制定出高效合理的物流以有效的管理公司员工，快速制定出高效合理的物流配送方案，确定物流配送的交通工具、最佳线路，进配送方案，确定物流配送的交通工具、最佳线路，进行实时监控，很大程度上降低物流配送的成本，大大行实时监控，很大程度上降低物流配送的成本，大大提高物流配送的效率，给客户提供高效便捷是服务，提高物流配送的效率，给客户提供高效便捷是服务，实现与用户之间的双赢。实现与用户之间的双赢。（2 2）从价格竞争转向价值竞争）从价格竞争转向价值竞争目前我国物流快递行业竞争越来越激烈。要想在竞争目前我国物流快递行业竞争越来越激烈。要想在竞争中占据大的市场，获得更大的利益，各大企业必须要中占据大的市场，获得更大的利益，各大企业必须要从价格竞争转向价值竞争，提升自己的服务质量。因从价格竞争转向价值竞争，提升自己的服务质量。因而物流快递业应该加快引进大数据云计算等技术。而物流快递业应该加快引进大数据云计算等技术。第16页/共19页第十七页，共19页。（3 3）推动）推动“大物流大物流”体系的形成体系的形成菜鸟网络菜鸟网络大数据时代的到来，有效推动大数据时代的到来，有效推动“大物流大物流”体系的形成，实现物体系的形成，实现物流行业的巨大变革。所谓流行业的巨大变革。所谓“大物流大物流”是指企业的自有物流（人是指企业的自有物流（人员、车队、仓库等）和第三方物流企业的配送信息与资源共员、车队、仓库等）和第三方物流企业的配送信息与资源共享，以实现更大限度的利用各方面的资源，降低物流成本。享，以实现更大限度的利用各方面的资源，降低物流成本。社会社会“大物流大物流”形成之后，企业可以和第三方物流公司合作，形成之后，企业可以和第三方物流公司合作，物流企业直接面对市场，它根据市场的需要来组织调控若干物流企业直接面对市场，它根据市场的需要来组织调控若干生产企业的大管家，既负责生产企业的大管家，既负责“后后”勤，有负责勤，有负责“前前”勤。这样物勤。这样物流企业才会充分合理有效地组织利用资源，既保证自己的经流企业才会充分合理有效地组织利用资源，既保证自己的经济效益，又保证生产企业的经济效益，从而避免各种问题的济效益，又保证生产企业的经济效益，从而避免各种问题的产生。产生。以菜鸟网络以菜鸟网络阿里巴巴与多家快递公司成立阿里巴巴与多家快递公司成立(chngl)(chngl)新公新公司司“中国智能骨干网中国智能骨干网”为例。菜鸟网络专注打造中国智为例。菜鸟网络专注打造中国智能物流骨干网将利用先进的物联网技术、云计算等各项互联能物流骨干网将利用先进的物联网技术、云计算等各项互联网技术，建立开放、透明、共享的数据应用平网技术，建立开放、透明、共享的数据应用平台，从而为物流公司、电商企业、仓储企业、第三方物流服台，从而为物流公司、电商企业、仓储企业、第三方物流服务商、供应链服务商等各类企业提供优质服务商、供应链服务商等各类企业提供优质服务，支持物流行业向高附加值领域进一步发展和升级。务，支持物流行业向高附加值领域进一步发展和升级。第17页/共19页第十八页，共19页。大数据发展-物流方面的应用(yngyng)例子多效地理定位与多效地理定位与upsups的最佳行车路径的最佳行车路径 UpsUps快递多效地利用了地理定位数据。为了使总部能在车辆出现晚点的时候跟踪到车辆的位置和预快递多效地利用了地理定位数据。为了使总部能在车辆出现晚点的时候跟踪到车辆的位置和预防引擎故障，它的货车上装有传感器，无线适配器和防引擎故障，它的货车上装有传感器，无线适配器和GPSGPS。同时，这些设备也方便了公司监督管理。同时，这些设备也方便了公司监督管理员工并优化行车线路。就像莫里的图表是基于过去的航海经验一样，员工并优化行车线路。就像莫里的图表是基于过去的航海经验一样，upsups为货车定制的最佳行车路为货车定制的最佳行车路径一定程度上也是根据径一定程度上也是根据(gnj)(gnj)过去的行车经验总结而来的。过去的行车经验总结而来的。20112011年，年，upsups的驾驶员们少跑了近的驾驶员们少跑了近48284828万公里的路程，节省了万公里的路程，节省了300300万加仑的燃料并且减少了万加仑的燃料并且减少了3 3万公吨万公吨的二氧化碳排放量。系统也设计了尽量少左转的路线，因为左转要求货车在交叉路口穿过去，所以的二氧化碳排放量。系统也设计了尽量少左转的路线，因为左转要求货车在交叉路口穿过去，所以更容易出事故。而且货车往往需要等待一会儿才能左转，也会更耗油。因此，减少左转使得行车的更容易出事故。而且货车往往需要等待一会儿才能左转，也会更耗油。因此，减少左转使得行车的安全性和效率都得到了大幅度的提升安全性和效率都得到了大幅度的提升第18页/共19页第十九页，共19页。