请问如何获得可以用来进行数据挖掘的大量物流信息

剑影 2012-05-22 02:30:55

老师给的任务，跪求

...全文

167 5 打赏收藏转发到动态举报

写回复

5 条回复

切换为时间正序

请发表友善的回复…

发表回复

剑影 2012-05-24

打赏
举报

回复

这个是不是只有找某些公司要啊，好像网上并没有这类数据

剑影 2012-05-22

打赏
举报

回复

[Quote=引用 2 楼的回复:]

生成数据的工具
[/Quote]
。。只有这种方法吗？不能获得真实的数据吗？

rucypli 2012-05-22

打赏
举报

回复

生成数据的工具

rucypli 2012-05-22

打赏
举报

回复

百度有这类工具生产数据的工具

大数据在物流行业的应用(共19页) 大数据在物流行业的应用物流大数据就是通过海量的物流数据，即运输、仓储、搬运装卸、包装及流通加工等物流环节中涉及的数据、信息等，挖掘出新的增值价值，通过大数据分析可以提高运输与配送效率，减少物流成本，更有效地满足客户服务要求。 1. 物流大数据的作用物流大数据应用对于物流企业来讲具有以下 3 个方面的重要作用。 1）提高物流的智能化水平通过对物流数据的跟踪和分析，物流大数据应用可以根据情况为物流企业做出智能化的决策和建议。在物流决策中，大数据技术应用涉及竞争环境分析、物流供给与需求匹配、物流资源优化与配置等。在竞争环境分析中，为了达到利益的最大化，需要对竞争对手进行全面的分析，预测其行为和动向，从而了解在某个区域或是在某个特殊时期，应该选择的合作伙伴。在物流供给与需求匹配方面，需要分析特定时期、特定区域的物流供给与需求情况，从而进行合理的配送管理。在物流资源优化与配置方面，主要涉及运输资源、存储资源等。物流市场有很强的动态性和随机性，需要实时分析市场变化情况，从海量的数据中提取当前的物流需求信息，同时对已配置和将要配置的资源进行优化，从而实现对物流资源的合理利用。 2）降低物流成本由于交通运输、仓储设施、货物包装、流通加工和搬运等环节对信息的交互和共享要求比较高，因此可以利用大数据技术优化配送路线、合理选择物流中心地址、优化仓库储位，从而大大降低物流成本，提高物流效率。 3）提高用户服务水平随着网购人群的急剧膨胀，客户越来越重视物流服务的体验。通过对数据的挖掘和分析，以及合理地运用这些分析成果，物流企业可以为客户提供最好的服务，提供物流业务运作过程中商品配送的所有信息，进一步巩固和客户之间的关系，增加客户的信赖，培养客户的黏性，避免客户流失。 2. 物流大数据应用案例针对物流行业的特性，大数据应用主要体现在车货匹配、运输路线优化、库存预测、设备修理预测、供应链协同管理等方面。 1）车货匹配通过对运力池进行大数据分析，公共运力的标准化和专业运力的个性化需求之间可以产生良好的匹配，同时，结合企业的信息系统也会全面整合与优化。通过对货主、司机能力以移动学习的方式进行培训，以及和任务的精准画像，可实现智能化定价、为司机智能推荐任务和根据任务要求指派配送司机等。从客户方面来讲，大数据应用会根据任务要求，如车型、配送公里数、配送预计时长、附加服务等自动超级计算机计算运力价格并匹配最符合要求的司机，司机接到任务后会按照客户的要求进行高质量的服务。在司机方面，大数据应用可以根据司机的个人情况、服务质量、空闲时间为他自动匹配合适的任务，并进行智能化定价。基于大数据实现车货高效匹配，不仅能减少空驶带来的损耗，还能减少污染。 2）运输路线优化通过运用大数据，物流运输效率将得到大幅提高，大数据为物流企业间搭建起沟通的桥梁，物流车辆行车路径也将被最短化、最优化定制。美国 UPS 公司使用大数据优化送货路线，配送人员不需要自己思考配送路径是否最优。UPS 采用大数据系统可实时分析 20 万种可能路线，3 秒找出最佳路径。 UPS 通过大数据分析，规定卡车不能左转，所以，UPS 的司机会宁愿绕个圈，也不往左转。根据往年的数据显示，因为执行尽量避免左转的政策，UPS 货车在行驶路程减少亿的前提下，多送出了 350000 件包裹。 3）库存预测互联网技术和商业模式的改变带来了从生产者直接到顾客的供应渠道的改变。这样的改变，从时间和空间两个维度都为物流业创造新价值奠定了很好的基础。大数据技术可优化库存结构和降低库存存储成本。运用大数据分析商品品类，系统会自动分解用来促销和用来引流的商品；同时，系统会自动根据以往的销售数据进行建模和分析，以此判断当前商品的安全库存，并及时给岀预警，而不再是根据往年的销售情况来预测当前的库存状况。总之，使用大数据技术可以降低库存存货，从而提高资金利用率。 4）设备修理预测美国 UPS 公司从 2000 年就开始使用预测性分析来检测自己全美 60 000 辆车规模的车队，这样就能及时地进行防御性的修理。如果车在路上抛锚，损失会非常大，因为那样就需要再派一辆车，会造成延误和再装载的负担，并消耗大量的人力、物力。以前，UPS 每两三年就会对车辆的零件进行定时更换，但这种方法不太有效，因为有的零件并没有什么毛病就被换掉了。通过监测车辆的各个部位，UPS 如今只需要更换需要更换的零件，从而节省了好几百万美元。 5）供应链协同管理随着供应链变得越来越复杂，使用大数据技术可以迅速高效地发挥数据的最大价值，集成企业所有的计划和决策业务，包括需求预测、库存计划、资源配置、设备管理、渠道优化、生产作业计划、物料需求与采购计划等

大数据与图书馆服务大数据与图书馆服全文共14页，当前为第1页。摘要：通过对大数据特征和国内外现状的详细分析，对大数据时代的图书馆服务提出了三点思考，对图书馆利用大数据提出了期望。关键词：大数据；图书馆服务大数据与图书馆服全文共14页，当前为第2页。大数据概论大数据（bigdata），或称海量数据，是用来描述海量的结构化和非结构化数据的专业术语，包括业务流程数据，如天文望远镜拍摄的图像视频数据、气象学里面的卫星云图数据等；企业大数据，如物联网、联通、移动、电信等通信和互联网运营商的数据等；社会大数据，如社会性网络服务（SNS）、微博、新闻媒体、视频网站、电子商务、招聘信息等；个人大数据，如个人实时位置、状态、见闻、言论等；科学大数据，如各种学科数据库等。大数据所描述的数据量规模巨大到无法通过传统的数据库和软件技术进行存储、管理和处理。作为这两年的热词，大数据是继Web2.0、数据仓库、数据挖掘和云计算之后为计算机界所主要研究的对象。在感知上，大数据是指难以用常用的软件工具在可容忍时间内抓取、管理以及处理的数据集合，大数据之所以可能成为一个"时代"，在很大程度上是因为这是一个可以由社会各界广泛参与的社会运动，而不仅仅是少数专家学者的研究对象。大数据与图书馆服全文共14页，当前为第3页。大数据特征数量Volume 第一个特征也是最重要的，大数据描述的是大批量数据，数据量级一般可以达到PB（1024TB）级规模，根据互联网数据中心（IDC）的监测，全球在2010年正式进入ZB（10243TB）时代，2011年全球数据量将达到1.8ZB，预计到2020年，全球将总共拥有35ZB的数据量。日益庞大的数据量使得人们对数据的有效利用日益重视，从而衍生了大数据概念。大数据需要处理的是各类统计、用户行为等数据，如企业的经营交易信息、商品物流信息、社会网络交流信息、位置信息等，数据规模极为庞大，有着自己独特的处理方案。多样性Variety 大数据种类繁多，在编码方式、数据格式、应用特征等多个方面存在差异性，多信息源并发形成了大量的异构数据，因此不能再用处理结构化数据的方法来进行处理。速度Velocity 大数据对数据实时处理有着极高的要求，需要实时反馈结果，捕捉、分析、处理每一瞬时出现的数据，因此通过传统数据库查询方式得到的当前结果很可能已经没有了价值。真实性Veracity 大数据策略可以提供更为真实的数据，通过对大量数据的分析，在用户行为、数据总结和未来预测方面做出准确的判断，为政府、企业、科研决策提供了真实可靠的依据。大数据与图书馆服全文共14页，当前为第4页。大数据技术及应用现状大数据的研究是近几年开始的，为了适应大数据日益迅猛的发展，其技术发展很快。就目前来看，大数据技术主要涵盖的领域有可视化分析、数据挖掘算法、预测性分析能力、语义引擎、数据管理以及Hadoop、Map-Reduce、HDFS等。在大数据存储方面，有分布式缓存、基于MPP的分布式数据库、分布式文件系统和NoSQL数据库技术，通过这些技术，大数据的优势得以发挥，其数据才得以整合和利用，从而为社会带来效益的提升。近几年，大数据在国内外都有较快的发展。大数据与图书馆服全文共14页，当前为第5页。国外发展现状大数据的重要性已经得到了世界各国的共识，在2010年7月，联合国发布了《大数据促发展，挑战与机遇》白皮书，白皮书中指出，大数据时代已经到来，如今人们可以使用极其丰富的数据资源，包括旧数据和新数据，来对社会，对人口进行前所未有的实时分析。 2012年1月，在瑞士达沃斯召开的世界经济论坛上，大数据是主题之一，会上发布的报告《大数据，大影响：国际化发展的新机遇》宣称，数据已经成为一种新的经济资产类别，就像货币或黄金一样。同时各国也在积极研究和利用大数据。 2012年5月，美国政府发布了《大数据研究和发展计划》，此项带有2亿多美元推动资金的倡议，旨在通过推动和改善与大数据相关的收集、组织和分析工具及技术，提升从海量和复杂的数据集中获取知识和洞察分析能力，推动政府与公司、大学的合作结盟，全民动员来应对"大数据"时代的挑战。美国政府推动的大数据计划也涵盖了图书馆部分，例如美国国家医学图书馆，开展了整合生物学及临床信息项目（i2b2：InformaticsforIntegratingBiologyandtheBedside），旨在创造能够整合和交换医疗保健和生物医学研究数据的方法和工具。通过i2b2开发的软件工具整合、挖掘和表现的数据，能够通过开源共享，在全球50多个组织进行使用。该项目就利用了大数据对于数据整合和共享的优势，实现了生物学和临床信息数据的共享。美国有名的IT大公司，包括谷歌、Amazon、IBM、FACEBOOK、甲骨文等都在进行

电子商务：从广义上讲，电子商务是利用现有的计算机硬件设备、软件和网络基础设施，通过一定的协议连接起来的电子网络环境进行各种各样商务活动的总称。从狭义上讲，电子商务是在技术、经济高度发达的现代社会里，掌握信息技术和商务规划的人，系统化运用企业内联网（intranet）外联网（Extranet）及Internet等现代系统，进行高效率，低成本的商务活动。 Internet：连接了无数个遍及全球范围的广域网和局域网的互联网络。 B2B：商业机构（或企业、公司）使用Internet 或各种商务网络向供应商（企业或公司）订货和付款。 B2C：电子商务是以Internet为主要手段，有商家或企业通过网站向消费者提供商品和服务的一种商务模式。 C2C：就是通过为买卖双方提供一个在线交易平台，使卖方可以主动提供商品上网拍卖，而买方可以自行选择商品进行竞价。 B2G：指政府部门与企业之间通过网络进行各项商务活动。电子支付：是客户首先以一定金额的现金或存款从发卡者处兑换得代表相同金额的数据，通过使用某些电子化方法将该数据直接转移给支付对象。银行卡：是商业银行向社会公开发行，具有消费信用、转账结算、存取现金等全部或部分功能、作为支付结算工具的各类卡的统称。包括信用卡、借记卡等，客户可使用银行卡随时、随地完成在线支付操作，有关的个人信息、信用卡及密码信息，经过加密后直接传达到银行进行支付结算。电子现金：是一种以数据形式流通、能被消费者和商家普遍接受、通过互联网购物时使用的数字化货币。用户可以随时通过互联网从银行账户上下载电子现金，从而保证了电子现金使用的便捷性。电子支票：是一种借鉴纸张支票转移支付的优点，利用数字传递将钱款从一个账户转移到另一个账户的电子付款形式。这种电子支票的支付时在与商户及银行相连的网络上以密码方式传递的，大多数使用公用关键字加密签名或个人身份证号码（PIN）代替手写签名。智能卡：是一种大小和普通卡片相仿的塑料卡片，内含一块直径1cm左右的硅芯片，具有存储信息和进行复杂运算的功能。网上银行：是指通过因特网，将客户的电脑终端连接至银行网站，实现将银行服务直接送到客户办公室或家中的服务系统，使客户足不出户就可以享受到综合、统一、安全、实时的银行服务，包括提供对私、对公的各种零售和批发的全方位银行业务，还可以为客户提供跨国的支付与清算等其他的贸易、非贸易的银行业务服务。物流：是物质资料从供给者到需求者的物理运动，主要是创造时间价值和场所价值,有时也创造一定加工价值的活动。数据保密：保证在Internet网络上传递的数据信息不被第三方监视和窃取并使用该数据。数据完整性：保证数据的完整性就是要保证在公共Internet网络上传递的数据信息不被篡改。防火墙：是一种位于两个或多个网络间，实施网络之间访问控制的组件集合，是维护个人计算机或局域网安全的防护措施的总称。它是专门用来拦截、过滤不安全的信息，控制非法用户进入的软件。 CA证书：有认证授权中心（CA中心）发行的数字证书。数字证书：是各实体（消费者、户、企业、银行等）在网上进行信息交流及商务活动的身份证明，在电子交易的各个环节、交易各方都需要验证对方数字证书的有效性，从而解决相互间的信任问题。电子商务网站设计原理重点全文共8页，当前为第1页。虚拟专用网：用于Internet交易的一种专用网络，在两个系统之间建立安全的信道（或隧道），用于电子数据交换。电子商务网站设计原理重点全文共8页，当前为第1页。信息检索：信息检索是指将信息按一定的方式组织和存储起来，并根据信息用户的需要找出有关信息的过程。所谓的电子商务信息检索，是指交易方或产品服务提供方根据自己的需求，按照一定的检索方式查找所需信息的过程。指令：是指示计算机执行某种操作的命令。指令必须是二进制形式的代码，由操作码、操作数地址两部分构成。程序：是由有序排列的指令组成的。数据库：是长期储存在计算机内、有组织、可共分享的数据集合。数据库管理系统DBMS：数据库管理系统是为数据库的建立、使用和维护配置的软件。关系型数据库：关系型数据库是以关系数学模型来表示的数据。关系数学模型中以二维表的形式来描述数据。数据仓库：（DW）是面向主题、集成、不可更新并随时间不断变化的数据的集合。数据仓库用来支持企业或组织的决策分析处理。 数据挖掘（DM）：就是从大量、不完全、有噪声、模糊、随机的实际应用数据中，提取隐含在其中、人们事先不知道但又潜在有用的信息和知识的过程。 OSI/RM：是OSI在网络通信方面所定义的开放系统互连模型，1978年ISO（国际化标准组织）定义了一个开放协议标准。 TCP/IP：传输控制协议/互联网协议。TCP协议时IP协议的高层协议，TCP在IP之上提供了一个可靠的链接方式的协议。TCP

浅谈大数据技术及应用全文共5页，当前为第1页。浅谈大数据技术及应用全文共5页，当前为第1页。浅谈大数据技术及应用全文共5页，当前为第1页。浅谈大数据技术及应用全文共5页，当前为第1页。浅谈大数据技术及应用（黑体小二）哈尔滨商业大学管理学院物流工程2015 王兴哲摘要：大数据的概念由来已久，但在多数人眼中大数据就是数据大，甚至有时和云计算混为一谈。本文主要对大数据的定义进行重新的认识，并将其与云计算加以区别。而在大数据流行的今天，大数据究竟带来了什么有利的影响，或者说它将有什么样的前景。这些问题都将在文中一一列举关键词：大数据云计算应用浅谈大数据技术及应用引言大数据这一术语正是产生在全球数据爆炸增长的背景下,用来形容庞大的数据集合。与传统的数据集合相比,大数据通常包含大量的非结构化数据,且大数据需要更多的实时分析。此外,大数据还为挖掘隐藏的价值带来了新的机遇,同时给我们带来了新的挑战,政府机构最近也宣布了一项加快大数据进程的重大计划,各行各业也都在积极讨论大数据的吸引力。大数据时代的到来，是全球知名咨询公司麦肯锡最早提出的，麦肯锡称："数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们对于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来。"近几年大数据一词的持续升温也带来了大数据泡沫的疑虑，大数据代表了互联网的信息层(数据海洋)，是互联网智慧和意识产生的基础。包括物联网，传统互联网，移动互联网在源源不断的向互联网大数据层汇聚数据和接受数据。大数据的定义一般意义上,大数据是指无法在有限时间内用传统IT 技术和软硬件工具对其进行感知､获取､管理､处理和服务的数据集合。大数据技术描述了新一代的技术和架构体系,通过高速采集､发现或分析,提取各种各样的大量数据的经济价值。大数据的特点可以总结为 4 个 V,即volume(体量浩大)､variety(模态繁多)､velocity(生成快速)和value(价值巨大但密度很低)。大数据价值链可分为4个阶段:数据生成､数据采集､数据储存以及数据分析。数据分析是大数据价值链的最后也是最重要的阶段,是大数据价值的实现,是大数据应用的基础,其目的在于提取有用的值,提供论断建议或支浅谈大数据技术及应用全文共5页，当前为第2页。浅谈大数据技术及应用全文共5页，当前为第2页。持决策,通过对不同领域数据集的分析可能会产生不同级别的潜在价值。浅谈大数据技术及应用全文共5页，当前为第2页。浅谈大数据技术及应用全文共5页，当前为第2页。 3大数据的价值大数据在投资者眼里是金光闪闪的两个字：资产。[3] 比如，Facebook上市时，评估机构评定的有效资产中大部分都是其社交网站上的数据。如果把大数据比作一种产业，那么这种产业实现盈利关键，在于提高对数据的"加工能力"，通过"加工"实现数据的"增值"。Target 超市以20多种怀孕期间孕妇可能会购买的商品为基础，将所有用户的购买记录作为数据来源，通过构建模型分析购买者的行为相关性，能准确的推断出孕妇的具体临盆时间，这样Target的销售部门就可以有针对的在每个怀孕顾客的不同阶段寄送相应的产品优惠卷。 Target的例子印证了维克托·迈尔-舍恩伯格提过的一个很有指导意义的观点：通过找出一个关联物并监控它，就可以预测未来。Target通过监测购买者购买商品的时间和品种来准确预测顾客的孕期，这就是对数据的二次利用的典型案例。如果，我们通过采集驾驶员手机的GPS数据，就可以分析出当前哪些道路正在堵车，并可以及时发布道路交通提醒；通过采集汽车的GPS位置数据，就可以分析城市的哪些区域停车较多，这也代表该区域有着较为活跃的人群，这些分析数据适合卖给广告投放商。不管大数据的核心价值是不是预测，但是基于大数据形成决策的模式已经为不少的企业带来了盈利和声誉。从大数据的价值链条来分析，存在三种模式： 1手握大数据，但是没有利用好；比较典型的是金融机构，电信行业，政府机构等。 2没有数据，但是知道如何帮助有数据的人利用它；比较典型的是IT咨询和服务企业。 3既有数据，又有大数据思维；比较典型的是Google，Amazon等。未来在大数据领域最具有价值的是两种事物：1拥有大数据思维的人，这种人可以将大数据的潜在价值转化为实际利益；2还未有被大数据触及过的业务领域。这些是还未被挖掘的油井，金矿，是所谓的蓝海。下面是大数据在当下的杰出表现：大数据帮助政府实现市场经济调控、公共卫生安全防范、灾难预警、社会舆论监督；大数据帮助城市预防犯罪，实现智慧交通，提升紧急应急能力；大数据帮助医疗机构建立患者的疾病风险跟踪机制，帮助医药企业提升药品的临床使用效果，帮助艾滋病研究机构为患者提供定制的药物；大数据帮助电商公司向用户

1.背景介绍 数据挖掘是一种利用计算机科学方法和技术对大量数据进行分析和挖掘，以发现隐藏的模式、关系和知识的过程。数据挖掘可以帮助组织更好地理解其数据，从而提高业务效率、提高收益和降低风险。在现实生活中，数据挖掘已经广泛应用于各个领域，如金融、医疗、电商、物流等。预测分析是数据挖掘的一个重要应用领域，它旨在利用历史数据为未来事件预测提供依据。通过预测分析，企业可以更好地预测市场趋势、消费者需...

7,388

社区成员

6,742

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章