我眼中的大数据 “昨天我用手机浏览了一件衣服,今天手机为我推送了衣服的相关信息”这个不经意的小插曲让我对大数据产生了浓厚的兴趣,在我们的生活中随处可见大数据这一名词,而大数据又无时无刻不在影响着我们的生活,我不禁好奇究竟什么是大数据呢? “大数据”的英文名Big Data1997年就已经出现在有关储存技术的论文里,2001年出现在计算机人工智能杂志的文章标题中。直至最近几年,由于采集的数据急剧增长,常规储存和处理手段难以应付,大数据被大量用于表示庞大的数据。美国国家科学基金会(NSF)将大数据定义为:“由科学仪器、传感设备、互联网交易、电子邮件、音频视频软件、网络点击流等多种数据源生成的大规模、多元化、复杂、长期的分布式数据集。”著名咨询公司麦肯锡全球研究所在《大数据:创新、竞争和生产力的下一个前沿》中提出,“大数据是指大小超出了传统数据库软件工具的抓取、储存、管理和分析能力的数据群”总而言之,大数据是基于科学技术的发展,通过技术手段对数据进行获取、储存,并综合运用自然科学和人文社会科学的研究方法,对海量数据进行分析、应用而形成新概念。 大数据的特征: Volume海量:大数据的特征首先就体现为“数量大”。随着信息技术的高速发展,数据开始爆发性增长。社交网络(微博、推特、脸书)、移动网络、各种智能终端等,都成为数据的来源。淘宝网近4亿的会员每天产生的商品交易数据约20TB;脸书约10亿的用户每天产生的日志数据超过300TB。 Velocity高速:与传统数据载体不同,大数据的交换和传播是通过互联网、云计算等方式实现的,远比传统媒介的信息交换和传播速度快捷。大数据能实现对数据的实时分析而非批量分析,数据输入、处理与丢弃立刻见效,几乎无延迟。 Variety多样:广泛的数据来源,决定了大数据形式的多样性。大数据大体可分为三类:一是结构化数据,如财务系统数据、信息管理系统数据、医疗系统数据等,其特点是数据间因果关系强;二是非结构化的数据,如视频、图片、音频等,其特点是数据间没有因果关系;三是半结构化数据,如HTML文档、邮件、网页等,其特点是数据间的因果关系弱。 Value价值:这也是大数据的核心特征。相比于传统的小数据,大数据最大的价值在于通过从大量不相关的各种类型的数据中,挖掘出对未来趋势与模式预测分析有价值的数据,并通过机器学习方法、人工智能方法或数据挖掘方法深度分析,发现新规律和新知识,并运用于农业、金融、医疗等各个领域,从而最终达到改善社会治理、提高生产效率、推进科学研究的效果。 大数据技术就在我们身边,渗透进我们每个人的日常生活之中,今天我们的衣食住行各个方面都存在大数据的身影:它提供了全媒体数据,云计算分析,让我们的生活更便利。大数据通过手机通讯、社交平台、购物聊天、出行导航等每一个生活瞬间中收集数据,并通过大数据分析技术,了解我们需要什么,主动快速的提供我们需要的信息,方便我们的生活。 大数据在交通中的应用 以高德地图为例:高德地图提供免费交通信息服务给用户,用户在使用服务的同时也成为交通信息的贡献者,共享自己所在道路的通行情况,帮助高德获取交通路况信息。大量的数据通过汇总分析,一方面让高德地图能够为我们提供所需的最优路线、通行时间、规避拥堵等信息,另一方面高德地图也通过大量的数据获取出租车、物流车通行数据、道路实时发生的交通事件数据,其中还包括了从交管部门合作获得的数据及高德地图用户上报的数据等,这些数据又为高德地图改善服务,提供准确的信息打下了基础 大数据的购物广告中的应用 购物中的广告精准投放可以根据〝网络号〞用户的习惯、喜好和需求,有针对性的投放用户感兴趣或有用的广告。借助cookies的跟踪和庞大的数据库系统的储存,记录下来大量的姓名和信息,运用大数据技术搜集、分析网络用户的网上“踪迹”,精准地发现目标消费者,预测消费者行为。在发广告的时候,不是针对每个人,而是针对预测的目标客户进行精准营销。广告营销者可以借助于网络技术深入洞察消费者的兴趣和需求,把营销信息制作成消费者“想要的信息”,借助现代化信息技术精确地传递给目标消费,主动提供给目标所需的相关广告内容。 大数据的在健康医疗中的应用 小米手环、智能手机的各种运动健康APP等各类可穿戴设备的出现,使得运动情况、血压、心率、体重,血糖,心电图(EKG)等数据能实时被获取,信息的获取和分析的速度已经从原来的按“天”计算,发展到了按“小时”,按“秒”计算。大量的数据分析能够使得疾病能在早期被监测到,从而使治疗更容易和有效。通过对特定个体或人群的健康管理,快速有效地监测保健诈骗。基于大量的历史数据,预测和估计特定疾病或人群的某些未来趋势。 大数据的未来 未来的大数据除了将更好的解决社会问题,商业营销问题,科学技术问题,还有一个可预见的趋势是以人为本的大数据方针。比如,医疗机构将实时的监测用户的身体健康状况;教育机构更有针对的制定用户喜欢的教育培训计划;服务行业为用户提供即时健康的符合用户生活习惯的食物和其它服务;相关机构部门能在用户的心理健康出现问题时有效的干预,防范自杀,刑事案件的发生;金融机构能帮助用户进行有效的理财管理,为用户的资金提供更有效的使用建议和规划;道路交通、汽车租赁及运输行业可以为用户提供更合适的出行线路和路途服务安排等等。 大数据时代是信息化社会发展的必然趋势,随着计算机技术的不断发展,大数据对我们生活的影响将更广泛和深入,我们也应该学会利用大数据,帮助我们更好的学习和生活。 本文来源:https://www.wddqw.com/doc/42c0e59f182e453610661ed9ad51f01dc38157f5.html