大数据科学与应用慕课.docx

大数据科学与应用慕课——个人任务学院：经济学院专业：国际商务姓名：丁一玲学号：20151030180不可小觑的力量——大数据一、与个人专业知识的结合我是经济学院国际商务专业大二的学生。国际商务学是20世纪50年代开始发展起来的一门年轻的综合性、跨专业的边缘学科。它要求学习者掌握西方经济学、国际经济学的理论和方法；国际商事活动的基本知识和基本技能；国际市场营销的本领；并能运用计量、统计、分析方法进行分析和研究；了解国际经济学、国际贸易理论发展的动态；了解主要国家和地区的经济发展情况及其贸易政策和发展动态；了解中国的经济政策和法规发展动态；并能够熟练地掌握商务英语等。这其中的很多专业知识的运用都与大数据密不可分。从理论知识的学习的知识来看，很多经济学理论及模型都是需要数据作为支撑的。由于经济学上的许多理论模型都是由众多经济现象假设出来的。所以，像菲利普斯曲线、总供给-总需求模型、斯威齐模型等的得出，都离不开对数据的归纳分析。然而，所得到的数据的多少，又决定着，研究所得到的经济模型的适用范围。由于分析数据的规模大小、种类多少的不同，造成一些经济模型只能适用于微观，而一些经济模型又仅适用与宏观。现如今，大数据已逐步渗透到经济学的理论和实际已成为不争的事实。比如西方经济学中宏观部分有一个理性预期学派，其中心思想是指针对某个经济现象（例如市场价格）进行预期的时候，如果人们是理性的，那么他们会最大限度的充分利用所得到的信息来作出行动而不会犯系统性的错误，因此，平均地来说，人们的预期应该是准确的。然而，当这个理论运行到实践中，人们为了达到行动而不会犯系统性的错误这一目标，必须借助对所得到的信息准确分析，而这些信息便是经济数据。当你拥有的数据量足够的大，足够的准确时，由这些数据信息分析出来的预期便会更准确。那么，对于现已有的数据流进行抓取、统计、分析就显得至关重要。从另一个方向来看，现在许多大企业都在运用大数据进行市场估计以及行情预测，可见在21世纪的金融市场上，大数据显得尤为重要。尤其是在股市、证券市场上。一直以来都有“理财有风险，投资需谨慎”，然而大数据时代的到来却新增了一条“数据抓得准，理财走得稳”，大数据，成为金融、证券行业规避风险的最好的利器。随着互联网时代的不断发展，未来国家之间的贸易通过电商平台来实现的可能性越来越大，“互联网+”的思想也符合国家的经济发展的方向，加上国家现行的供给侧改革。把大数据与电子商务结合起来，已成为一大趋势，所以掌握大数据应用这门技术对于我未来的工作而言也是一种助力。电子商务近几年不断发展，学者们对于电商的研究也是在不断的深入。在对外贸易中，跨国公司对于电子商务的重视度也在不断提升。如果未来想在跨国公司有一份属于自己的立足之地，必须要运用好大数据。现在许多电商平台每月甚至每天的交易量都是巨大的。而这些交易所产生的信息便是一个又一个的数据流，通过对于这些数据流的抓取整合分析，便可以对每一个消费者有针对性得提出网上营销策略。通过大数据，可以了解到消费者喜好、关注点、生活规律，甚至可以分析估计出消费者的经济状况。这样，对于一个公司的战略决策无疑是有帮助的。大数据可以让市场细分发挥极致。对于一家跨国公司，大数据除了营销方面的助力，对于跨国公司关于海外市场的侵入也是很有帮助的。在国际运营中，有很多进入战略和所有权结构可供选择，最常见的进入方式包括独资子公司、兼并和收购、联盟和合资企业、许可证经营、特许经营和进出口等。其中，最为捷径的道路是进出口，但进出口策略在本质上是过渡性质的，如果公司想继续进行国际业务，必须更积极地进行投资。剩下的常用途径独资子公司、兼并和收购、联盟和合资企业等，有需要精确的市场分析或对于合作及对象公司的发展现状的准确评估。这便会产生大量的数据流。市场上，你的公司所涉及的行业的竞争对手的数据分析；消费者消费水平以及消费意愿的数据分析；生产、运输、销售在本国及海外子公司的成本对比，以及销售情况的准确估值，从而计算出在母公司和子公司的利润，预判市场的优劣等。这些都是大数据的应用空间。二、大数据的常用数据结构随着互联网的兴起，越来越多的内容被放到互联网中，从而导致海量数据处理受到更多人的重视，尤其是在百度、腾讯等这些涉及海量数据的公司。海量数据处理的一些常用数据结构，包括哈希、bitmap、Bloom filter、堆、mapreduce、trie树等。（1）哈希 哈希，通过哈希函数将关键字与存储位置建立一个对应关系，这样在查找关键字的过程中就没比较进行一个一个比较，而直接定位关键字所在的位置，是一种以空间换取时间的方式。由于所映射的地址空间有限及哈希函数的设置，就是产生冲突，需要建立处理冲突的方法。在一般情况下，冲突只能尽可能的减少，而不能完全避免。那么什么是一个好的哈希呢？通俗点说，好的哈希也许就是