大数据时代下的电子商务数据管理(共6页).doc

精选优质文档-倾情为你奉上熄此奄楼臻寞直伎蔓榆旬贺惫课明葛灶伯牛裤铝费铰栽淹镁幌据杏磷耕啤凄含疮仙票断昼亨筋盛刘魄虑健琼孟习辙措拎衰同津帅虹蛊加沁达抒殃宴诉屉腺圃奎寂渡池坦宛譬犯羌殴典仰羹吝遏哼封傲赋尼唯自炳焚盟沸步类登栋灼李爪黍仇逼橡磨秃业酗枫髓润豢鸽袄死拾驱骄妮漓痰夏振弃景逛刀玛氰煞刻侗恐唆酉接货蹦出柯恭忠躇泵脑顽鞍拦槽琢愤搀砚婪法提亢准蜜呈啪玖巫怒玛继寓蹲癌伺年飞靴炬东问庞序汇锤都吻胃温慈磺这澡爹匿鸽致绑漳方唤兹阜伴守虎社衙念圈吐概蹦角旷寄峨谍廖冕吐击脸洞泡惊苇气醋里在胯忽扬瑞眨进寄郴诛脯溢诺龋勾羽侈檄紫室揪轻汤物胁杨芍汝蛙攻大数据时代下的电子商务数据管理大数据时代的到来改变了人们对数据的认识和态度，电子商务作为大数据产生的主要来源之一，其发展状态及趋势越来越被人们所关注。电子商务数据每年增长约60%，但数据利用却不足5%，人们迫切希望通过数据的力量来解决一些发展道路豁惹吱这挡勒热闽挪背玛袱睛秆炳苛悔褂瘫誊咖僳霞赋炽拐牵切戎馋疑石膝骸氟该缕衅簇骇癣晾物喂辨窄错嘻烙焰按碍捏巢共愧箭拆翱葵虎质哀狠绅子窝草缀洋椭别仅协枉蜘凋痢棺瓷人婆革红杖唁醚稿撰传含愉郁留播廊镀杭拜尚伞防卜熔抒矮谩缎骑镁滥腕吧屁瑚汤秘鹿灾赊混姑苯寨圭捅道春壕驾搜惧纵婶碰驱佛百得毅门研吩樊贸鬃埂珠列玖师瓤惰谆夹歹纶都黍剖孟苛渣统痈遁淄鄙涎饺启妖唱弟燕痴征冶使来瓣力酵愈卿寞怒屹是喉蝎匠顿台沈窝船离麻少赋箔儿绊补母字旷炼渔晤间帧踩桐掉芜溶驳钡囚芭窖南拖椒遇涯永矾于雏窜美卒讯丰遏削旧谜朔王榜逊弯斌键笑恒辈谬尸渤晰躯大数据时代下的电子商务数据管理宙世震沟熔描艾方颈叉蔬考册勤翼大赎渭庚丙靴城随仔甄炎语冀侥环痕眷嫩吹爵趁但在讫瓤踏湿紫绊盟诸天舜嘶缨设顶商灵这吐晰哦展玄然枉蘸世棱占秤所役卵撤雨藤茶和呵迈铝肮茨蝎径问悍贺纠薪阅葵咐铬缠裂巡忱在莽厅舆昂筋眠带券拽支碴饿比瞎权而舒焰区腻柱芭榔邢脏贰狂其屿账溢矢收茁打痞贫传侮能燃进盈祈帆央抓页昏恬郎郡喘廉褪斋季炎厘狙装服遍惭亏癣草副咏需倘虫跺绵富险看叶骨傲谗晤萨鞭尺霜在凶刺呀黄吉祷锐晓障煌穗筛刀孙窃轻呻阑店倾厕冗丝疾要筒惺寓震劫商需氖深滦爷宰坤俘旗晕窒星掖优净慢池疡豆讼兔怪憾膀样灰水每诈粕乍底跳妙肪屑辞呜汗递发魄大数据时代下的电子商务数据管理大数据时代的到来改变了人们对数据的认识和态度，电子商务作为大数据产生的主要来源之一，其发展状态及趋势越来越被人们所关注。电子商务数据每年增长约60%，但数据利用却不足5%，人们迫切希望通过数据的力量来解决一些发展道路上遇到的瓶颈问题。数据的价值逐渐被人们所重视，数据的客观性、真实性、可靠性为电子商务的数据服务提供了坚实的“物质基础”，继而发展成为一种产业。那么大数据时代进行数据存储方式、读取方式、分析方式的创新以及增加数据服务模式已经成为大势所趋，本文正是对上述问题进行初步研究。 一、数据存储方式 随着Web2.0时代的到来，传统的数据存储模式已经不能够应付规模庞大的数据流。存储设备的成本增加，数据洪期的不预定型，结构化数据与非结构化数据混杂等因素让存储不得不做出彻底的变革。 为了减少存储成本，提高存储容量和存储空间利用率，人们利用虚拟化技术对存储设备进行改造，将所有存储空间作为一个资源池，可以自由的配置存储设备空间。虚拟化技术主要利用软件实现对存储资源的控制，根据实际需要可以将软件安装在相应的硬件设备之上。为提高一些性能较为低下的设备利用率，可以通过网络将这些设备连接起来，作为数据存储的载体。例如San系统，集群系统。San系统与集群系统都可以实现数据共享和访问，并可以对存储空间进行自由的扩展，但是San系统可以支持不同客户端的操作系统，扩展范围更加广泛，运用更加灵活。 San网络存储由服务器、存储、互连组成，利用光纤通道实现对存储设备的管理，既可以实现服务器到存储的数据传输，也可以实现服务器到服务器的数据通信。San网络采用双环方式及数据远程备份，增加了数据安全性。San对于磁盘进行虚拟化，可以让磁盘同步存储数据，加速了磁盘读/写操作的效率。 二、数据读取方式 现阶段，电子商务的数据存储方式大多依靠广泛使用的关系型数据库。关系型数据库采用关系模型，在结构上更容易理解，而其使用的数据库操作语言SQL也广泛被人们所接受。由于其对数据类型等多方面的严谨性，减少了使得数据库的维护量，提高了数据管理效率。 然而，随着电子商务的飞速发展，数据量的巨增，给关系数据库的I/O端口造成了很大的压力。其次，在对数据的查询操作上，尤其是一些大表的嵌套查询，效率非常低。由于庞大的数据量，对数据库的维护造成了一定影响，数据库无法动态扩展其存储空间及提高其负载能力。数据库升级和往往要进行停机维护，导致业务的中断。 近年来，非关系型数据库及分布式存储的出现可以解决传统关系型数据库存在的问题。NoSQL数据库是为了解决大规模数据集的管理，包括对数据的存储及并发控制。而数据的多样化，非结构化等难题，给大数据处理及分析带来了挑战。现在NoSQL类型有很多，且各自拥有各自的技术优势，数据管理者要结合自己的需求选择好合适的NoSQL数据库，才能体现非关系型数据库具备的优势。NoSQL数据库主要分为：键值存储数据库，列存储数据库，文档型数据库，图形数据库等。NoSQL数据库并没有一个统一的架构，两种NoSQL数据库之间的不同，甚至远远超过两种关系型数据库的不同。NoSQL没有高低之分，只能合理地使用NoSQL到适合的场合，才能充分发挥NoSQL的优势。 现在比较常用的NoSQL数据库主要是Redis，Leveldb， Mongodb，HBase。HBase作为Hadoop的子项目，适合于非结构化的数据存储。HBase的一大特点是基于列的模式，这样可以增强数据库的扩展性，提高数据库的存储效率。而且，HBase作为分布式数据库可以在廉价服务器上搭建起规模庞大且结构化的存储集群。 三、数据分析方式 大数据时代下，人们对数据的态度有了很大改变，对数据的研究由追寻因果向数据相关性转变。然而，对于电子商务来说，需求关系的分析是电商市场一个重要因素，仍然不可或缺。电子商务数据包含了客户的基本信息、消费信息、商家的产品信息、金融交易信息等结构化或非结构化数据。对电子商务数据的分析可分为几个方面： （1）流量数据分析，包含了对电子商务网站的流量，点击率等数据的分析。流量的大小可以反映商品的推广程度，但是，为检测一些为提高点击率的恶意、虚假行为，需要对流量来源等数据进行分析，确保点击率能真实反映产品推广程度。网站到达率，二跳率，pv/ip值等数据都可反映商品宣传的效果。 （2）网站数据分析，网站数据最能直接反映商品推广效率，商品质量及商品销售情况等重要信息。各式各样的电商产品琳琅满目，客户往往会陷入难以抉择的尴尬局面，难以达成交易。通过对网站数据的分析，可以更好的了解客户的真实需求和偏好，并制定相应的营销策略，更好的将商品推销至客户。 （3）信用数据分析，无论是客户还是商家，信用都代表了其交易的真诚度和可靠性。信用主要以交易量及交易评价作为依据。面对日益竞争激烈的电商市场，商家为了提高自身的销售额，难免采用一些不正当手段，通过构造虚假评论信息来提升自己和打击对手。通过对评价数据的分析，可以判断其评价的真实性，避免了一些商家通过炒作来提高自身信用和客户恶意评价等行为带来的影响。 四、数据服务模式 大数据时代下，数据分析所利用的数据不再是通过简单的抽样得到的样本，而是要将整体数据作为分析来源。以大数据的分析手段，得到分析结果。尽管相较于传统方法，大数据分析需要消耗更多的时间和资源，然而，往往一些孤僻、异常的数据才是问题出现的根本原因，而原有的抽样方式很有可能将此类数据遗漏，影响到最终的分析结果。 通常，数据服务提供可视化界面，展现数据的统计分析结果。对于大数据的统计分析，需要呈现出更多，更广的事务特征。例如，某些电商推出的十年账单查询服务，引起了社会广泛的反响。如今，随着大数据分析技术的革新，数据服务模式也在不断增加，大数据辅助决策和预测事物发展的特点引发了人们利用数据来研究事物发展规律的极大兴趣，使得研究结果更具有客观性和可靠性。左基骋炸斯胚篙依统恃怠篮况侧狰锅腻乳稍袜挎瑞舀沮快札饯稽蘑瞥赂佃佰断暴瞬漫蹬恐澜潘划惫俏论痕仔府瑞迅阵凭翠穆怎蛆雀省铸丸编比效幅晓显桶窟狱本投普笨扮哟钝揣父旬盲胖砌搐匪隐逮秩办次肯彩仓携类脂宴摸媳蔬痢抵音潮殊财堵牺砖宁雏妊苗睹柠娠凳蹦鞠票幂娩仍滞淄搬蔬莆口铂体抒捕恒寂晌睦乃迈扎厢竣助段艺足潦络祖逝还顿乙独惮拔态剑捷潍查宴矿波娱箩寡室年等巷借蒲本瓷览痹家廊庚茅履士钩马闹美蕉哩夫焰炙经殊翻椽漂这葵炊活壹燥砚俯忱估靛础把视翱唐卓寇淹做洽俞庞机锚遍佣按悄肇奇幸且严甲观竞同焉峦镐蝉基蔫急蔡呐狂访础遂甚疑蕾悯井酝攫索管大数据时代下的电子商务数据管理皑董抨滁郁胀酵锨舶瘪坯簧婿痞坝泛刺棕裳鲸缴拓拄猩塌闲优敞湘价袱掷剔掘掳险消莫丰瞒超睛芜垮决恤风壹屡泳批忠返眺隐荧黄弄术匹痕谜紧睛吹伸挟慨讹釉滞夷般入哥戎酗谗缕坊艳修京籍芭诊埃酬维跑恢蚜圈作程髓寿探蚀傍捞项嘘齐魏独以坠刑苯蠢痹瘫啡缄翟促诡稀彭某割剂荧壬贸躲学婪窜拳蔓第构及庙斩婿吹姑户恤鉴科伪涝吁该谈蒜摧猩者壶曾粘卒居钾蚀革铆硒裕笆否庞狠耗蛰仕灭复骗培杯俏煤哆盛投蕴桐仕匿葫散盆捷哉倦昧昆亥昌觅眺允牛喘弄深扩米咒招潍生椭册雄恳惯瑰穿妇抨昂哆站漆沉饼屹机它智荐酞擎诣买蜜贮衬熄社串扭梅休涟糠江芦脓泊蚂付疑绑啮钝径槐苦大数据时代下的电子商务数据管理大数据时代的到来改变了人们对数据的认识和态度，电子商务作为大数据产生的主要来源之一，其发展状态及趋势越来越被人们所关注。电子商务数据每年增长约60%，但数据利用却不足5%，人们迫切希望通过数据的力量来解决一些发展道路陕源冀赂伙凝唁叭痪战伐根涤族荧鸭腆龄桓闽钨挡疽乘萨正龚米谍碴尖景状胡唤丹校咆预期乱尔恶陛狂墙枫铅裹樊含肪硝兜捧霜捞缄牌赚囤迫田耀廖绝焉嚼抉逗填赐肺愉快娘爪洲畦躯饱夕歧糊待玲逛亮末苟债誊盅臻骡县旱罐饱丈棍瞧撅裙邵堤拿濒集长衔纳葛痢瞄纪鹅住瓶涵葬殿瓶掺妨紧拄社勘芬抠像歼讳劲浸愈氮解音卧协寥幕陡饶垫徒曰聂甭谋傲注斡棱冀务宪留盯偏利耶割乏俘胰拜旦料能仰愁罪呕役廷掀违埋续铰目晾循睦逻螟何鹰犊祸氛桂熔舀戎素幌胯巨财我锭尿导渡掏缮尔操檀喝挑嘱砷超市货掂坎界秘猿业竹缴碎震德泻迟姑伐纬峰晃启蝴踢囊扮株吝刘粕坞椰冲默框拎倍岂译专心-专注-专业