传统企业创建云计算和大数据分析平台心得.docx

《传统企业创建云计算和大数据分析平台心得.docx》由会员分享，可在线阅读，更多相关《传统企业创建云计算和大数据分析平台心得.docx（6页珍藏版）》请在三一办公上搜索。

1、企业创建云计算和大数据分析平台心得桑德集团互联网创新中心总经理赵斌1. 云平台的相关术语学习篇幅所限，建议小伙伴们百度以下术语，补充相关云计算的知识: 云计算，云平台，共有云，私有云，混合云，IAAS,PAAS,SAAS,IOT,M2M大数据，分布式存储/计算，虚拟化，负载均衡CDN, openstack,hadoop,mapreduce,spark,hive,BGpRedis,DDOS,DockerSoftWSJt- A S-CiVICd I 手伴即服务 IPlatfomi as a Service （平白即服务）3iifrastnelurrMflSerice （基褊设施即服券，笆呢支将Ae

2、u-uqd EC2辑却的a化| J-ycur | 近艾IBM Blw CloudCto UCS分布武布储粪条型数姑42. IDC机房托管和云平台的对比，云的价值在哪里？从现有资源分布分析，目前，以北京地区为例，是以传统的IDC机房为主。预计2015年， 仅北京地区现有8.65万个机柜的存量，将趋于饱和。接下来，新建的云计算数据中心，随 着落地时间的临近，将会吸引更多的企业入住。1DC 亘买同吸幌由心IT敏虾瞄裂/由-2- s*典3ES卷再隔如安安食忖膈潞、鳄女料一端以耳为去骨硬,建潮胳洼瞄察号片收蔓取虽1明玲咬黄:匏一点浦或我占粮疆度更瑁睡普内密事.可色.分号暗强同脚U&.学窒或主我日肥折出宣

3、吴里夏主彰i呈晚g次电.遂晶发塑启止看球瓦础驰置W现用化、底潍息皑卸土院行命箜出4 做，以建业建设离王未来2-3年分析，云计算数据中心的发展势头更猛，百度、腾讯、阿里，以及中国电信，都 有已建在建和筹建规划。一段时间内，云计算中心和IDC将并存；在5年之内，云计算中心 每年将以50%的增速在发展1）弹性的IT架构传统IT模式的短板：无法快速响应快速增长德用户需求，初期投入的成本如果不是太低就 是太高了。云平台提供按需租用的模式，有多少需求量，就自动匹配多少计算资源，比如1个新上线的 视频直播app，前期只有几百个用户，开1台服务器都嫌多，突然某天请来1个明星直播，有 可能出现几十万上百万用户在

4、线，云平台就自动延展到500台服务器帮你容纳这些用户的请 求，当然你要付出的费用也随之增长。如果过段时间用户量下去了，云计算服务就关闭到空 闲的服务器，付出的租金就少了。2）降低成本降低成本3方面：启动成本降低：按需启动，不让资源闲置和浪费运营成本降低：机房维护人力成本，机器折旧成本开发成本降低：paas平台提供很多api接口二次开发3）可靠性和安全性云平台的安全性需要辨证来看，大部分能叫的上名的公有云提供上的服务可靠性和安全性理 论上都比绝大多数自建的机房要高。比如微软的azure云，建在T4级别的机房，满足包括 大部分的安全标准。防火墙，传输加密等方面可能都不需要我们考虑。不过另一方面来讲

5、，很多企业担心数据放到公有云上会存在泄密的风险也不是没有道理，虽 然大部分的云平台都承诺对企业客户的数据保密，但世界上没有绝对的数据安全（想想美国 斯诺登的案例），尤其是在你们企业的核心业务和这些提供云平台服务的供应商之间存在某 种竞争关系的情况下，因此现在很多企业都采用混合云的搭建方式，核心数据资产放到私有 云中，非核心大众业务数据放到公有云平台上。3. 目前市场上主流的云平台微软Azure云:公有云+混合云服务，提供IAAS， PAAS层服务，国内和世纪互联合作 亚马逊云AWS:国外最大的云服务平台，还没有进入国内IBM：只提供私有云的搭建，国内和世纪互联合作阿里云：国内目前市场占有率最高

6、，主要提供IAAS层服务，也在向PAAS层扩展，收购了之 前的万网IDC华为云：华为新推出的企业云服务，提供IAAS，PAAS层服务海尔U+：提供传统硬件设备的上网服务，主要是paas层机智云：提供传统硬件设备的上网服务，主要是paas层其他还有很多提供云服务的IT企业，比如百度云，腾讯云，乐视云，金山云等，大家都是 把自己数据中心的闲置资源共享出来，提供公有云的计算，存储等服务。4. IAAS，PAAS，SAAS，企业是自己开发还是购买第三方服务？理论上IAAS，PAAS，SAAS层的所有服务功能，企业都可以自己开发，但研发周期，人力成 本，硬件采购成本会比较高，做个比喻，第三方开发商来修建

7、公路和购物中心（IAAS层）， 第三方服务上提供购物中心的电力，燃气，水，上网服务PAAS层），各个商户来租用这些 购物商铺和基础服务，并在基础上开发自己的商铺功能，比如购物，休闲等（SAAS），一家 企业没有必要从头到尾所有事情都自己搞定。中小企业，创业团队-直接租用公有云平台即可，在上面开发自己的SAAS应用大型传统企业，在某一行业领域有自己的核心数据资产-可以考虑自建IAAS,PAAS，形成自 己的数据中心，SAAS层应用可以委托第三方外包公司开发5. 企业如何搭建自己的大数据分析平台？大数据，一个在各种场合快被说滥的技术名字，每个人都在谈论大数据，但很少有人把大数 据在具体行业的详细应

8、用场景能够阐述清楚。大数据这个词最先是被淘宝，阿里这种电商平台炒作起来的，过去人们更多提到数据挖掘， 数据分析，互联网公司想通过人们在各种电商平台，社交网络上的各种浏览，购物，支付， 聊天等行为，为用户进行画像，贴标签（最多可以贴上千个标签），为随后的广告精准推送， 互联网金融征信，消费行为预测等服务提供数据支持。传统的BAT互联网企业搞大数据分析有天然优势，因为他们离用户最近，掌握着大部分网友 每天的上网活动行为，比如QQ,微信。这些不是传统企业的优势所在。互联网优先改造价值传递领域（媒体-零售-物流等），随后物联网还会改造价值创造领域 （制造业，环保，建筑等），个人感觉目前还没有被互联网改

9、造和大规模渗透的一些垂直领 域是未来大数据分析市场的蓝海，比如环境数据的分析，制造企业的数据分析等一个企业要想在提前最好大数据领域的战略布局，个人认为需要分析自身优势，以及在大数 据产业链所处环节：数据采集（各种传感器，企业已有系统数据（ERP，OA，CRM.）-数据存储处理（Hadoop/spark） -数据分析（各种通用分析模型和各行业自己开发分析模型）-数据展现（各种BI工具，比 如 IBM cognos, tableau 等）。大部分的企业只需要把数据采集和存储环节的工作最好就可以了，形成自己的核心数据资产。 至于数据分析和数据展现环节，如果预算充裕，就购买第三方的商业工具，如果自身具

10、备一 定的研发实力，也可以基于开源框架自己开发。数据分析的关键一个是数据要全面丰富，多 维度，实时，更重要的是分析目标和分析算法模型，这些需要一些行业专家的知识库积累， 而不是一些开源的数据处理和分析工具能够做到的。6. 如何构建有生命力的云平台？何为优秀的云平台，我总结以下几方面：连接一连接尽可能多的硬件终端，app应用，企业系统和人，连接的事物越多，平台的价值越大服务-光连接还不够，关键能为企业内部和外部用户提供哪些具体的软硬件配套服务开放-互联网历史证明，越是开放的平台生命周期越长，API开放，协议开放，数据开放，软件服务开放安全-未来数据资产是企业的核心资产，安全措施必须到位生态-好的

11、云平台是1个有机体，生态系统，而不是机械体，能够自我繁殖，自我优化，自 我复制智能分析-能够进行真正的智能分析，科学预测，而不是简单的报表统计和伪智能7. 未来云平台的发展趋势趋势1： 3-5年内，提供公有云服务的平台竞争日趋激烈，最终被几家大公司垄断，有实力 的大型传统企业都会建议自己的私有云平台和数据中心，或者混合云模式，传统单纯IDC机 房服务器托管的市场会逐渐萎缩趋势2： 5-10年，云平台提供的服务日趋丰富，更加智能，随着机器学习，人工智能领域技术的不断进步，以及各行业云平台算法模型，数据米集积累到一定程度，以及最终形成真正 意义上的智能分析云平台，为各行业企业提供数据分析，趋势预测

12、，科学规划管理等服务趋势3：不远的将来，真正意义上的物联网大数据时代来临，就像科幻电影里演的一样，机 器终端或者云平台的智力超过的人脑，不断淘汰旧的工作岗位，产生新的工作机会，云计算 无处不在，现实世界和虚拟世界，人和机器完美融合。8. 环卫云平台案例分享http:/yun.eguard-桑德环卫基于对传统环卫模式问题的清晰认识，以“互联网+环卫”的理念，积极拓展环卫事业向“一人一 车智能化模式”发展。桑德环卫相关研发人员介绍，桑德环卫云平台是基于物联网、大数据，面向环卫领域的一个综合性平台， 主要具备以下功能：首先，依托桑德环卫云平台，公司开启了五大业务板块，包括：物流、回收、广告、交易、运

13、营。桑德环 卫云平台可规划环卫工人、巡查人员、车辆的作业线路和作业时间，以此来实时监管环卫人员和车辆；桑 德环卫云回收业务可实现对回收订单和区域的规划，对回收订单以及库存的管理提供成本分析、盈利预测、 智能决策等功能；桑德环卫云广告业务管理平台能够实现对环卫车辆、公厕、环卫工人服装、垃圾亭、环 卫垃圾桶广告的管理、投放和分析统计，能够很好地为众多商家、公司共同拓展利润空间；基于环卫工作 的智能化、互联网化、机械化，环卫人员还可以完成快递的上门收取工作，形成覆盖城乡“最后一公里” 的物流网络，将成为桑德环卫的最大优势。其次，桑德环卫云利用物联网、移动互联网、云计算等相关技术，可连接环卫工作所涉及

14、的各类环卫设备、 环卫作业人员、数字城管系统等，实现对环卫设备、环卫管理人员全过程的实时监管以及数据共享，形成 一个信息互联互通的物联网络。最后，桑德环卫云是一个开放的生态系统，不仅服务于桑德内部项目公司，也可为第三方公司及大众用户 提供相应服务。用户可通过手机APP及微信完成上门回收和快递预约，还可通过微信对周边发生的环卫事 件进行上报，同时亦可为第三方公司提供广告及物流等服务。所以，桑德环卫“不只是清洁，更是从未体验过的行业标准；不只是效率，更是高度精细化的作业升级； 不只是智能，更是平台管控，万物互联的产业变革。”环卫车篇环卫人员 皆能化9. 桑德集团简介桑德集团有限公司是中国著名的大型

15、专业性环保、新能源企业。业务覆盖水务、固废处理、环卫、再生资 源、新能源、生态农业等领域。在水务、固废领域拥有集投资、研发、咨询、设计、设备制造、建设、运 营于一体的完整产业链。拥有国内规模最大的企业设计研发团队，近两百项专利技术，业内规模最大之一 的设备制造厂，规模最大的EPC队伍。可以为各地政府、企业、乡镇、农村提供个性化、一体化的水务、 固废及新能源解决方案。是中国环境领域技术水平最高、综合实力最强的企业之一。拥有20年环境领域 实践经验。集团下辖桑德环境（SZ000826）、桑德国际（HK00967）、湖南桑顿新能源等企业。在中国投资 建设、运营自来水、污水处理、城市生活垃圾处理厂、餐厨垃圾处理厂、工业废弃物处理厂等超过100个， 运营和在建的乡镇污水处理厂超过200个，第三方专业化运营的环境设施超过30个。承担国内外各种环境 系统建设项目超过800个。在湖南湘潭九华工业园建有国内规模最大、从锂离子材料到锂离子电池到机电 一体化产品完整链条的现代化新能源基地。桑德集团有限公司是国家重点骨干环保企业，国家重大专项研 究课题的承担企业，全联环境商会会长单位，中国环保机械协会副会长单位。桑德始终引领中国环保产业 发展方向，是中国环保企业代表和民营环保企业代言人和标杆，在中国环境市场具有独特地位。