你好,游客 登录 注册 发布搜索
rss订阅 手机访问 
云计算技术
手把手教你搭建5节点Hadoop分布式集群(HA)
本文章我们使用hadoop2.6.0版本配置Hadoop集群,同时配置NameNode+HA、ResourceManager+HA,并使用zookeeper来管理Hadoop集群。
日期:11/16/2016 12:29:35 作者: 点击:159
技术揭秘阿里云人工智能ET魔术秀
这可能是人工智能史上第一次上演如此成功的科技魔幻show。
日期:11/11/2016 11:16:45 作者: 点击:73
数据倾斜是多么痛?spark作业调优秘籍
有的时候,我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜,此时Spark作业的性能会比期望差很多。数据倾斜调优,就是使用各种技术方案解决不同类型的数据倾斜问题,以保证Spark作业的性能。
日期:11/10/2016 14:09:23 作者: 点击:80
使用阿里云开放搜索服务快速搭建资源搜索网站
大家好,我又来了,答应云栖论坛一周一篇文章, 由于工作太忙已中断1个多月实在抱歉,这一次写点轻松有趣的东西-快速的做个资源搜索站
日期:11/09/2016 14:12:54 作者:张柔 点击:77
如何设计公司内部的数据平台
何为数据产品?从广义上讲,一切以数据作为驱动或者核心的都叫数据产品(例如数据报表平台、DMP、搜索与精准化产品、风控产品等等),从狭义上讲,就是公司的内部数据平台。今天和大家讨论的,主要是关于公司的内部数据平台的搭建。
日期:11/08/2016 14:09:13 作者:英宝 点击:74
用数据分析福尔摩斯探案集
柯南·道尔一百多年前创造的大侦探福尔摩斯形象经久不衰。日前,英国《卫报》的两位作者亚当·弗罗斯特和吉姆·金文深入原作文本,用数据可视化的方法呈现了这个经典系列的60个故事中诸多不为人知的细节。
日期:11/07/2016 19:41:49 作者: 点击:94
厉害了云计算, 未来世界还有什么不能被计算?
看了《在线》一书,能感受到王坚博士在早期的困惑与纠结。让心理学出身的他去理解为工科男所津津乐道的大数据、云计算与万物互联,这是一个异常痛苦的过程。但也正是因为跨界的思考,让他对这些科技概念有了全新的理解,从而能够站到新的角度,将社会、人性、资源与大数据、云计算相融合,进而构思出了一个全新的“在线”世界,一个以互联网为基础设施、以数...
日期:11/03/2016 15:04:13 作者:王吉伟 点击:86
双11技术攻略:企业云架构的正确姿势
马上双11了,其实双11不仅是天猫的双11,在这个大生态链中,很多应用场景的流量都会增加,很多企业都担心在巨大的流量下能否安然度过。而放眼望去,这种大流量的场景更是比比皆是,流量陡增,资源需求要灵活扩展,单节点,怎样的姿势才是最佳的云计算姿势?
日期:11/02/2016 21:50:33 作者: 点击:94
基于 SaaS 和交易系统的 SEM 生态系统
编者按:PointNineCapital 是一家风险投资公司,专注于SaaS(软件即服务)和交易平台。公司不仅见证了SEM(SaaS enabled marketplace,SaaS 推动的交易平台)模式的兴起,而且也对以SEM为基础的个别公司进行了投资,比如Docplanner、Eversports等。在投资过程中,他们对不同行业和不同垂直市场的众多以SEM模式为基础的初创公司进行了深入分析,并分享了对 SEM 模式的理解。
日期:10/27/2016 14:16:53 作者: 点击:102
训练神经网络的五大算法
神经网络模型的每一类学习过程通常被归纳为一种训练算法。训练的算法有很多,它们的特点和性能各不相同。
日期:10/24/2016 15:04:47 作者:何永灿 点击:204
企业级Docker镜像仓库的管理和运维
作者介绍:张海宁,VMware中国研发中心云原生应用首席架构师,Harbor企业级容器Registry开源项目负责人,Cloud Foundry中国社区最早的技术布道师之一。目前着重关注云原生应用的研发工作,内容包括Container、PaaS、IaaS等方面。
日期:10/21/2016 12:35:20 作者: 点击:216
仅用8个虚拟机,PayPal是如何扩展至日处理数十亿事务的
仅在8台虚拟机上,就实现了原本需要100台虚拟机才能实现的工作。甚至当CPU占用高达90%时仍能快速响应,这种Paypal前所未见的事务处理密度,却仅需之前十分之一的时间。在降低成本的同时,还考虑到了无需增加相应的计算基础架构就能获得企业成长——Paypal日处理数十亿事务的系统是如何打造出来的?
日期:10/18/2016 14:14:29 作者: 点击:229
Mesos和Cassandra实现跨多个数据中心每秒100万的写入速度
每隔三十秒就会有位置数据返回,包括来自于司机和乘客应用的各类数据,需要实时使用的实时数据非常之多,那么Uber是如何存储这些位置数据的呢?
日期:10/17/2016 12:41:05 作者: 点击:346
杭州发布“城市大脑” 云计算如何助力城市管理
在今年的云栖大会中,杭州市政府宣布推出“城市大脑”智慧城市建设计划,将首先把城市的交通、能源、供水等基础设施全部数据化,连接城市各个单元的数据资源,打通“神经网络”,并连通“城市大脑”的超大规模计算平台、数据采集系统、数据交换中心、开放算法平台、数据应用平台等五大系统进行运转,对整个城市进行全局实时分析,自动调配公...
日期:10/16/2016 18:57:46 作者: 点击:318
6个用于大数据处理分析的最好工具
  大数据是一个含义广泛的术语,是指数据集,如此庞大而复杂的,他们需要专门设计的硬件和软件工具进行处理。该数据集通常是万亿或EB的大小。这些数据集收集自各种各样的来源:传感器,气候信息,公开的信息,如杂志,报纸,文章。大数据产生的其他例子包括购买交易记录,网络日志,病历,军事监控,视频和图像档案,及大型电子商务。
日期:10/14/2016 14:26:40 作者: 点击:337