Browsed by
分类:云计算

OpenStack在小米私有云平台的实践

OpenStack在小米私有云平台的实践

小米OpenStack项目概况 小米目前内部建设的是高可用的私有云平台,为全公司提供统一的云服务平台。提供弹性的资源分配和部署方式,同时提高资源的分配和管理效率。减少服务资源的交付周期。为此小米定了四大目标: 稳定第一:支撑公司多条产品线业务,力求稳定 性能优化:尽快可能的降低虚拟机的资源消耗,保证虚拟机的

连线硅谷 | 美国的公司这样从大数据里挖商机

连线硅谷 | 美国的公司这样从大数据里挖商机

原文  http://newshtml.iheima.com/2015/0129/149024.html i黑马:“大数据”,已经成为当下出现频率最高的词之一,究竟什么是大数据?它有什么商机?硅谷在线教育公司 Coursera 数据工程师董飞为你详细解答:当我们在谈论大数据时,我们在谈什么?本文为董飞近日于硅谷创业协会所做的《大数据入门》的讲座笔记。 大

深入探究递归神经网络:大牛级的训练和优化如何修成?

深入探究递归神经网络:大牛级的训练和优化如何修成?

在深度学习领域,传统的前馈神经网络(feed-forward neural net,简称FNN)具有出色的表现,取得了许多成功,它曾在许多不同的任务上——包括手写数字识别和目标分类上创造了记录。甚至到了今天,FNN在解决分类任务上始终都比其他方法要略胜一筹。 尽管如此,大多数专家还是会达成共识:FNN可以实现的功能仍然相当有限。

大数据将为航企提供更多客户个性化信息

大数据将为航企提供更多客户个性化信息

从机票到酒店,再到租车和火车票,所有预订都会留下数据追踪,而智能手机的广泛应用以及WiFi的普及带来了如雪崩一般的大量数据,包括在线点评、社交媒体“check-in”以及网站追踪等。 此外,由于技术视野越来越开阔,旅行者的需求和期待也越来越多。随着分析能力和旅游相关技术的持续提升,我们拥有绝佳的机会来提升旅行

IBM发布最新“智慧的酒店”四大解决方案

IBM发布最新“智慧的酒店”四大解决方案

今天,IBM(NYSE:IBM)全球信息科技服务部(Global Technology Service)发布了IBM”智慧的酒店”四个系列解决方案,即机房集中管理、桌面云、自助入住登记和退房、无线入住登记和融合网络。其中,机房集中管理是IBM针对中国酒店不断扩大规模的IT整合外包方案,桌面云是酒店客户终端的虚拟化方案,自助入住登

大数据带来的四种思维

大数据带来的四种思维

近年来大数据技术的快速发展深刻改变了我们的生活、工作和思维方式。大数据研究专家舍恩伯格指出,大数据时代,人们对待数据的思维方式会发生如下三个变化:第一,人们处理的数据从样本数据变成全部数据;第二,由于是全样本数据,人们不得不接受数据的混杂性,而放弃对精确性的追求;第三,人类通过对大数据的处理,放弃

美国大数据工程师面试攻略

美国大数据工程师面试攻略

大家好,我是来自硅谷的董飞,应国内朋友邀请,很高兴给大家交流美国大数据工程师面试攻略。 我的公开课在 www.chinahadoop.cn/course/68 ,已经错过直播的,也可以免费查看录播。 先做一个自我介绍,本科南开后,加入了一个创业公司kuxun,做实时信息检索,后来进入百度基础架构组,搭建了Baidu App Engine的早期版本,

大数据如何更好的驱动商业模式、用户体验和精细化运营?

大数据如何更好的驱动商业模式、用户体验和精细化运营?

原文  http://www.36dsj.com/archives/21939 36大数据专稿,转载请标明出处及作者。 在上文(《互联网思维UFO模型》)我们已经详细阐述了互联网思维UFO模型。本文将研究互联网思维和大数据的关系。互联网思维UFO模型中的U代表User experience,即极致用户体验,其对应的方向是产品设计;F代表Freemium,即免费商业模式

Hadoop 2.0 上深度学习的解决方案

Hadoop 2.0 上深度学习的解决方案

波士顿的 数据科学团队正在利用尖端工具和算法来优化商业活动,且这些商业活动是基于对用户数据中的深刻透析。数据科学大量使用机器算法,可以帮助我们在数据中识别和利用模式。从互联网大规模数据中获取透析是一项具有挑战性的任务,因此,能大规模运行算法是一个至关重要的需求。伴随着数据的爆炸性增长和成千上万的机

Hadoop安全实践

Hadoop安全实践

http://tech.meituan.com/hadoop-security-practice.html 前言 在2014年初,我们将线上使用的 Hadoop 1.0 集群切换到 Hadoop 2.2.0 稳定版, 与此同时部署了 Hadoop 的安全认证。本文主要介绍在 Hadoop 2.2.0 上部署安全认证的方案调研实施以及相应的解决方法。 背景 集群安全措施相对薄弱 最早部署Hadoop集群时并没有考

基于机器学习方法的POI品类推荐算法

基于机器学习方法的POI品类推荐算法

http://tech.meituan.com/category-recommend-base-ml.html 前言 在美团商家数据中心(MDC),有超过100w的已校准审核的POI数据(我们一般将商家标示为POI,POI基础信息包括:门店名称、品类、电话、地址、坐标等)。如何使用这些已校准的POI数据,挖掘出有价值的信息,本文进行了一些尝试:利用机器学习方法,自动标注缺

从机器学习谈起

从机器学习谈起

原文:http://www.cnblogs.com/subconscious/p/4107357.html 在本篇文章中,我将对机器学习做个概要的介绍。本文的目的是能让即便完全不了解机器学习的人也能了解机器学习,并且上手相关的实践。这篇文档也算是EasyPR开发的番外篇,从这里开始,必须对机器学习了解才能进一步介绍EasyPR的内核。当然,本文也面对一般读者

Facebook的数据仓库是如何扩展到300PB的

Facebook的数据仓库是如何扩展到300PB的

Facebook在数据仓库上遇到的存储可扩展性的挑战是独一无二的。我们基于Hive的数据仓库中存储了超过300PB的数据,并且以每日新增600TB的速度增长。去年这个数据仓库所存储的数据量增长了3倍。考虑到这个增长趋势,存储效率问题是我们数据仓库基础设施方面目前乃至将来一段时间内最需要关注的。 在提高数据仓库的存储效率方

做大数据过程中遇到的13个问题

做大数据过程中遇到的13个问题

原文  http://www.36dsj.com/archives/16982 1、最早的数据分析可能就报表 目前很多数据分析后的结果,展示的形式很多,有各种图形以及报表,最早的应该是简单的几条数据,然后搞个web页面,展示一下数据。早期可能数据量也不大,随便搞个数据库,然后SQL搞一下,数据报表就出来了。但是数据量大起来怎么分析呢?数据

40页PPT详解:京东大数据基础构架与创新应用

40页PPT详解:京东大数据基础构架与创新应用

京东大数据平台从无到有,从集中式到分布式,从Oracle数据仓库到JDW2.0,在演变过程中一直在思考的两个问题: 1、如何建设电商特有的复杂业务的数据仓库? 2、如何在保障安全的情况下降低使用数据的成本?从下面的内容中似乎能够看到这些问题的答案。 PPT部分要点: 1、网购女性用户更喜欢选择在上班期间购物,而节假日还

大数据领域的顶级开源工具大集合

大数据领域的顶级开源工具大集合

随着大数据与预测分析的成熟,开源作为底层技术授权解决方案的最大贡献者的优势越来越明显。如今,从小型初创企业到行业巨头,各种规模的供应商都在使用开源来处理大数据和运行预测分析。借助开源与云计算技术,新兴公司甚至在很多方面都可以与大厂商抗衡。 以下是一些大数据方面的顶级开源工具,分为四个领域:数据存储

国外大数据博客资源大全

国外大数据博客资源大全

这个列表包含了几乎所有经常更新的大数据的博客,属于一个广泛的类别:数据科学,数据分析,商业智能,机器学习,数据可视化,数据挖掘,NoSQL,Hadoop的等等。博客是按字母顺序排列。如果我们错过了任何重要的博客,请告诉我们。 1. 451 Caos Theory 2. A Beautiful Www 3. A Blog By Tim Manns 4. A Computer Sci

Bae3.0计费说明

Bae3.0计费说明

Bae3.0计费说明 根据官方说明,bae正式计费之后将按照五大套餐收费: 36.5/年 73/年 255.5/年 474.5/年 具体看官方说明 概述 为了给您提供更加简单可依赖的应用托管服务,防止资源的恶意滥用,百度开放云计划对百度应用引擎BAE3.0正式计费。 计费不以盈利为目的,致力于为开发者长期提供应用托管服务而制定。为了降低开

OpenStack里的三种存储

OpenStack里的三种存储

OpenStack其实有三个与存储相关的组件,这三个组件被人熟知的程度和组件本身出现时间的早晚是相符的,按熟悉程度排列如下: Advertisement Swift——提供对象存储 (Object Storage),在概念上类似于Amazon S3服务,不过swift具有很强的扩展性、冗余和持久性,也兼容S3 API Glance——提供虚机镜像(Image)存储和管理,包

谁在掌管着OpenStack项目

谁在掌管着OpenStack项目

OpenStack是一个拥有众多支持者的大项目,但究竟是谁在管理和修订OpenStack呢?该项目集合了一批最大的云计算技术公司,当然也少不了一批刚刚创办的、很有前途的硅谷公司。     时至今日,OpenStack的官员称,已经有超过180家企业和400多位开发人员对这一项目积极地做着贡献,而其生态系统甚至更为庞大,已经超