华为服务器助力全球最大私有Hadoop集群发力大数据
客户背景
全球科技公司Criteo成立于2005年,通过在全球范围内进行个性化宣传,为广告客户带来更多的销售。通过自行研发的预测算法,Criteo能够在正确的时间向正确的用户提供关于正确产品的广告。通过测量点击后销售的回报率,Criteo使投资回报率变得透明和易于测量。这是一项由近17万台服务器支持起来的数据密集型业务。
Criteo网络的运营核心,是世界上***的私有Hadoop平台。这个开源软件框架负责存储“大数据”,在商用硬件集群上运行应用程序,支持所有类型数据的海量存储,具有强大的处理能力,理论上可以处理几乎***数量的并发任务和作业。在Criteo,该平台每天处理的工作多达85,000项。
业务挑战
随着在线零售业的不断普及,Criteo解决方案的需求量大幅增长。处理数据的也不断增加。2015年1月,Criteo开始考虑构建一个新的Hadoop集群。 Criteo基础设施业务工程总监Matthieu Blumberg解释说:
“我们通过大数据发现,当我们拥有的数据越多时,想要的也就越多,需要的也就越多。对我们来说,这意味着我们现有的Hadoop集群,相对于现有的需求来说,已经太小了,所以我们决定建立一个新的。这使得我们有机会挑战整个基础架构堆栈领域,并了解其他硬件供应商。”
解决方案
Criteo将请求提案(RFP)发送给六家公司,其中包括了华为和Criteo目前的供应商。根据这些公司的回复情况,Criteo选择了三个候选解决方案进入名单。华为就是在这个时候开始引起Criteo注意的。Matthieu Blumberg继续说道。
“华为对RFP的回应令我们印象深刻。华为显然事先做了足够的功课,他们已经深入地解了我们用Hadoop所做的工作。他们给出的解决方案紧密贴合我们的业务,而且还针对服务器的电源提供了替代方案,这清楚地表明他们完全了解Hadoop集群是如何运行的。”
华为提供的解决方案基于新一代2U双插槽机架式服务器FusionServer开发完成。该解决方案提供灵活的资源扩展能力以及强大的计算性能,是互联网,大数据,云计算和关键企业应用的理想选择。
在评估过程中,Criteo从三家供应商中分别购买了十台服务器,并在每组中建立了一个小型Hadoop集群,进行性能对比。这个标杆活动评估了设备性能,Linux功能,电源使用和驱动程序支持。***华为得分超过其他供应商,因此Criteo选择了华为。Matthieu Blumberg补充说:
“FusionServer超过了我们设定的所有标准。但是真正令我们印象深刻的是华为愿意帮助我们,愿意回答我们的问题。例如,我们想要深入检查系统的硬盘,其他供应商不准备让我们这么干,但是华为给我们提供了支持。短短几天之内,华为就向我们提供了检测所需要的工具。”
客户收益
与其他厂商产品相比较,FusionServer提供了***的硬盘驱动器密度,每台服务器支持16块硬盘,比最接近的厂商多一块。功耗却比其他厂商低20%,优势明显。关键的是Criteo现在可以用合适的价格提供客户所需要的所有服务。
“经过几个月的使用和评估,我们决定将华为的FusionServer纳入我们全球采购目录,让华为成为我们的一个主要硬件供应商。所以自2016年初以来,我们在美国,欧洲和亚太地区持续采购华为服务器。”Matthieu Blumberg说。
展望未来,Criteo认为,现代化数据中心运行需要许多设备的支持,而华为已经被Criteo视作一个潜在主要供应商。Criteo已经购买了更多的网络设备,Matthieu Blumberg总结说:
“华为提供构建强大数据中心所需的全系列产品。我们可以从一个供应商处购买到模块化集装箱,服务器和网络交换机,这一点对我们来说非常有吸引力。”
关于Criteo
Criteo提供个性化的营销服务,业务覆盖广泛。通过测量点击后销售回报率,Criteo让投资回报率变得透明,易于测量。截至2015年12月31日,Criteo在美洲,欧洲,中东和非洲和亚太地区已经建立了28个办事处,拥有2000名员工,为全球11,000多名广告客户提供服务,并与16,000家出版商建立了直接关系。
目前,华为的产品和解决方案已经应用于170多个国家和地区,服务全球1/3的人口。在全球财富500强中有172家,全球财富100强中有43家领先企业选择了华为作为数字化转型的伙伴。
为与业界更多分享数字化转型故事,促进数字化转型经验探讨,《ICT新视界》杂志联合华为企业业务微信/微博,发起***届“领先企业数字化转型故事征集与评选”活动。快来参与吧!点击链接参与活动!
了解华为在企业市场的更多信息,请访问:http://enterprise.huawei.com
在新浪微博上关注 @华为企业业务 :http://weibo.com/hwenterprise
在微信公众号查找“华为企业业务”,或通过微信”扫一扫”功能扫描二维码进行添加:
相关文章
- 在 Go 里用 CGO?这 7 个问题你要关注!
- 9款优秀的去中心化通讯软件 Matrix 的客户端
- 求职数据分析,项目经验该怎么写
- 在OKR中,我看到了数据驱动业务的未来
- 火山引擎云原生大数据在金融行业的实践
- OpenHarmony富设备移植指南(二)—从postmarketOS获取移植资源
- 《数据成熟度指数》报告:64%的企业领袖认为大多数员工“不懂数据”
- OpenHarmony 小型系统兼容性测试指南
- 肯睿中国(Cloudera):2023年企业数字战略三大趋势预测
- 适用于 Linux 的十大命令行游戏
- GNOME 截图工具的新旧截图方式
- System76 即将推出的 COSMIC 桌面正在酝酿大变化
- 2GB 内存 8GB 存储即可流畅运行,Windows 11 极致精简版系统 Tiny11 发布
- 迎接 ecode:一个即将推出的具有全新图形用户界面框架的现代、轻量级代码编辑器
- loongarch架构介绍(三)—地址翻译
- Go 语言怎么解决编译器错误“err is shadowed during return”?
- 敏捷:可能被开发人员遗忘的部分
- Denodo预测2023年数据管理和分析的未来
- 利用数据推动可持续发展
- 在 Vue3 中实现 React 原生 Hooks(useState、useEffect),深入理解 React Hooks 的