-
6个人如何维护上千规模的大数据集群呢?
所属栏目:[教程] 日期:2018-07-28 热度:53
【资讯】本文主要介绍饿了么大数据团队如何通过对计算引擎入口的统一,降低用户接入门槛;如何让用户自助分析任务异常及失败原因,以及如何从集群产生的任务数据本身监控集群计算/存储资源消耗,监控集群状况,监控异常任务等。 饿了么 BDI-大数据平台研发[详细]
-
HPE与美国能源部共建新超算,基于ARM架构
所属栏目:[教程] 日期:2018-07-28 热度:94
【资讯】在几周前,美国能源部正式公布了其新一代超级计算机——“Summit”,这个消息想必大家都已有所耳闻。据称,其运算性能可达到200PFlops,合作伙伴是IBM和英伟达。 美国今年在超级计算机方面的动作不止一个Summit。据外媒报道,本周早些时候,HPE和[详细]
-
从MySQL到HBase:数据存储方案转型演进
所属栏目:[教程] 日期:2018-07-28 热度:83
【资讯】 本文大致会从以下几个方面入手,谈谈笔者对数据存储方案选型的看法: 从MySQL到HBase集群化方案的演化 MySQL与HBase的性能取舍 不同方案的优化思路 总结 一、集群化方案 1、MySQL应用的演化 MySQL与HBase说到最核心的点,是一种数据存储方案。方[详细]
-
分布式系统知识分享:正确理解 CAP 定理
所属栏目:[教程] 日期:2018-07-28 热度:96
【资讯】 前言 CAP的理解我也看了很多书籍,也看了不少同行的博文,基本每个人的理解都不一样,而布鲁尔教授得定义又太过的简单,没有具体描述和场景案例分析。因此自己参考部分资料梳理了一篇与大家互相分享一下。 标题写了正确理解,或许某些点不是百分[详细]
-
用 Python 快速实现 HTTP 和 FTP 服务器
所属栏目:[教程] 日期:2018-07-28 热度:138
【资讯】这些年,在IT界流行这样一句脍炙人口的话:人生苦短,我用 Python 。 不知道从什么时候开始,这句话开始被广为流传,或许是因为Java的枯燥机械,或许是C语言的复杂,或许…... 但是,Python以其清丽脱俗的气质崛起,并且势已不可挡。2017 年,便是[详细]
-
Facebook开源自用工具,可从GitHub获取
所属栏目:[教程] 日期:2018-07-28 热度:151
【编译】众所周知,谷歌对其数据中心一直实行着严格的保密,不过同属著名科技公司的Facebook却不是这样。近日,这家社交媒体巨头以开源的方式发布了两款重要工具——而这两款工具曾只在其内部使用。 其一是Katran,这个负载均衡器的作用是使该公司的数据中[详细]
-
IBM Modern架构,奠基企业数字智能未来
所属栏目:[教程] 日期:2018-07-28 热度:151
【资讯】6月7日,IBM公司在南京举办了2018 IBM Systems创行者高峰论坛,本次论坛以“Modern架构Go天下”为主题,总计有数百位企业客户及生态合作伙伴代表出席,与IBM共聚一堂,共论新趋势下现代化IT基础设施架构的建设之道。 在数字化时代,云计算、大数据[详细]
-
Gartner最新服务器市场报告出炉,增势喜人
所属栏目:[教程] 日期:2018-07-28 热度:129
【资讯】根据Gartner公司的最新数据,2018年第一季度全球服务器市场依然保持了2017年最后一个季度的增长态势,全球服务器收入增长33.4%,出货量同比增长了17.3%。 “服务器市场的增长是由超大规模以及企业和中型数据中心的支出增长所驱动的。企业正向其内[详细]
-
如何通过反向SSH访问NAT后面的Linux服务器
所属栏目:[教程] 日期:2018-07-25 热度:198
【资讯】你在家里运行着一台 Linux 服务器,它放在一个 NAT 路由器或者限制性防火墙后面。现在你想在外出时用 SSH 登录到这台服务器。你如何才能做到呢?SSH 端口转发当然是一种选择。但是,如果你需要处理多级嵌套的 NAT 环境,端口转发可能会变得非常棘手[详细]
-
区块链原理是什么?如何开发区块链程序?
所属栏目:[教程] 日期:2018-07-25 热度:53
【编译】比特币是世界上第一个分散化的货币,它在过去几年吸引了越来越多的关注。区块链技术可以帮助比特币发挥作用,区块链技术本身就是基于交易区块链的。有关这些交易的信息将同时在全球所有设备上更新。 专家预测区块链前景广阔,尽管比特币不久之前击[详细]
-
高性能计算知识:深度解析Lustre体系结构
所属栏目:[教程] 日期:2018-07-25 热度:90
【资讯】Lustre架构是一种集群存储体系结构,其核心组件就是Lustre文件系统。该文件系统可在Linux操作系统上运行,并提供了符合POSIX标准的UNIX文件系统接口。 Lustre文件系统是什么 Lustre架构用于许多不同种类的集群。众所周知,它服务于许多全球最大的[详细]
-
老照片:Linux 的 24 年历史,一步一个脚印
所属栏目:[教程] 日期:2018-07-25 热度:73
史前 没有C 编程语言和GNU 项目构成 Linux 环境,也就不可能有 Linux 的成功。 Ken Thompson 和 Dennis Ritchie Ken Thompson和Dennis Ritchie在 1969-1970 创造了 Unix 操作系统。之后发布了新的C 编程语言,它是一种高级的、可移植的编程语言。 Linux 内[详细]
-
数字化转型 全新18汉诺威6月与你相见!
所属栏目:[教程] 日期:2018-07-25 热度:108
【资讯】3月20日,2018汉诺威消费电子、信息及通信博览会(CEBIT)新闻发布会于京召开。今年的2018汉诺威消费电子、信息及通信博览会将与6月11日-15日举办,不仅仅是时间上的变化,展会也经历蜕变,成为全新的商业盛会。这一届的CEBIT以全新的方式呈现数字化[详细]
-
赢视界:小鱼易连是视频行业的特斯拉
所属栏目:[教程] 日期:2018-07-25 热度:101
【资讯】3月17日,北京打破长久的降水沉寂,一早就飘忽起白雪。就在这一天,小鱼易连在北京成功举办了超500家核心伙伴参与的“AI小鱼,赢视界——2018全球合作伙伴大会”。依水而兴,小鱼易连董事长兼CEO袁文辉成功发表了以“AI小鱼,赢视界,大视频,云融[详细]
-
这个意识流算法,让AI能像人一样归纳总结
所属栏目:[教程] 日期:2018-07-25 热度:140
【编译】能够从错误中学习是一种强大的能力,人类总容易犯错,但也总能从中获益。有时我们搞砸了某件事,但至少过程中也有一点可取之处,我们可以从做的不够好的地方吸取教训,下次做的更好。最终,获得成功。就是我们常说的“失败是成功之母”。 人工智能[详细]
-
双活太远用波分 容灾链路设计关键点分享
所属栏目:[教程] 日期:2018-07-25 热度:121
【资讯】容灾通信链路设计是保障用户在合理的通信成本下成功实现容灾系统建设的重要步骤。不同的通信链路有不同的属性,如距离支持、带宽能力等,而不同的容灾技术和容灾应用对通信链路的要求并不相同。 容灾通信链路的选择 对于容灾方案,无论采用哪种容[详细]
-
服务器性能指标(一)负载分析及问题排查
所属栏目:[教程] 日期:2018-07-25 热度:77
【资讯】平常的工作中,在衡量服务器的性能时,经常会涉及到几个指标,load、cpu、mem、qps、rt等。每个指标都有其独特的意义,很多时候在线上出现问题时,往往会伴随着某些指标的异常。大部分情况下,在问题发生之前,某些指标就会提前有异常显示。 对于[详细]
-
干货:一种基于SDN的服务器负载均衡方案
所属栏目:[教程] 日期:2018-07-25 热度:104
【资讯】 引言 网络已经成为许多商业的支撑脊柱,世界网络中每天都有新的设备加入,致使网络规模巨大化。众多的网络设备不仅意味着需要投入更多的资源,且使网络结构越加复杂化,管理难度增大且易错。为了避免网络管理错误的发生,一种新型的网络架构出现[详细]
-
未来:概率计算推动人工智能进一步发展
所属栏目:[教程] 日期:2018-06-13 热度:170
【资讯】我们正在迎接人工智能所带来的前所未有的潜在影响力——但只有在人工智能能够以更智能、更直观的方式解决实际问题时,我们才能取得成功。 人工智能目前面临的一个主要障碍是计算机收到的自然数据大部分是非结构化的杂乱数据。 对于人类来说,整理[详细]
-
AWS开源并扩展无服务器应用程序模型实现
所属栏目:[教程] 日期:2018-06-13 热度:164
【资讯】近日,Amazon Web Services(AWS)开源了其无服务器应用程序模型(SAM)实现,并增加了一个面向CloudWatch Logs订阅过滤器的新事件源。该版本全面扩展了通过Amazon API网关配置和部署REST API的选项,其中包括支持CORS头、区域端点和二进制媒体类型。[详细]
-
“AI+养猪”黑科技 无所不能的“人工智能”
所属栏目:[教程] 日期:2018-06-13 热度:158
【资讯】中国用占世界7%的土地养活了世界20%的人口,随着人口的增长,我国农业产业相关领域将面临更加严峻的挑战,而加大科技投入,提高农业产业生产效率,成为面对这一重大挑战的可行之道。 近几年,人工智能这项“黑科技”横空出世,想通过研究人类智能[详细]
-
见证数据库技术的青春,今年我们9岁了!
所属栏目:[教程] 日期:2018-06-13 热度:189
【资讯】作为国内备受关注的数据库及大数据领域技术盛会,中国数据库技术大会(DTCC2018)再度来袭。没错,还是熟悉的配方,不一样的是,我们今年9岁了! 走,走,走!一起去看看我们9岁的世界! 打卡为证!就不给你们纹小猪佩奇了。一人一份绝密文件袋,这是我[详细]
-
高通拟退出服务器芯片 会否影响合资项目?
所属栏目:[教程] 日期:2018-06-13 热度:141
【资讯】在遭遇了博通公司的恶意收购风波之后,美国手机处理器巨头高通开始了一些反思和业务重组。据外媒最新消息,高通准备退出服务器处理器领域。 高通是全世界占据主导地位的手机应用处理器制造商,在中国等许多国家,高通骁龙几乎成为优秀手机处理器的[详细]
-
戴尔两大HCI系统升级,将继续领跑行业?
所属栏目:[教程] 日期:2018-06-13 热度:130
【资讯】在上周的戴尔科技大会2018(Dell Technologies World 2018)上,戴尔EMC公布了两款新升级的超融合基础设施(HCI)产品,分别为:一、与VMware的vSAN和vSphere虚拟化软件集成的VxRail;二、与VMware Cloud Foundation 2.3以及用于本地IT即服务(on-premi[详细]
-
迈克尔戴尔揭开戴尔科技集团全球大会序幕
所属栏目:[教程] 日期:2018-06-13 热度:50
【资讯】日前,戴尔科技集团董事长兼首席执行官迈克尔戴尔在美国拉斯维加斯为IT界最著名大会之一——戴尔科技集团全球大会2018 (Dell Technologies World 2018)揭开序幕。逾一万名戴尔科技集团的客户和合作伙伴齐聚一堂,了解业界领先的戴尔科技集团旗下公[详细]