了解Yarn的架构之前,先说说为什么会出现Yarn。在Hadoop v1版本中,存在最大的问题就是资源管理和任务管理耦合在一起,且整个集群的扩展性、可靠性(JobTracker的单节点故障问题)很差,以及最重要的一个问题,集群资源的...
未来最可能主导IT市场的五大方向
1.数据分析 据IDC市场研究人员估计,到2020年全球每年产生的数据量将达到35ZB,也就是3500万亿GB。(注:1ZB=1,048,576PB; 1PB=1,048,576GB;这个数据很抽象。)IDC的首席研究员JohnGantz说:“用...
每天都有做不完的事的人,其实很难做成什么大事
当你询问管理者,是什么阻碍了他们成功地完成工作时,大部分人都会千篇一律地抱怨说:没有足够的时间、缺乏可利用的资源、机会越来越少……当你更进一步观察时,你会发现这些原因在很大程度上都是借口。 阻碍管理者成功的,是更为个人化的因素。具体来说,就是怀疑自己能否依据最...
饭香不怕巷子深–探索京城胡同美食
来北京很久了,最怕被人问起“北京有什么特色美食”、“老北京好吃的地方在哪”之类的问题,其实,老北京最正宗的美食,不在街边的酒店,而是深藏在老北京标志性的四合院、胡同巷子中。 1. 老北京大院子 一对有院子情节的夫妻不能忍受住在都市的高楼中,一直住在老北京的院子...
网站借助iptables或.htaccess阻止IP恶意攻击访问
背景:今天突然发现博客打开巨慢,然后就各种排查,最后发现日志里一直有某个固定IP地址一直不停的在访问,系统CPU负载飙升,借助iptables或.htaccess来阻止该访问。 1. iptable方式 这种方式可以在系统层面阻挡某...
写在2016年伊始
不觉又跨了一个年头,算是我后知后觉吧,终于有一点闲暇来捋一捋生活了,坐在电脑前呆了许久,不知该从何说起,索性就信马由缰的写吧。 博客坚持了一年了,记得也是去年的这个时候搭建好,开始一点一点的更新,久了就有...
【Oracle BIEE】数据监控预警功能实现
【背景】 ? ? ? ? ? 一个成熟的数据分析系统中必然会有很多报表,因此对于某些核心指标的变动进行监控预警就很有必要。本篇介绍利用BIEE实现该功能~ 【正文】 ? ? ? ? ? 1. 新建对于要监控指标的分析(即要在预警区域显示的内容),例如: ? ?...
马云说的到底对不对,京东到底行不行?
摘要:马云吐槽京东被引爆以来,似乎就没人去关注马云说的对不对,有没有价值,大家更多的是在关注马云攻击了京东,京东回击了马云,马云被偷录了,再和人说话要去澡堂了…但,马云说的到底对不对,京东到底行不行? 很多人都说中式互联网江湖其实最像娱乐圈,从现在的趋势看,这...