9月23日,云协联合Spark亚太研究院举办“Spark新一代全能大数据计算平台揭秘”线上讲座,来自重庆大学、西南大学、重庆邮电大学、重庆师范大学、重庆文理学院、中国电信、中国联通、中国移动、重通服、英业达、磊强等协会60余家会员的80余名云计算专业听众参加活动,Spark亚太研究院王家林院长受邀同与会会员单位分享了:Spark百倍提升大数据平台生产力的一些案例。
Spark是一个新兴的高效分布式计算系统,提供比Hadoop更上层的API,同样的算法在Spark中实现只有Hadoop的1/10或者1/100的代码长度。而Spark Shark类似“SQL on Spark”,是一个在Spark上数据仓库的实现,在兼容Hive的情况下,性能最高可以达到Hive的一百倍,可以极大提升大数据平台的生产力。
据悉,国外大型互联网公司,包括Hadoop早期的主要贡献者Yahoo都已在多个项目中部署Spark。与此同时,国内互联网大佬:淘宝、Baidu、腾讯、优酷土豆、网易等也大举跟进。专家预测,Spark技术将在2015年迎来爆发式增长。
云协将继续关注国际云计算技术动态,致力于重庆市云计算行业优化升级和可持续发展。