时间: 2016年7月15日~16日
地点:深圳·华侨城洲际酒店
购票电话:18515221946

演讲: Resolving Transactional Access/Analytic Performance Trade-offs in Apache Hadoop with Apache Kudu

地点:

Over the past several years, the Hadoop ecosystem has made great strides in its real-time access capabilities, narrowing the gap compared to traditional database technologies. Despite these advances, some important gaps remain that prevent many applications from transitioning to Hadoop-based architectures. Users are often caught between a rock and a hard place: columnar formats such as Apache Parquet offer extremely fast scan rates for analytics, but little to no ability for real-time modification or row-by-row indexed access. Online systems such as Apache HBase offer very fast random access, but scan rates that are too slow for large scale data warehousing workloads.

This talk will investigate the trade-offs between real-time transactional access and fast analytic performance from the perspective of storage engine internals. It will also describe Apache Kudu (incubating), a new addition to the open source Hadoop ecosystem with out-of-the-box integration with Apache Spark and Apache Impala (incubating), that fills the gap described above to provide a new option to achieve fast scans and fast random access from a single API.

up
(96人觉得很赞)

演讲专题

Covering innovative topics

7月15日,星期五

  • 大数据背景下的系统优化与运维

    VR、人工智能、物联网等概念日渐火热,然而在其背后都少不了“大数据”的身影。通过大数据分析可以了解产品的用户体验质量,而结合大数据则又可以让这些技术在更多行业中发挥作用。但大数据毕竟是一个宽泛的概念,因此开发者或企业要想在大数据时代成为领先者,就必然需要在其细分的各个领域中实现更多创新。

    围绕大数据细分领域的相关话题,本专场活动将邀请多位来自大数据领域相关的架构师及技术专家,从服务供应商的角度来分享数据处理方面的经验与心得,为当前面临海量数据压力的企业级用户在应用开发、技术架构、日志处理、运维优化等方面提供参考。

  • 研发体系构建管理

    改变世界的,不是技术,而是使用技术的团队。技术管理者应该是个放大器,挑选合适的人,激发团队的能力,做出正确的决策,将优秀的工程师组合成优秀的技术团队,发挥团队的力量,做出伟大的成果。招聘,激发,面向未来进行决策——这是优秀的技术管理者必须关心的事情。在本专题中,我们邀请了来自不同规模公司的CTO,和大家分享他们的经验,和各位技术管理者一起探讨在各种不同的情况下,如何组建,激励团队,如何在困难的情况下作出合理的决策。

  • 技术人的创业故事

    创业不易,却是技术人释放自身价值、追寻人生目标的最好开始,作为互联网创业大潮的主角,我们没有理由错过这千载难逢的时刻,更因为,技术人能用更理性、更强大的逻辑系统来对待创业这样的宏大工程,所以更容易获得创业的成功。本专题的目的是提升技术人员对创业过程的认识,近距离接触处于不同阶段的技术创业者,引发对于创业的思考。

  • 发展中的移动架构技术

    现在是移动互联网的时代,APP业务的快速发展需要移动架构技术的支持。使用Native、Web又或者混合开发模式才能满足产品快速迭代的需求?如何使用灰度发布来提前发现问题,平滑上线?如何热修复线上bug?如何省电、省流量、保持无线的稳定性?高并发大流量下移动架构应该如何设计?这些,是本专题需要讨论的内容。

  • 深耕运维,精益求精

    运维技术创新翻天覆地,传统的ITIL体系和工具自动化已经升级到全面广义运营体系化,新时代海量运维更加关注运维 管理云化、资源虚拟化、海量服务架构、运维大数据等诸多领域,业务发展压力和运维技术创新挑战并存。本专题将从互联网巨头企业在运维领域的建设以及新兴互联网企业的运维经验进行切入,分享宝贵经验,帮助企业脱离运维技术落后的困扰。

  • 电商大促背后的技术较量

    每年的比拼不仅仅是数字之间的比拼,逐年标高的销量后面隐藏着什么样的技术难题?

  • 分享经济下的架构探索

    一种全新的商业模式正在颠覆传统的经营模式,Airbnb、Uber...等分享平台的快速增长,这种分享经济下的架构又暗藏什么样的玄机呢?

  • 云服务架构探索

    云服务正在以他惊人力量改变着技术世界。系统架构正在改变,传统的运维方式正在被革命,信息安全的认识正在巨变,程序员的开发方式也正在变革,Docker等容器技术也在改变着服务的方式,各大互联网巨头也正在通过各自的云输出技术能力,等等,一切都变化,云化,服务化。今天的云已不是高高飘在天上了,它已完完全全的落地了,我们的讨论中也不在是要不要用云,而是更多探索怎么更好的拥抱云。这是思维方式的进步,也是技术的进步。本专题将邀请各路技术专家一起来探索云服务架构。

  • 容器化+微服务技术最佳实践

    随着领域驱动设计、持续交付、按需虚拟化、基础设施自动化、团队小型化自治化、大型集群系统等实践的流行,微服务的概念也应运而生。它不是一种被重新发明出来的东西,而是从现实世界的实践中总结出来的模式。

  • 基础云服务应用案例

    数据显示,2016年云计算领域像往年一样又出现了新的发展热点,越来越多的本土中小型企业开始倾向于云计算解决方案,以满足业务连续性方面的需求,这也相应的促进了云计算服务的发展。此外,基于云的视频会议服务以及直播平台服务亦成为另一大热点,其背后的技术支持与服务架构也正得到越来越多的关注。

    为了更加深入的解读这些热点问题,本专场活动将邀请多位来自面向企业及开发者的云计算及应用开发服务供应商的技术专家,分享最新的云服务相关实践与行业应用案例,力图为企业相关领域技术人员拓展思路,内容包括企业云平台构建、直播云服务等热门话题。

7月16日,星期六

  • 海量服务架构探索

    互联网时代服务的特点是面向海量级的用户提供海量级的服务,海量级服务的特点是前端的高并发高可用高性能高扩展+后端数据的高一致高存储高可用,面向海量级的分布式服务设计要求架构师既要站在战略的高度去把控架构又要从战术细节上去落地实现。本专题将邀请一线的技术专家,分享他们在海量服务架构探索过程中在战略和战术上的实践。

  • 智能硬件对软件技术发展的挑战

    智能硬件是典型的软硬件结合产品,随着技术的发展,硬件的体积变小而软件的功能却更为丰富。智能硬件是未来物联网(IoT)的功能载体,谷歌、华为、微软、高通等知名跨国高科技企业已经开始了在 IoT 技术上的布局。那么,智能硬件对软件技术的发展提出了哪些要求和挑战呢?本专题将邀请一线技术专家,为您揭开这层层神秘面纱。

  • 互联网金融

    对用户而言,互联网金融和传统金融没有区别,都只为满足支付、融资、投资,但于互联网从业人员而言,互联网金融是最受瞩目的互联网业务,聚光灯下,互联网架构如何经得起用户检验呢?

  • 虚拟现实与人工智能技术

    虚拟现实与人工智能不光热在资本圈,在产品和技术圈也同样已经有深入的积累。在这里,或许国内公司与美国公司技术水平是最接近的。我们不如从技术,应用,和商业三个维度,来看看国内虚拟现实与人工智能的团队进行到哪里了,他们希望怎样设计他们的技术版图,怎样构建他们的开发者生态,怎样与传统互联网和其他产业一起赚钱。

  • 互联网安全

    互联网蓬勃发展,催生众多创新业务,互联网安全也面临前所未有的挑战。本专题将通过移动和物联网安全、云安全、互联网业务安全等方面,让创业或企业用户在发展同时了解影随相伴的安全问题。

  • 大数据与个性化

    当alpha go 打败 世界冠军,让我们坚信人工智能必将替代人类从事很多工作,也将为互联网行业带来新的机遇。而这一切依赖于后端的大数据系统。 大数据通过近几年的沉淀与积累,在精细化运营、人工智能、搜索、海量数据管理、安全等领域都已经产生了巨大价值,那么海量的大数据系统该怎么构建?怎么构建一套人工智能的大数据系统?如何让数据分析和挖掘与业务结合产生更大的价值?接下来几年大数据的未来在哪儿?这是我们每一个大数据人、甚至所有技术人都非常关心的话题。在这个议题我们请来了一群代表行业最高水平的大咖,与大家一起交流下大数据的过去与将来。

  • 游戏:发挥技术的想象力

    更多样的终端设备和用户群体,为游戏技术人带来了更多新的挑战。我们的专题立足于现今游戏市场的需要,从新的交互设备、有更高承载力要求的游戏网络搭建,到能够高效率生产和运营内容的工具架构各个方面准备了最专业的内容。专题中的内容,不管是 VR 虚拟现实技术,高性能游戏服务器设计,游戏内容生产和运营工具,都是为了从业人员能够将更多更新的内容呈现给使用各个终端的多样化用户群体,使技术服务于市场需要。

  • 新形势下的社交网络

    信息展现形式从文字逐步演变为图片和视频,信息组织形式也从传统基于时间线到基于兴趣等多维度,社交关系圈也从单一平台的大圈子逐步往垂直领域多圈子演化。基于LBS、直播等形态也越来越火热,在这样的演变过程中,会碰到什么样的挑战,什么样的架构才能支撑起日益多元化的社交需求?本专题将邀请一线技术大咖为我们一一解答。

  • 移动开发与消息推送专场

    无论是对于企业级还是消费级应用来说,实时消息与推送服务的表现是至关重要的,它决定着最终用户体验的优劣。实时消息与推送系统,从功能的角度来看同样也是不可或缺的重要部分,尤其是对面向消费级市场的移动应用来说。然而随着用户数量的持续增加,以及用户对传输质量要求的愈发苛刻,应用开发人员在进行实时消息及推送系统开发优化时的压力也必然随之提高。

    为了探讨如何解决这一问题,本专场活动将邀请多位来自应用开发及消息推送服务供应商的技术专家,分享实时消息及推送系统的开发与优化经验,帮助更多的开发人员了解当前实时消息系统、推送系统以及直播系统的架构设计趋势。

侧重业务场景,引领技术趋势