技术开发 频道

专访童小军:Hadoop是未来大数据的标准

  【IT168 专稿】2013年11月22-23日,作为国内知名专注于Hadoop技术与应用分享的大规模行业盛会,2013 Hadoop中国技术峰会(China Hadoop Summit 2013)将于北京福朋喜来登集团酒店隆重举行。届时,来自国内外各行业领域的近千名CIO、CTO、架构师、IT经理、咨询顾问、工程师、Hadoop技术爱好者,以及从事Hadoop研究与推广的IT厂商和技术专家将共襄盛举。

  Haoop中国技术峰会由China Hadoop Summit专家委员会主办,由IT168、ITPUB、ChinaUnix协办,渠达传媒负责承办。本届大会将秉承“效能、应用、创新”为主题,旨在通过开放、广泛的分享和交流,着力于促进中国企业用户提高应用Hadoop的能力和水平,降低Hadoop技术应用门槛和投资预算门槛,推广大数据的应用价值。

专访童小军:Hadoop是未来大数据的标准
▲点击进入2013 Hadoop中国技术峰会官网

  在2013 Hadoop中国技术峰会即将召开之际,记者采访到大会专家委员会成员——Hadoop大数据红象(RedHadoop)云腾公司创始人童小军。他是EasyHadoop开源社区创立者、Hadoop云计算讲师,专注于Hadoop大数据技术的普及和推广工作,致力于让Hadoop大数据应用更简单。在采访中,他向记者介绍了自己与Hadoop的故事,以及Hadoop的现状与未来。

  与Hadoop的不解之缘

  从初识、初用Hadoop到EasyHadoop,再到RedHadoop,童小军与Hadoop结下了不解之缘。最初,作为技术爱好者,他开始关注Google的三篇论文(GFS、BigTable、MapReduce),并在随后的博客搜索引擎和自动分类的核心开发工作中用到Lucene类库,它与Hadoop出自同一位作者——Doug Cutting。

  在暴风影音做搜索引擎工作时,童小军和他的团队获得从零开始做Hadoop的机会。在启动Hadoop计划之前,他与同事们尝试了好几种数据仓库方案都没有成功,最终铤而走险决定上Hadoop。通过对淘宝数据平台架构的调研,项目核心成员逐步设计出CronHub调度器、ComEtl数据分析、FriDay报表平台、phpHiveAdmin平台等,并将数据原有平台迁移至新平台。

  为了让其他人少走弯路,童小军注册了easyHadoop.com域名,把自动部署脚本开放给网友下载,使很多人获得了帮助。EasyHadoop社区在朋友们的帮助下越做越大,到目前为止共举办过9次技术聚会活动,单个群有2000人左右。

与Hadoop的不解之缘

  今年5月,童小军成立了RedHadoop公司,组建第一批开发团队。经过几个月的努力,公司发布了RedHadoop Enterprise Edition 1版本,并在后续会推出针对个人学习使用的RedHadoop Personal Edition,让更多人能学会和用上Hadoop是RedHadoop一直追求和为之努力的事情。

  与Hadoop的缘分,童小军总结到:“总体来说走了不少弯路,但最终殊途同归了,一句话:做事得有坚持到底、乐于探索、敢于冒险和乐于分享的心态,不断总结和优化,并将自己了解到的分享给更多人。用心培养一个开放的研发团队,发现每个人的独特价值,让每个人发出自己的光和热。给自己机会,也多给别人创造机会。”

5
相关文章