Facebook的HiPal数据分析工具有哪些知识管理功能,它是如何工作的?它是纯粹为hadoop环境设计的架构,还是可以与其他数据库一起使用?
发布于 2012-06-28 22:23:24
虽然这只是一个猜测,因为HiPal还没有向公众发布。
HiPal是一个名为HIVE的类似SQL的程序的UI。配置单元是一个程序,允许您对Hadoop文件系统中的文件运行类似SQL的查询。Hadoop是一种用于大型(数is )数据集的分布式map/reduce架构。
但由于它不是开源的,我们无法获得它。但这不会用于其他数据库系统。
http://www.facebook.com/note.php?note_id=89508453919
发布于 2013-08-30 21:01:45
脸书使用蜂巢(http://borthakur.com/ftp/hadoopworld.pdf)来处理数据。Hive是一个运行在Hadoop之上的类似SQL的框架接口,由Facebook团队自己创建,后者捐赠给apache社区。
他们说他们用Hive/Hadoop分析了20 PB的数据。
这里有一个快速入门指南:https://cwiki.apache.org/confluence/display/Hive/GettingStarted
https://stackoverflow.com/questions/11114149
复制相似问题