• 为什么在Hadoop(HDFS)中块设置的很大?

    相对于普通磁盘的块(4kb)来说HDFS的块要更大一些256M甚至更大(默认64M),如此设计的目的是为了减少在寻道上的开销。 如果把HDFS块设置的足够大,那么从磁盘传输数据的时间将明显大于检索块头部信息的时间,因此HDFS中大文件传输的时间由多个块在磁盘上的传输速率来决定。

    阅读全文
    作者:Fisher | 分类:分布式 | 标签:, ,
  • Google在Cloud SQL领域开始对Amazon RDS发起挑战

    在Amazon RDS上线四年多后,谷歌现在终于可以扬眉吐气说拥有了自己的database-as-a-service(DAAS)解决方案。

    在经过了大范围的公测期后终于在本周二把GA版本释放出来。Cloud SQL可以为运行在App Engine和GCE上的应用程序提供了必要的关系型数据库支持。该服务支持高达500M的数据库,提供99.95%的SLA、可以自动加密所有表、临时文件和google内部的网络流量。

    阅读全文
    作者:Fisher | 分类:云计算 | 标签:,
  • 英特尔将建立大数据的操作系统

    随着各大企业对数据安全和可靠性重视程度的不断加强,Intel公司计划在以Hadoop大数据处理框架的基础上搭建一系列的软件工具,一套大数据的“操作系统”。

    这套数据平台工具将在下个季度以个人免费和企业自助版本的方式上线,同时还提供了附加版本,具有主动安全修复,定期升级及在线支持的新特性。

    阅读全文
    作者:Fisher | 分类:IT厂商 | 标签: