仲子说

经过一段时间的实际使用，以及根据阅读的文献中关于云计算系统的实验设置，我们可以得出在目前，要想搭建一个能够与其它机构进行横向比较的实验级别的云计算系统，其每个节点(即每台机器)的参考配置为：
CPU：1~2 quad-core CPUs
RAM：8~16GB memory
DISK：1T disks
NETWORK：1G Ethernet
如果达到以上配置，我们认为基本达到实验级别的云计算系统配置要求了。...

经过一个多月的努力（尤其是这个月来的集中开发），我们实验室的云数据管理系统项目已经初步构建起来。目前，我们完成的工作包括：
1、完成系统调研，成功配置云计算环境；
2、成功构建项目框架，明确开发目标，解决一些关键性问题；
3、完成部分功能，包括基于双核云计算执行引擎的统一接口，载入CDR样本数据，以及支持基本SQL查询功能等；
4...

在《开始研究HBase-0.20.2版》一文中，曾经说到，现在的Hbase，已经成为了一个“消耗文件句柄的肥猪”（a file handle hog），那么，如果解决这个问题呢。今天就介绍一种在Ubuntu Linux中，如何设置用户最大打开文件数量的方法：
1、启用pam_limits.so （暂不确定是否一定需要）
sudo vim /etc/pam.d/common-session 
添加如下一行：
session required pam_limits.so
2、修改 sudo vim...

Hbase 0.20.x默认的日志输出级别为DEBUG，因此常常会看到一大堆的调试信息，以及一大堆的Exception，可能会让用户比较困惑。
其中一个会造成困惑的Exception就是在重启Hbase的时候，可能会遇到如下的Exception：
java.io.IOException: org.apache.zookeeper.KeeperException$NoNodeException: KeeperErrorCode = NoNode for /hbase/master
        at org.apache.hadoop.hbase.zookeeper.ZooKeeperWrapper.readAddressOrThrow(Zo...

Hbase重启之后就无法启动的现象：
当我们使用Hbase 0.20.2的时候，遇到了2个奇怪的问题。
我们使用了数台机器构建了一个集群，并且按照Hadoop/Hbase的"Getting Started"安装配置了Hadoop和Hbase。之后能够正常启动Hadoop和Hbase，并且创建table和插入数据。
不过，当我们访问Master的页面时： http://10.37.17.252:60010/master.jsp ，我们发现了第一个问题：在regionserver区域，出...

在配置Hadoop和Hbase的过程中，虽然官方网站上有很多丰富的文档，但是常常仍然会有一些细枝末节的问题，成为阻碍项目配置成功以及后续开发的绊脚石。下面就记录几个Hbase配置以及开发过程中需要注意的事项：
(1)修改节点主机名的问题
在配置文件中使用机器主机名（如WAMDM1）作为通讯方式的时候，需要修改2个文件：/etc/hosts 以及 /etc/hostname
(2)修改Classpath的...

原本实验室里的项目打算使用Hbase-0.19.x，不过最近重新访问Hbase的网站，发现Hbase已经发布了0.20.x，并且其改动还比较大，最明显的一个改动就是自Hbase 0.20.x之后，其将依赖于ZooKeeper这个项目。Hbase宣称HBase-0.20.2版是目前最快、最强大、最稳定的版本。
 
这个版本的Hbase是一个“消耗文件句柄的肥猪”（a file handle hog），Linux或者是Unix默认的最大文件打开数量1024已经...

王海勋博士受聘中国人民大学兼职教授暨学术报告： Relational DBMS for Cloud Computing: An Eventual Consistency Approach
移动&云计算主题系列学术报告之三
(Seminar Series on Mobile plus Cloud Computing)

报告题目：Relational DBMS for Cloud Computing: An Eventual Consistency Approach
报 告 人：Haixun Wang (王海勋), 微软亚洲研究院
报告时间：2009 年 12 月 29 日上午10:00–11:30
报告地...

移动&云计算主题系列学术报告之二
(Seminar Series on Mobile plus Cloud Computing)

报告题目：Build Intelligence from the Physical World
报 告 人：Xing Xie (谢幸)，微软亚洲研究院
报告时间：2009 年 12 月 24 日下午4:00–5:00
报告地点：理工楼配楼一楼会议室
报告人简介：
Dr. Xing Xie is a lead researcher in the Web Search and Mining Group of Microsoft Research Asia, and a guest Ph.D. advis...

一、从云数据库底层存储文件系统上来说，
    1.1 可以使用现有的分布式文件系统
        1.1.1 可以使用基于Master/Slave结构的分布式文件系统
        1.1.2 可以使用基于P2P结构的分布式文件系统
    1.2 可以使用自己设计的文件系统，来存储实际的数据
    使用自己设计的文件系统，显然可以更加容易地支持上层的各种查询优化，但是其代价...