基于云技术的智慧城市中大规模房屋数据处理

曾羽琚 陈明辉

在智慧城市中传感器和设备收集各种数据, 实现增值服务. 主要关注来自智慧城市中的智能房屋数据, 提出用于存储和处理大规模房屋数据的Scallop4SC平台, 实现智慧城市服务. 房屋数据分为房屋日志数据和房屋配置数据, 分别使用HBase和MYSQL管理. 通过HBase键值以schemaless方式存储管理异构日志数据. MySQL管理配置数据, 完成房屋数据查询. 多节点Hadoop/MapReduce集群处理巨量房屋日志数据. 最后通过实际一年的房屋日志数据, 计算智能设备能耗并完成实验性评估. 根据实验结果, 探讨Scallop4SC处理智慧城市的数据规模.

基于云技术的智慧城市中大规模房屋数据处理