面向存储介质的HDFS优化综述
HDFS全称Hadoop Distributed file system,是Hadoop中的分布式操作系统,目前被广泛应用于大数据存储。HDFS是针对传统磁盘设计的,随着硬件设备的飞速发展,HDFS对于存储介质的优化和支持成为了一个具有挑战性的课题。本文总结了HDFS面向外存中传统磁盘、叠瓦式磁盘、固态硬盘,与内存中传统内存与非易失性内存的优化技术。本文认为未来的HDFS系统一定是平衡性能与成本的异构集群,提出了四种可能的研究方向并进行讨论。
HDFS全称Hadoop Distributed file system,是Hadoop中的分布式操作系统,目前被广泛应用于大数据存储。HDFS是针对传统磁盘设计的,随着硬件设备的飞速发展,HDFS对于存储介质的优化和支持成为了一个具有挑战性的课题。本文总结了HDFS面向外存中传统磁盘、叠瓦式磁盘、固态硬盘,与内存中传统内存与非易失性内存的优化技术。本文认为未来的HDFS系统一定是平衡性能与成本的异构集群,提出了四种可能的研究方向并进行讨论。
近年来移动互联网与大数据飞速发展,手机应用对个人用户信息的采集、利用野蛮生长。小米手机最新版操作系统MIUI 12正式发布,它提供的隐私保护新功能广受好评。MIUI 12保护用户的个人隐私权与信息安全,但也面临难以界定数据所有权,个人隐私权与数据科学价值交叠的问题。本文就这三个问题分别讨论了开发主体、管理主体、执行主体三个层面的行为规范。
十年前,个人博客的黄金年代便已逝去。为什么在2020年,我还在给个人博客写序?