Hive中的數據存儲與壓縮
我爱charming你
已于 2023-05-19 20:57:16 修改
阅读量62
收藏
点赞数
已于 2023-05-19 20:57:16 修改
阅读量62
收藏
点赞数
于 2023-05-18 18:01:12 首次发布
Hive的底層跑的是MapReduce,MR需要不斷的在内存以及磁盤中進行數據交換。
壓縮:可以减少磁盘存储空间，降低单节点的磁盘IO。由于压缩后的数据占用的带宽更少，因此可以加快数据在Hadoop集群流动的速度，减少网络传输带宽。但是，需要花费额外的时间/CPU做压缩和解压缩计算。(以時間換空間)
1460
暂无认证
到【灌水乐园】发言
self_up: 这是看了谁的课程这么详细
CSDN-Ada助手: 恭喜你开始博客创作，这是一个很好的开始！看到你开始刷算法和数据结构题目，这是很好的选择。建议你在未来的博客中可以分享一些自己的学习心得和体会，不仅可以帮助到其他学习者，也可以加深自己的理解和记忆。加油！ 推荐【每天值得看】：https://bbs.csdn.net/forums/csdnnews?typeId=21804&utm_source=csdn_ai_ada_blog_reply1 如果您持续创作，完成第三篇博客，并且质量分达到 80 分以上，在评论区就有机会获得红包奖励哦！
CSDN-Ada助手: 非常感谢您分享这篇博客，对于准备大数据面试的读者来说，这些内容非常有用！您对于ZooKeeper的介绍也非常清晰易懂，这对于初学者来说很友好。除了您提到的内容，还有一些扩展知识和技能，比如Hadoop分布式计算框架、Spark内存计算框架、Hive数据仓库工具等等，这些都是大数据领域必备的技能。希望您继续分享更多有用的内容，我们期待着您的下一篇博客！ 如何写出更高质量的博客，请看该博主的分享：https://blog.csdn.net/lmy_520/article/details/128686434?utm_source=csdn_ai_ada_blog_reply2 如果您持续创作，完成第三篇博客，并且质量分达到 80 分以上，在评论区就有机会获得红包奖励哦！
CSDN-Ada助手: 恭喜您写出了如此详细且实用的博客！您对于Python、PyTorch、TorchVision、CUDA、CuDNN、Jupyter Notebook在CPU和GPU环境下的安装的解释非常清晰，对初学者来说非常友好。接下来，我希望您能够继续分享更多关于人工智能和数据科学方面的知识，让更多的人受益于您的经验和见解。再次感谢您的分享！ CSDN 会根据你创作的前四篇博客的质量，给予优秀的博主博客红包奖励。请关注 https://bbs.csdn.net/forums/csdnnews?typeId=116148&utm_source=csdn_ai_ada_blog_reply4 看奖励名单。
CSDN-Ada助手: 恭喜您写下了第三篇博客，对于您在面试总结和刷题方面的不懈努力表示赞赏。下一步，建议您可以多留意读者的反馈和需求，针对性地撰写更加深入有用的内容。期待您的下一篇佳作！ CSDN 正在通过评论红包奖励优秀博客，请看红包流：https://bbs.csdn.net/?type=4&header=0&utm_source=csdn_ai_ada_blog_reply3，我们会奖励持续创作和学习的博主，请看：https://bbs.csdn.net/forums/csdnnews?typeId=116148&utm_source=csdn_ai_ada_blog_reply3