美文网首页
DataFrame的小结

DataFrame的小结

作者: 科学俱乐会 | 来源:发表于2020-05-07 10:37 被阅读0次

DataFrame 看上去很像矩阵，且支持类似矩阵的操作；同时又很像关系表。


image.png

但是和关系系统相比, dataframe 有几个特性

  1. 保证顺序
  2. 行列对称
  3. 丰富的API: 可以进行类似关系型数据库的基本操作(类似My SQL的join, filter, 等), 也有类似线性代数的基本操作, 比如(transpose, dot 等) 同时还有类似电子表格(excel 的 透视表 pivot 等操作)
  4. 列中允许异构数据: 比如，一个 int 列中允许有 string 类型数据存在，它可能是脏数据。这点看出 DataFrame 非常灵活。

注意: 最近几年, dataframe的系统如雨后春笋不断出现, 但是dataframe的含义越来越模糊,因为 有些dataframe并不包含以上的全部特性. Spark DataFrame 只包含了关系表的语义，schema 需要确定，数据也并不保证顺序。 所以大家在使用不同的dataframe时候, 需要特别注意

参考:
https://mp.weixin.qq.com/s/7T4BVm2fyYw4nZQKV4sJlA

相关文章

网友评论

      本文标题：DataFrame的小结

      本文链接：https://www.haomeiwen.com/subject/pueoghtx.html

      延伸阅读

      深度阅读

      • 您也可以注册成为美文阅读网的作者，发表您的原创作品、分享您的心情！

      栏目导航

      热点阅读

      关于我们|服务条款|联系我们|DataFrame的小结|投稿指南|网站地图|RSS订阅|排版工具|手机版

      提供经典美文摘抄,优美散文欣赏,现代诗歌精选,短篇小说,心情随笔,表白情书范文,故事会在线阅读欣赏

      Copyright © 2014-2023 Haomeiwen.com All Rights Reserved. 好美文阅读网 版权所有

      备案信息：桂公网安备 45052102000051号 · 桂ICP备13007215号-3

      本站所收录作品、热点评论等信息部分来源互联网，目的只是为了系统归纳学习和传递资讯

      所有作品版权归原创作者所有，与本站立场无关，如不慎侵犯了你的权益，请联系我们告知，我们将做删除处理！