美文网首页技术与生活
我要数据处理分析

我要数据处理分析

作者: 魏守峰 | 来源:发表于2018-11-29 17:06 被阅读9次

今天帮一个朋友做个小东西,分析 nc 数据(主要是地下水)。代码写着写着自己就很开心,从7月份工作以来从未有这么开心过。

慢慢的,我想明白了。

这些年我一直在做的事情其实是数据分析,用一个程序员的方法、站在一个伪科学家的视角做数据分析。

刚开始做的是印刷数据的分析,对印刷的质量进行监控、管理。慢慢的编程接触越来越多,开始做更多的数据分析工作。主要是普通数据的分析,网络爬虫、Excel、CSV甚至Word数据处理等等这些都做过。

后面接触了地理信息,就一直在做地理信息有关数据分析,包括矢量、栅格、观测等各种数据,格式也是各种各样,使用的处理语言也是各种各样,python、java、scala、C# 都用过。后来做平台也是在做数据分析平台,用 jupyter 搭建交互式数据分析平台,用GeoTrellis 做大数据地理信息数据分析平台,包括通用数据处理平台等等。

其实所有的程序背后都是数据,但是我还是愿意去做最基础的数据处理分析,与数据打交道是一件最让人快乐的事情,在无穷无尽的数据中找到数据之间的规律,找到自己想要的东西,找到有价值的东西,通过对无穷无尽的数据分析,驾驭这些数据,使其为我服务,想想都很开心。

相关文章

  • 我要数据处理分析

    今天帮一个朋友做个小东西,分析 nc 数据(主要是地下水)。代码写着写着自己就很开心,从7月份工作以来从未有这么开...

  • 因子分析怎么做?数据为什么要标准化?

    数据分析工作,并不是直接从分析开始的,当拿到一份要分析的数据,往往需要先进行一项基础工作-数据处理。数据处理一般的...

  • 数据分析课程笔记

    Excel基本数据分析 数据处理阶段:数据处理函数 数据分析阶段:数据分析函数vlookup函数 = VLOOKU...

  • 一款车真的存在5年一周期吗??

    目录 引言 分析过程 分析目的 数据来源 数据处理 销量可视化 总结 归因分析 =========...

  • Spark Streaming 1.基本操作

    1. 数据分析分类: 流式数据处理:多条数据缓冲一起处理批量数据处理:一条数据一处理 实时数据处理:数据处理延迟时...

  • 数据存取,数据处理不用SQL也能轻松应对

    数据存取和数据处理作为数据分析的两个重要的环节。 数据处理是对数据的采集、存储、检索、加工、变换和传输。 数据处理...

  • 毕业论文

    数据处理 BSA的变异,分析,找出不利变异,分析变异结构。 可变剪切的分析,参考https://www.jians...

  • 教你用数据仓库进行数据分析优化

    在整个数据分析流程中,数据处理的时间往往要占据70%以上!这个数字有没有让你震惊呢?为了提高分析效率和质量,借用数...

  • 怎样利用数据仓库优化数据分析?

    在整个数据分析流程中,数据处理的时间往往要占据70%以上!这个数字有没有让你震惊呢?为了提高分析效率和质量,借用数...

  • 6.more_about_feature_engineering

    1.数据处理、特征工程、特征选择内容 数据处理分析数据的分布模式 - 发现异常值/噪声(boxplot,quant...

网友评论

    本文标题:我要数据处理分析

    本文链接:https://www.haomeiwen.com/subject/zgvfcqtx.html