历史数据与实时数据导入

忍不住想吐槽啊！

历史数据一般都是离线传过来的，所以格式与实时数据不会一样。

但是，对同一类型的数据，处理的方式肯定是一样的，尽管粒度不同，但是小的功能点一定是能够抽象出来的。所以，在累死累活的写完历史数据导入，开始写实时数据导入时，如果发现，基本上要从头改写，很的是一件很崩溃的事情。

记住：

一般都是先处理历史数据，这时（1）不管当时有多么麻烦，把数据源独立出来；（2）把小的功能点抽象出来，这些功能函数在前期验证后，后期也能继续使用；（3）实时数据的处理函数按功能抽象为一个个模块，供实时数据处理调用。