文章目录

• 第1章 沪市行情数据采集
• • 回顾
  • • 1.Avro序列化框架：
    • 2.深市行情数据采集
  • 今日内容
  • 自定义flume source入门案例
  • 1.掌握沪市行情数据采集
  • • 1.1沪市采集数据流程
    • 1.2.配置文件
    • 1.3自定义source
    • 1.4服务器部署

第1章 沪市行情数据采集

回顾

1.Avro序列化框架：

Apache Avro（以下简称 Avro）是一个数据序列化系统，是一种与编程语言无关的序列化格式，是提供一种共享数据文件的方式。

Avro特点：

·1.丰富的数据结构

·2.一个紧凑的，快速的，二进制的数据格式

·3.一个容器文件，来存储持久化数据

·4.远程过程调用（RPC）

·5.简单的动态语言集成。

·6.Av