常见的数据收集方法

1、公司内数据收集

公司内数据主要是指公司自营产生的数据。可以是公司各业务线业务运营产生的业务数据，也可以是公司经营类数据。业务数据可分为实体数据、交易数据和行为数据。经营类数据可分为收入、成本、费用等。

从技术上可分为：1）直连系统DB采集；2）系统接口采集；3）系统日志采集；或者分为离线数据采集和实时数据采集。

2、公共数据收集

公共数据主要是指政府在行政执法过程中产生的信息，比如行政许可、法院诉讼等这些活动所带来的信息。

公共数据一般由数据服务机构通过数据服务平台，通过查询UI或访问接口，向大众开放。查询UI一般会配备动态校验码技术，访问接口一般会配备限流技术避免平台超负荷运转宕机。

3、第三方数据收集

第三方数据指在公司与其他企业合作获得的数据。比如自己公司有技术别的公司有数据，或者自己与对方公司各有不同细分市场数据，双方合作能形成战略上的互补。

在技术上一般会建立数据传输网络专线来保障数据传输的安全。

以上，无论哪种数据收集方法，除了采用自动采集技术外，常辅助手动采集手段。比如对频次不高的采集场景，人工采集后可能会通过邮件、ftp、网盘或上传网站等方式进行传输。