发明 一种数据获取方法及设备（计算机互联网 网络数据 网络通讯 大数据 数据获取）
【计算机互联网 网络数据 网络通讯 大数据 数据获取】 2人
G06F16/2455 G06F16/242 G06F16/2458
摘要：本发明提供一种数据获取方法及设备，所述方法包括：将所设置的数据查询条件和对ElasticSearch返回的数据进行解析的规则提供给预定义的数据获取组件；调用所述数据获取组件向搜索引擎ElasticSearch发起滚屏查询请求，获取经过解析的搜索引擎ElasticSearch对所述滚屏查询请求的返回结果。本发明提出的一种数据获取方法及设备，通过调用自定义的数据获取组件向搜索引擎ElasticSearch获取大批量数据，使得数据获取较直接使用ElasticSearch的ScrollAPI更加地可靠、有序、实时和不重复。
