组件介绍

    数据导出组件的目的在于降低获取区块链数据的开发门槛，提升研发效率。研发人员几乎不需要编写任何代码，只需要进行简单配置，就可以把数据导出到指定的存储介质上，比如DB、ES、MQ、Hadoop等，并提供相关服务接口获取数据，以满足业务场景需求。

    WeBASE-Collect-Bee可以导出区块链上的基础数据，如当前块高、交易总量等。

    如果正确配置了FISCO-BCOS上运行的所有合约，可以导出区块链上这些合约的业务数据，包括event、构造函数、合约地址、执行函数的信息等。

    WeBASE-Collect-Bee提供了基于Restful的API，支持通过http的方式调用这些接口。

    易于使用，且功能强大；但是仍有一定的开发门槛。为了更进一步地提升研发效率，我们开发了WeBASE-Codegen-Monkey。只需要在一个配置文件中进行少量简单的配置，同时按照要求提供相关的智能合约信息；当前版本可支持自动生成WeBASE-Collect-Bee。

    区块链的数据存储在区块链上，需要使用智能合约暴露的接口来进行调用。由于智能合约暴露的接口的限制，区块链上不适合进行复杂的数据查询、大数据分析和数据可视化等工作。因此，我们致力于提供一种智能化、自动化的数据导出和备份的解决方案。

    • 背景
    • 解决方案

    该公司使用WeBASE-Codegen-Monkey迅速生成了的代码，并根据实际需求进行了定制化开发，在一天之内投入到线上使用。导出到db的数据接入到了该公司的统一监控平台，该公司PM可以在业务后台系统上获得该业务的实时进展，该公司运维人员可以在公司运维监控室的大屏幕实时监控业务系统的状态。

    3.2 案例 区块链业务数据对账系统

    • 背景

    某公司基于FISCO-BCOS开发了区块链的业务系统，需要将本地数据与链上的数据进行对账。

    • 解决方案

    该公司使用WeBASE-Codegen-Monkey迅速生成了WeBASE-Collect-Bee的代码，并根据实际需求进行了定制化开发。通过在智能合约中设计的各类event，相关的业务数据都被导出到数据库中；从而实现轻松对账的需求。

    3.3 案例 区块链业务数据查询系统

    • 背景

    某互联网公司基于FISCO-BCOS开发了区块链的业务系统，但是发现智能合约对业务报表的支持不佳。但是，公司的一线业务部门要求实时查看各类复杂的业务报表。

    该公司使用WeBASE-Codegen-Monkey迅速生成了的代码，并根据实际需求进行了定制化开发，区块链上的数据可以实时导出到数据库中。利用WeBASE-Collect-Bee自带的Restful API，该公司的报表系统实现了和区块链数据的对接，可以获得准实时的各类业务报表。

    只需用户提供智能合约编译后的Java代码和相关的底层链、数据库的基本信息，WeBASE-Codegen-Monkey就能帮助你自动生成一个区块链数据导出的组件。理论上可支持主流的数据库；现阶段，实测支持将数据导出到Mysql数据库中。

    4.2 支持自定义导出数据内容

    4.3 内置Restful API，提供常用的查询功能

    自带常用的Restful API，支持查询块高、块信息、Event信息和函数信息等。

    为了应对海量数据的导出，数据导出组件集成了sharding-jdbc,支持可配置的多数据源存储，读写分离和分库分表：数据可以存储到多个表中，也可以存储到多个库中。同时，内置的Restful API可以自动无感知地返回正常的数据。

    4.5 支持多活部署，多节点自动导出

    WeBASE-Collect-Bee数据导出组件支持多活部署，可自动进行分布式任务调度。

    4.6 支持区块重置导出

    数据导出组件基于区块高度进行导出，并支持指定高度重新导出数据。

    WeBASE-Collect-Bee可与grafana深度集成，支持自动生成dashboard实例，让您的链上数据了如指掌。

    4.8 提供可视化的互动API控制台

    集成了swagger插件，提供可视化互动API控制台。