Web3应用程序架构
图源：Preethi Kasireddy, The Architecture of a Web 3.0 application
如果对链上数据进行分类，大致可以分为以下3类：
交易数据：包含交易信息的数据，如转账资金、收发地址、手续费等；
区块数据：区块自身信息数据，如时间戳、验证者、包含的交易及交易排序等；
合约代码：区块链上部署的非用户交互产生的代码数据，即预先定义好的智能合约代码。
以以太坊为例，我们可以在区块链浏览器Etherscan上查询到任意一笔链上交易的信息。下面是区块#15537394上的一笔交易（交易哈希为0x3af096859a880d9c33718eda59cb96e1504db7390d0e086c7260d91e87139eab），该区块是以太坊Merge后的一个PoS区块。
链上数据分析市场规模
从目前数据服务来看，整体链上数据分析产品普遍采用订阅制模式盈利。TAM = 客户数量*周期平均消费频率*平均客单价
目前数据分析的业务可以分为ToB和ToC两种，其提供的数据服务可以大致分为数据API、更高粒度/定制化的数据表以及数据研究报告等。虽然链上数据公开透明且可以被任意访问，但只有经过有效的数据分析才能够得以发挥其作用，因此链上数据分析产品具有极高的附加值，诸多链上数据产品均主打专业用户，客单价均较高（$200/月以上）。
目前交易DeFi资产的唯一地址数有6.868M个，假如其中10%为意向用户，以Dune的月费$420为例，则TAM = 6.868M*10%*$420/月*12个月= $34.6亿/年。
然而，实际上由于各应用订阅的阶梯价格相差巨大，甚至可达数十倍，且机构与个人用户对数据服务的付费意愿及阈值存在显著差异，本文认为仅依靠TAM公式并不能准确测算链上数据服务的市场规模。作为参考，可以对比目前全球数据市场规模和数据服务巨头的估值：
根据Statista的数据显示，2022年全球大数据和商业分析（BDA）市场价值约为2743亿美元。而传统金融数据服务商Thomson Reuters的市值约为567亿美元。即使是商业智能应用，如Tableau，其估值也达到了157亿美元。而对标的链上数据分析平台独角兽Dune，其估值目前才刚达到10亿美元。
目前加密市场总市值刚刚回升至$1T以上，DeFi市场的总TVL也就不到$50B。但在牛市期间，总市值近$3T。细分到DeFi领域，Defillma 数据显示 DeFi TVL最高达到$180B。根据Grand View发布的报告，全球Web3.0区块链市场规模2022 年至 2030 年的复合年增长率 （CAGR） 为44.9%。Markets and Markets 的一份报告预测，到 2026 年全球区块链风险投资市场将达到 674 亿美元。目前，随着市场信心的回升，DeFi市场的估值将有所修复，链上数据产品依旧具有广阔的应用前景。据@0xwayne_z 估计，链上数据市场目前应有上百亿规模。
链上数据分析产品赛道拆解
我们可以从以下3个方面来对链上数据产品赛道进行拆解。
从数据栈角度来看，一个完整的链上数据分析流程需要经过以下几个步骤：数据抽取（Extract）→清洗转换（Transform）→加载（Load）到数据仓库→依据不同业务线及观测指标分析数据→输出量化结果。区块链数据产品可以分为数据源、数据开发工具（Data Dev）和数据应用（Data App）三类，而我们一般意义上讨论的链上数据分析产品主要包含后面二者。
从数据的处理机制来看，对数据的处理模式可以分为偏向web2原生还是偏向web3原生，即区分产品是移植并改良了web2的处理逻辑，还是基于web3活动数据的特性发展了独有的methodology。这个角度主要关注该数据分析产品是否能在web2找到类似的数据处理逻辑。
从数据应用领域来看，目前数据分析应用相对成熟的Web3大赛道有DeFi、NFT、GameFi赛道，因为这些赛道本身规模较大，对数据驱动的洞察需求较大，且产生的链上交互数据量和丰富程度也足以支持数据挖掘和分析。本文主要聚焦DeFi领域的链上数据分析应用，其中又包括市场、交易、钱包地址、资产组合、借贷、套利等不同维度数据的追踪洞察平台。
根据@zk7hao的划分，目前链上数据分析赛道的生态位已经有诸多玩家。依据面向用户的不同，Dapp可以分为面向消费端或面向企业和专业用户的产品，而数据开发工具又可以分为面向开发者社区和面向企业的产品。根据垂直领域的不同，又有针对DEX、NFT、AML、DAO等特定分析需求的数据产品。
加密数据栈产品生态图
图源：@zk7hao
DeFi数据分析产品竞争格局
作为目前数据分析需求最大的赛道，本文将重点对DeFi的数据分析产品进行解读。
Y轴——数据的处理阶段：数据开发到数据洞察
X轴——数据的处理机制：web2原生到web3原生
DeFi数据分析产品竞争格局
数据分析开发工具面向数据分析开发人员，可以完成ETL（即Extract-Transform-Load）的工作，将交易、状态和事件日志数据解析成可以用SQL或GraphQL等传统语言查询的格式并存储在数据库中，供后续查询。自由定制程度高，但不提供数据分析结果。头部应用：Dune Analytics.
数据分析洞察工具面向普通用户，提供可直接访问的数据内容，供投资者参考决策。一般会以数据可视化看板等提供结果，易读性强。自由定制程度低，用户只能阅读预先分析好的数据结果，较难按需求自行定制输出。头部应用：Nansen.
Dune、Footprint等对链上数据的再生产逻辑和web2世界的MySQL、Tableau类似，CoinMarketCap、CoinGecko也和传统金融市场的数据监控平台的逻辑相似，因此其数据处理逻辑偏向web2原生。
而Etherscan对链上交易和所在区块的扫描信息，包括收发地址、合约日志、交易顺序、验证者信息等，以及Nansen、EigenPhi、0xScope Watchers等对地址的资产损益计算、资金流向追踪分析也都是基于链上合约的交互而诞生。这些信息在传统金融世界要么是中心化存储、要么是缺失的，因此我们可以认为上述产品功能的数据处理逻辑偏向web3原生。
典型链上数据分析工具一览
数据分析开发工具
Dune
【核心功能】基于PostgreSQL数据库，Dune把 ETH的链上数据以结构化的形式存放到关系型数据库中，允许用户使用SQL代码进行自定义的数据分析并生成自己定制的数据可视化 Dashboard 供其他用户查看。
【商业模式】订阅制。截至2022年6月21日，Dune Analytics累计查询费用超1700万美金。
普通用户：免费
会员用户：$420/月，用户可以创建2000条4倍速高性能查询、100条私有查询、10个私有看板，每月可导出250条查询结果到CSV，以及隐藏水印。
精英用户：$1337/月，在普通会员用户的基础上，将高性能查询提升8倍速、数量提升至4000条，此外用户可以创建1000条私有查询、100个私有看板，每月可导出1000条查询结果到CSV。
Footprint
【核心功能】与Dune类似，Footprint允许用户自己定制数据分析图表，还提供原始和处理过的数据及图表工具，供用户定制自己的数据分析面板。
相对于Dune，Footprint更为新手友好，因为用户不必使用SQL查询，而是可以选择进入“图表（chart）”界面。此时界面类似Excel，可以通过提供的菜单完成筛选、排序、统计、透视表等分析，从而快速搭建自己的数据面板。
Footprint同样很重视开发者社区，在搜索栏可以搜索并查看其他用户生成公开的图表和看板，也可以复制其他用户的看板为自己所修改。
Footprint 目前支持解析24条链，是目前覆盖公链最广的数据分析工具。现在其支持解析的数据涵盖了 7,432个DeFi协议、435万个智能合约和429万个NFT等。
Footprint将数据分为金银铜三类，其中铜级别的数据是未经处理的原始链上交易、转账、活动、日志等数据，银级别的数据是多条链上的NFT、GameFi、Defi数据，对交易、地址等进行了提取和标记，而金级别的数据则是聚合过的业务级别数据，包括了用户画像、市值、TVL等数据，可以直接使用。
【商业模式】订阅制。
分析服务
免费版：包括每个查询 1G 数据限制、CSV 上传 5 次。
商业版：$299/月，付费功能包括访问完整的历史数据、每次查询 10G 数据限制、无限制的 API 上传、无限制的 CSV 上传及下载。
团队版：定制价格，包括定制数据、无限制的自定义警报和无限制的定制看板。
数据API
免费版：限制3,000次调用/月，100次调用/天，1 次调用/秒，可保存30天历史数据。
成长版：$79/月，限制300,000次调用/月，10,000次调用/天，10 次调用/秒，可保存6个月历史数据，可返回10 行静态数据，100行非静态数据。
专业版：$360/月，限制10,000,000次调用/月，10,000,000次调用/天，50 次调用/秒，可保存所有的历史数据，可返回10 行静态数据，100行非静态数据，可调用SQL API 数据库接口，另外赠送$299/月的商业版分析服务。
企业版：定制价格，包括可自定义吞吐量、定制API及其他个性化服务。
【洞察】Footprint有自己的研报专栏，会定期独立或合作发布研究报告。
GeniiData
【核心功能】和Dune类似，GeniiData同样是基于SQL查询语句的跨链数据分析平台，提供清洗过的可靠数据源，分析师可以通过写SQL查询创建图表、搭建可视化看板。
优势在于其支持一些别的工具不支持的链，如支持解析Aptos这种大热门新链。
目前GeniiData也拥有自己的开发者社区，可以查看用户自行创建和分享的看板。
【商业模式】订阅制。
免费版：不允许上传或导出csv数据。
Premium版：目前采取邀请制，可上传10张csv数据表，可无限次导出csv数据。
数据分析洞察工具
Nansen
【核心功能】Nansen 以“链上地址标签（wallet labels）”功能而出名。Nansen提供对钱包地址的标记和识别，具有目前最大的钱包地址标签库。目前在Nansen的主界面上，可以查询钱包地址的投资组合、公链宏观数据、稳定币和DeFi及NFT市场数据等。
Wallet labels 钱包地址标签：通过将钱包进行分类，原本匿名的链上地址会被打上多个标签，如智能合约、交易所、智能货币、基金、重度DEX 交易员、NFT 收藏者等。用户可以快速了解执行交易的钱包类型，方便对合约、项目等进行尽职调查，并从巨鲸、基金等钱包的地址活动中发现市场机会。
Smart money 聪明钱：Nansen的钱包标签中最有名的就是“聪明钱”。拥有聪明钱标签的是加密世界中的精英们的钱包地址，其中包括巨鲸、VC等用户的地址。追踪聪明钱地址的动向，可以帮助用户追踪巨鲸、重度DeFi玩家的实时动向。
Portfolio 资产组合：Nansen 的用户可以使用钱包地址登录他们的网站，登录后就可以在页面上查看钱包地址下所有的资产、交易记录、资产分析等。
NFT：目前Nansen推出了NFT Paradise、 NFT God Mode、 NFT Wallet Profiler和NFT Item Profiler、NFT Leaderboards，以及Smart NFT Trader看板等服务。在NFT Paradise（NFT天堂）页，用户可以浏览宏观 NFT 市场动态，包括来自 OpenSea 的地板价实时更新，还可以看到 NFT 趋势和热门 NFT 收藏品。通过NFT利润排行榜或通过 NFT 上帝模式识别出 NFT 巨鲸，找到特定 NFT 集合的顶级持有者，接着他们就可以利用钱包地址追踪，实时监控他们的活动，发现机会。
Token：Nansen新推出的功能，和NFT的看板类似，提供Token的宏观发行和交易数据，主打看板数据有Token Paradise和Token God Mode。在Token上帝模式，可以看到该token在CEX/DEX/聪明钱的持有分布和余额情况，以及交易的损益分布情况，从而辅助投资者做出决策。
Smart alerts 智能警报：Nansen 允许用户订阅智能警报，在他们订阅的地址产生交易活动时他们会收到通知。
Watchlist监控列表：用户可以向 watchlist 中添加想要监测的钱包地址，来随时监测该地址的动向。
【商业模式】订阅制。
基础版：$150/月，可查看Nansen的NFTs, DeFi, Wallets, Smart Money, Wallet 以及Token Watchlists数据及NFT研究报告，可以创建10个智能警报，并使用Nansen的投资组合追踪服务。
VIP版: $1,500/月，包括基础版所有功能，智能警报数上限提升至100个，可享受进阶的看板服务，包括筛选、csv导出等自定义功能。
Alpha版：$3,000/月，在VIP版基础上提供更多封闭社群和私人的投资咨询服务。
企业版：定制价格，在Alpha版基础上提供Nansen的API等自定义服务。
【洞察】Nansen有自己的研究专栏，会定期发布数据洞察报告和投研分析等文章。
Glassnode
【核心功能】Glassnode主要提供BTC、ETH和LTC链上的数据，包括各种建模后的主要市场数据指标、例如地址、代币分布、持币主体、费用、衍生品利率和杠杆、交易所资金、矿工、市场、盈亏、供给、交易数等，帮助用户全面分析全市场的持仓情况，作出交易决定。
虽然Glassnode提供的大部分数据均是官方建模的分析数据，但是目前在dashboard和workbench模块也提供了用户自定义功能，用户可以定义自己需要的指标，并在Glassnode Studio上生成图表。
【商业模式】订阅制。
标准版：Free，仅可观测第一层指标，且为24小时级别更新，限30次api请求/分。可观测完整的链上历史数据，不可观测衍生品历史数据，可创建1个警报。
进阶版：$29/月，可观测至第二层指标，第一层指标为1小时级别更新，第二层指标为24小时级别更新，限120次api请求/分，可观测1个月衍生品历史数据，可创建10个警报。
专业版：$799/月，可观测至第三层指标，三层指标数据均为10分钟级别更新，限600次api请求/分，可观测完整的衍生品历史数据，可创建50个警报。
机构版：定制价格，可观测至第三层指标；自定义指标+自定义查询。
【洞察】GlassNode在官网有研究专栏，会定期发布数据解读和每周洞察报告。
EigenPhi
【核心功能】Eigenphi 是一个针对DeFi的流动性分析的工具，主打MEV交易及其关联分析。目前EigenPhi提供实时的MEV数据，包括套利、三明治攻击、清算、闪电贷行为的实时监控数据，同时还提供当前交易热度最高的代币和流动性资金池的相关交易数据，以及对恶意代币（Malicious Token，可能会在不通知用户的情况下收取转账费或交易费的代币）的识别。
MEV交易数据：即最微观的数据层次，包括该笔交易的MEV类型（套利/三明治/清算、是否使用了闪电贷）、MEV搜索者的EOA地址、MEV机器人合约地址、该笔交易所在区块、交易中的内部代币资金流、gas费及损益计算。
MEV合约/地址数据：中观数据层次，包括该地址发起的MEV类型及对应的损益统计、投资回报率、经常交易代币、接受MEV交易的矿工比例及近期该地址参与的所有MEV交易列表。如果该地址是三明治交易的受害者，还可以查询到其在查询时段内被攻击的次数、损失金额及对应的三明治交易和攻击者。
MEV市场数据：宏观数据层次，反映了整体市场的活跃和损益情况，包括不同MEV类型交易的损益分布和变动情况，以及利润最高的MEV交易排行榜，还有MEV交易中的热门代币及代币对流动性池。在主功能页右上角的Reports菜单里，EigenPhi还为上述数据提供了每日汇总和排名。
MEV实时流监控：实时的MEV交易展示流也能够方便搜索者迅速定位目前发生价格异动的代币和代币对流动性池。假如MEV实时流的交易代币都是WETH/USDC，那么很有可能是某一个WETH/USDC流动性池与其他的池存在价差，从而出现了大量的MEV套利机会。
EigenTx：EigenPhi开发了针对套利、三明治攻击等交易内部资金流向的可视化工具，使用地址：https://eigenphi.io/mev/eigentx
输入交易哈希，就能够提供该笔交易中所有代币的流向图，方便用户识别出该笔MEV交易的交易策略。例如，下面这笔交易就是搜索者发WOOF/WETH在两个流动性池中存在兑换价差，于是先发给MEV机器人合约0.01个ETH，然后在Shibaswap的一个流动性池 （SSLP） 中把ETH换成了29.76 WOOF，并把这29.76 WOOF在Uniswap V2的一个流动性池中换成了9.959个WETH。该笔交易付给了矿工0.9954个ETH作为矿工费，并把剩下的钱分别转给了两个外部地址。
【商业模式】公众端免费。面向机构提供数据API和定制化研究合作服务。
【洞察】EigenPhi在官网有研究专栏，提供了针对DeFi领域中MEV套利、流动性、安全事件的数据分析研究报告。
0xScope
【核心功能】和Nansen有些类似，0xScope协议同样主打地址识别，只不过其重点强调在对地址的关联分析上。根据0xScope官方的说法，该协议旨在通过地址归集（clustering）算法对多地址背后的实控主体，即对“实体”（entity）进行识别，并查看关联地址之间的交易。目前0xScope提供两种数据服务，API和数据分析工具Watchers。
API：开发者可以调用0xScope的API对钱包、代币、合约等地址进行查询，API文档：https://0xscope.readme.io/reference/chains
Watchers：0xScope基于其协议自行开发的工具，使用地址：https://www.watchers.pro/
和Nansen类似，Watchers也提供了地址标签，地址近期交易活动等数据。不同的是watchers还可以查看关联地址及关联交易，查询地址之间的资金流向，并还可以对该实体关联交易进行反洗钱（Anti-Money Laundering, AML）风险识别。
此外，在watchers上还可以查看钱包、代币、智能合约和项目的具体情况。对于项目评估而言，因为Watchers采用的地址归集算法可以识别多个地址背后的唯一实体，能够方便找到“脱水后”的真实交互用户数据，非常适合进行尽职调查。例如，对于AAVE，可以查询其目前活跃的实体数和代币价格。假如一个新上线项目的新增地址数为10万个，但对应实体仅为1万个，说明新增用户很大可能存在刷量行为。
【商业模式】订阅制。
API
免费版：100,000积分，每秒限5次调用。仅能访问公开端点（endpoints）。
进阶版：$180/月，3百万积分，每秒限5次调用，可以访问API端点。
企业版：定制价格，自定义API调用，可以访问所有端点，也可以定制端点。
Watchers
免费版：监控列表最多跟踪5个实体；仅能选择置信度（certainty）固定为70%的地址；对地址的关联分析仅能查看最高三级的相关地址；仅能设置1个警报，每小时50条警报推送。
Pro用户：$28/月，付费功能包括无限制的实体监控列表和自定义置信度的地址；可查看与查询地址归集的所有层级的相关地址；能设置10个警报，每小时200条警报推送。
【洞察】Watchers在工具内发布了一些针对特定事件和实体的数据看板，包括对FTX & Alameda Research事件以及对各大CEX的持仓概况的追踪看板。
总结
1. 链上数据分析的高附加值特点决定了其服务的用户差异化较大，因此商业模式多为订阅制，且阶梯定价的结构陡峭。在扩张路径上，目前数据产品也出现了两种分化的发展场景：一种是注重开发者和用户社区建设，主要面向开发者及技术人员，通过激励社区贡献，鼓励用户独立发布数据洞察，从而建立产品的正反馈循环，像头部的Dune，以及后起之秀Footprint、0xScope、EigenPhi等都相对注重社区建设。一种是基于自身产品强大的分析能力，主要面向专业的机构投资者群体提供独家的定制数据洞察服务，比如Nansen和Glassnode。在我看来，在建立起成熟的开发者社区后，通过产品迭代和社区反哺，社区驱动的数据工具同样也能够产出相对优质的洞察，如Footprint、EigenPhi、0xScope目前都有发布独家的研究报告，我认为在未来两种模式结合发展才会是主流。
2. 链上数据的公开透明特性导致链上数据服务商不能够再像Bloomberg、Reuters等传统金融数据巨头一样通过贩卖即时的金融数据和信息盈利，从而转向由海量链上信息寻找增量。目前头部的链上数据分析工具的数据处理逻辑多处于从Web2往Web3过渡的阶段，未来面向DeFi的数据分析服务一定是根植于Web3原生数据特性的，特别是基于智能合约代码逻辑的数据洞察能力，将会成为Web3世界的数据分析平台最重要的护城河。
3. 站在用户的立场上，我也始终坚信，相对于由叙事驱动的分析逻辑，回归数据驱动的分析逻辑才更能在升温的市场情绪中寻找理性的脉络。数据分析赛道作为区块链行业发展的基础设施之一，其市场价值只会随着行业整体的发展而不断提升，未来前景广阔。
举报电话: 13816368049
