ETHER:Paradigm：如何使用链上数据进行策略研究？_AVE

作者：

时间：

原文标题：《UsingOn-ChainDataforPolicyResearch:Part1》

原文作者：BrendanMalone，Paradigm

原文编译：Kxp，BlockBeats

I.引言

Crypto政策在制定时很少会用到真实且细化的数据，原因主要有以下三点：

1.新兴技术领域的相关政策大多还停留在理论及定性分析层面，早期阶段很少会使用到数据。

2.尽管链上数据全部开放透明，但要想访问这些数据人们需要在短期内完成大量工作，即便对于Crypto原生从业者来说也是如此。

3.区块链「取证」公司和数据供应商有少量的数据产品，但它们都不具备灵活性/可定制性，也不能满足经济/金融研究人员的需求。

许多现代经济学和金融学研究人员错过了将工具应用于Crypto数据分析的机会。从设计上讲，Crypto可以向任何人提供细化数据，但大部分政策在制定时仍依赖于CoinMarketCap等外部预聚合时间序列数据源，而不是直接从数据源获取数据，这又是什么原因导致的呢？

正如政策制定者可以查询美国每家主要银行的资产负债表，并逐秒观察消费者存款的变化一样，他们也可以毫不费力地查看整个Ethereum生态系统的Stablecoin发行情况，但大多数分析Stablecoin的政策文件却采取了一种探讨假设事件的分析方法。

ParaSpace：安全补丁审核与测试已完成，3月25日前将分阶段重启协议:3月20日消息，NFT借贷协议ParaSpace发推称，安全补丁的审核与测试现已完成，以便在主网上重启协议时确保用户资产安全。提现时间锁合约正在完善中，将在未来几天进行审核与测试。ParaSpace团队决定分阶段重新开放协议，将优先考虑还款、供应、清算、贷款、提款与时间锁的增强。团队预计所有平台功能将在3月25日之前上线。平台第一阶段的还款功能已经上线，希望在清算仍暂停的情况下为用户提供机会来偿还债务。

团队将开始为用户手动认领与复利APE池中的APE质押奖励，直到协议上线。仅在APE池中拥有APE的用户在分阶段重新开放期间仍能获得自动复利的收益。[2023/3/20 13:14:48]

我将在本篇中具体阐释以下几点内容，希望可以对想要使用链上数据的政策研究人员有所帮助：

·链上数据的获取方法

·链上数据所采用的结构

·提取和使用链上数据的几个基本工具

在随后的文章中，我将探讨如何使用这里收集的数据来判断Crypto市场的走势。同时，我将在结尾发布可供免费使用的数据和代码。通过阐明如何在区块链中查询数据，我希望向大家展示Crypto的开放性可以为数据决策开辟的新方法。

Partisia Blockchain和Insights Network合作推出区块链和MPC技术，并完成首次集成:4月22日消息，多方计算（MPC）多年来已有广泛的发展，为下一代Web3互联网提供了理想的基础设施。Partisia Blockchain基金会合伙人、教授兼首席密码学家Ivan Damgard表示：“MPC可以进行任何类型的私人计算。换句话说，MPC是一个完全分布式的加密计算机。这与零知识证明非常不同，零知识证明只有两个参与方，结果是二元的，即陈述是真是假不得而知。”

此类解决方案适用于任何类型的企业，包括供应链公司、SaaS（软件即服务）提供商、金融科技应用程序甚至社交媒体。例如，Partisia Blockchain和Insights Network合作推出的区块链和MPC技术，在社交媒体平台上进行了首次成功集成。

对于需要处理数百万甚至数十亿事务的平台，可扩展性是通过分片技术解决的。一个新的分片扩大了网络的容量，使Partisia区块链能够满足任意数量的TPS。例如，社交媒体提供商可以每天处理数十亿个流程，同时在用户隐私方面做好保护。

以用户隐私保护为中心的可扩展解决方案只是全局中的一部分。就Partisia Blockchain而言，先进的互操作性框架，模仿了复式簿记系统，使得任何人都可以轻松检测到任何欺诈行为。在客观欺诈的情况下，争议程序将会补偿损失。这种设置让不同的区块链网络可以有效地使用相同的术语，并且安全地传输数据。（福布斯）[2022/4/23 14:42:53]

如果您就职于一家监管机构或研究机构，并在获取Crypto数据时遇到了困难，欢迎与我们取得联系分享你的想法，了解Paradigm可以为您提供哪些帮助。

加密基金Paradigm已至少投资21家初创公司和协议:Paradigm是专注于加密的基金，由Fred Ehrsam和Matt Huang于2018年创立。正如Paradigm的公开投资组合显示，其关注领域包括DeFi协议、基础设施提供商、为机构客户提供金融服务的公司以及研发团队。总体而言，Paradigm已经向5个垂直领域的至少21家初创公司和协议进行了投资。（The Block）[2020/11/7 11:55:43]

II.链上数据获取方法

一般来讲，数据收集工作应集中在一个区块链及特定项目的子集上，这些项目主要是以美元计价、法币支持的Stablecoin，具体包括USDC、Tether、BinanceUSD、PaxDollar和GeminiDollar。该方法广泛适用于链上数据，即便你想创建一个不同的数据集。

Etherscan这类区块浏览器非常适用于查看交易快照以及收集特定智能合约的信息，但根据我的经验，它们却不太能用于生成大型数据集。在收集和处理原始数据时，你基本上有两个选择：在本地运行一个完整的节点，或查询已经从链上直接写入原始数据的数据库。第一种方法对于专业技能和计算资源的要求比较高，而第二种方法则只需要基本的SQL和Python技能就可以实现，所以这里我们将采用第二种方法。

现场丨Parity亚洲技术总监贾瑶琪：Parity和Web3基金会将加速推进Web3.0生态的基础设施建:金色财经现场报道，由Web3基金会主办的Web3大会10月29日在上海举行。Parity亚洲技术总监贾瑶琪在会上表示，Parity和Web3基金会将加速推进Web3.0生态的基础设施建设，尤其是Polkadot平行链和跨链技术。会继续通过Web 3.0的Bootcamp，builder program帮助生态项目的技术、市场推广和商务合作，继续做好连接中外的枢纽，引进优质的海外Web3项目，同时推出国内优秀的项目参加顶级活动如Web3 Summit, Sub0等。与此同时，还将继续推出优秀的Substrate课程，帮助开发者和工程师更好构建区块链系统和应用，降低开发门槛。举办线下workshop、meetup和大会，加深与各个新老项目的进一步合作，共同建设更加美好的区块链生态和Web 3.0。[2020/10/29]

Dune和谷歌云平台的BigQuery有最新的链上数据，这些数据都以表格的形式存储在数据库中，研究人员可使用SQL命令对其进行查询。Dune还提供免费的数据库，不过其速度较慢，而且还有些局限性，但它非常适合于A/B测试的数据查询，也有助于你熟悉数据库的运行模式，尤其是对于那些不善于使用SQL查询关联数据库的人。BigQuery虽然更加灵活快捷，但谷歌会对计算资源收费，所以其价格也相对昂贵。我在第一次处理数据时，为了节省费用，我会先在Dune中测试查询语句，然后再将其输入GCP中运行。在大多数情况下，这种方法都能起到很好的效果

Paradigm获Dragonfly和多家交易所战略投资:加密货币机构级交易通讯平台Paradigm宣布完成一轮战略融资，投资方包括DragonflyCapital、DigitalCurrencyGroup、OKExVentures、BybitFintech、AlamedaResearch、NewYorkDigitalInvestmentGroup（NYDIG）、CoinShares和YleanaVenturePartners，而且2019年融资的领投方VectrFintechPartners也参与了此轮融资，并担任董事会成员，此次的融资额未披露。

Paradigm称，在宣布此次融资之前，平台的衍生品交易量就已经突破了15亿美元。Paradigm表示此轮融资的目的是新增支持更多交易所和资产、新增自动化交易执行工具套件、拓展亚洲市场。[2020/7/2]

III.链上数据结构

要回答这个问题，你首先需要搞清楚自己处理数据的目的。对于这个测试案例，我决定为主要的法定支持Stablecoin建立一个大型的时间序列数据集，并观察一些特定的行为:铸币，烧毁(即停止流通Stablecoin)和转移。我之所以选择以这种方式进行研究，是因为政策制定者和学者目前最为关注法定支持的Stablecoin，所以这些数据在短期内可能相当有用。

以美元计价的几大Stablecoin都采用了ERC-20Token标准。顾名思义，ERC-20是一种在Ethereum上使用智能合约创建Token的标准化方式。如果你把区块链理解为一个巨大的去中心化Excel表格，那么智能合约就类似于Excel函数。在函数中输入参数之后，它将使用其内置逻辑产生一个特定的输出结果。

我们可以使用智能合约的Ethereum地址来对它们进行定位，这些地址是区块链数据结构中的唯一标识符：

·USDC

·TetherUSD

·BinanceUSD

·PaxDollar

·GeminiDollar

与API类似，智能合约也是可以重复使用的程序。每次智能合约获得互动指令时，都会产生该互动的记录，并由Ethereum协议以日志的形式记录在区块链上，而这些日志则构成了智能合约活动的可靠信息来源。

当智能合同执行一个特定函数时，例如烧毁ERC-20Stablecoin以将其从流通中移除，该函数及其参数将作为交易日志记录在区块链上。

在下面的交易中，USDCStablecoin的发行商Circle烧毁了价值1056.92美元的USDC。

如果你切换到「日志」标签，你就可以查看交易事件日志，相应的字段为

·地址：智能合约的合约地址。USDCStablecoin的合约地址是0xa0b86991c6218b36c1d19d4a2e9eb0ce3606eb48。

·名称：智能合约执行的函数，以及该函数中的参数。在这里，智能合约正在调用烧毁函数，该函数接收的参数指定了所烧毁币的发送地点和烧毁币的数量。

Etherscan的输出结果还会显示主题和数据字段，这些字段包含了我们在分析交易时需要解析的大部分相关信息。

·Topic0是函数签名的哈希值。从本质上讲，它会将函数及其参数经由单向算法得到一个唯一的函数哈希值。Ethereum使用的是Keccak-256哈希函数，当你通过Keccak-256算法输入函数签名时，它总是会产生相同的哈希值，所以任何时候该哈希值出现在日志中，你都能确信是调用了同一个函数。

·Topic1是烧毁函数的一个索引参数。在这里，Topic1是烧毁的Token被发往的地址。(注意：如果烧毁函数有更多的参数，这些参数将作为额外的主题出现）

·这里的数据字段表示所烧毁Token的数量。

既然我们已经了解了链上数据的基本结构，就可以开始从Dune和GCP中提取数据了。

IV.提取并处理链上数据的基本工具

如前所述，在这个例子中，我选择从现有数据库中提取链上数据，而不是访问Ethereum网络上的活动节点。为了便于理解，我使用SQL从GCP提取了大量原始数据表格，然后在Python中使用pandas库对其进行清理。

当我们从GCP提取表格时，我们将使用BigQuery，它储存有很多Ethereum的数据表，如下图左边一栏所示。当你点击一个表格时，相应的数据库模式就会出现，就如下图中的ethereum.logs表。与此同时，其中涉及的地址、数据和主题都会记录到日志数据中去。

下图中的查询语句将用于提取日志表中涉及与USDC、TetherUSD、BinanceUSD、PaxDollar或GeminiDollar合约互动的所有记录。除了ethereum.logs中的信息外，一些额外的信息也很有用，所以我还合并了ethereum.block表中的数据，其中涵盖了Gas费等信息。