区块链数据分析1-如何查询token余额

前文[1]中已经介绍了区块链的公开数据，今天分享一下如何查询 eth 和 token 的余额

公开数据集

bigquery.crypto_ethereum

以我目前认知对数据集里个别表的理解：

tokens: 记录了token的address、name、供应量和小数位数等信息
amended tokens: 修正的tokens表
balances: 用户的最新eth余额 (截止etl完成的时刻)
transactions: eth链上，原生代币eth的转移和gas费的消耗记录，即我们在etherscan上看到的Transactions
token_transfers: erc20上，token的流转记录，即etherscan上的Erc20 Token Txns
traces：没有看过，猜测包含了transactions表里没有的记录，即etherscan上的Internal Txns
logs: event log，即etherscan中的Logs，没有细看看过，猜测大神们从这里，etl出不同dapp的event，从而实现对不同dapp的独立分析
blocks: 没有看过，猜测包含了矿工的地址信息

ETH的余额和每日余额

直接看大神开源的代码吧

Top Ethereum Balance

(ps.上面是top用户的余额，要所有人的话，把最后的order和limit删掉即可)

比较绕的处理是: 交易的gas费只向转出方收取，而矿工的地址，则会奖励gas费，即对应代码中

-- transaction fees debits
-- transaction fees credits

这两段。

另外还需要特殊处理的，是链上的一些记账失败的记录，大神使用了下面的代码来处理，我没有细究:

    where to_address is not nulland status = 1and (call_type not in ('delegatecall', 'callcode', 'staticcall') or call_type is null)

Every Ethereum Balance on Every Day

这段代码就太神了，感兴趣的自己品吧

token的余额

还是大神提供了开源代码

Token balance for any address on any block height

跳转到medium后，直接搜"Token balance for any address"就能找到。

代码逻辑很简单，就是用流进地址的token数量减去流出地址的token数量。然而事情并没有这么简单，我们也遇到了github issue上，别的同仁遇到的问题，即有个别的token，通过上述方式计算出来，数量为负。

我的理解，原因如下：

token_transfers是大神们，通过event log筛选出Transfer函数的调用记录而已。所以没有通过Transfer函数记账的token流转操作，如Deposit或者Withdrawal，就被忽略了。

对这种特殊的case，上面的issue提供了两种解决方案

其中一种是针对该token，编写个性化的sql来查询余额，另一种则是大神提供的etl解决方案，单独把contract对应的event都洗出来，再基于event表来统计。

Event ETL

如何对特定的合约event进行etl，这篇文章[2]有介绍，这里不再赘述。

我们测试了基于WETH的event表来进行token balance的统计，是正确的。

Web3

最后，如果是开发dapp需要查询实时余额，不需要如上方法，直接起一个eth的节点，节点里实时存储了balance，使用Web3封装好的函数get_balance来获取即可。

[1] 区块链公开数据集
[2] How to get any Ethereum smart contract into BigQuery (in 8 mins)