你可以看看著名分析数据服务商 nansen 早期实践的 https://github.com/blockchain-etl/ethereum-etl 最终可以导入到 sqldb https://github.com/blockchain-etl/ethereum-etl-postgres

最后你会发现存储也是个最费钱的事情，如果你做的数据颗粒度越细存储成本就越高，仅仅转账以太坊就需要 2T ，如果把各种业务结果结构化存下来不会少，再加上快照型数据那更是天量

如果你想分析各种各样的链，可以 github 上搜索各个链的浏览器实现，每个链都有差异，像 nansen 就做精以太坊系的

---
这个事情实际上区块链相关服务商都会做自己做这个事情，我们厂是做钱包的，从 2016 年就在做这块，v2ex 区块链节点下右边有我们招聘广告，和 etherscan 是很早合作伙伴（他们处理这么多数据成本控制是件难事）

最近这个仓库的星星上升很快

https://github.com/samber/lo

之前范型未出来之前好几个 FP 库用的人少，其中不受还被作者自己弃库了，现在可能会变得不同

1. 从需求出发会很好做优化
- 如果你只是分析数据不去做验证可以把里面签名和共识层相关参数拿掉，数据量能压缩很多
- 如果你只是要分析特定 topic ，那么很多垃圾交易可以直接丢掉，transaction 里的 input 只切前面的 4bytes 存剩下扔掉，eventlog 只保存 topic0 ，剩下 topic 和 data 扔掉

---
2. 从现有基础设施出发，
- 可以把 hash/address 改成 bytes ，amount 类都用 bigint 存 存储和搜索效率都能提升
- 直接用 google bigquery 里已经弄好的 eth etl 数据，问题是数据 T+1 ，并且费用按照查询源数据扫描量计算

---
上述除 gcp 产品外用单个 mysql 都能轻松处理，没必要过早优化

Andreas 的书一直是最好的入门学习材料，直接开源在 github ，也能搜索到对应的社区中文翻译
- mastering bitcoin https://github.com/bitcoinbook/bitcoinbook
- mastering https://github.com/ethereumbook/ethereumbook

然后去看以太坊基金会的开发者页面，上面有大量教程和文档索引，以太坊的 EVM 模式作为应用最广泛模式
- https://ethereum.org/en/developers/

实际上在行业里写公链的比较少，就像现在现在的互联网开发写操作系统写数据库人少写业务多

从 dapp 开发来看，我最喜欢的 https://github.com/scaffold-eth/scaffold-eth 这里有涉及面比较广的合约相关开发上手例子，而且他在 youtube 上也有对应的教程，讲解的时候非常热情洋溢

---
上面一直说没技术材料只有炒币教程的可能你们没用对搜索引擎（只用百度？），也只找的中文，英文材料有很多也很详尽，从入门到前沿高阶都有，上面一位朋友贴的名校教材也很好

> 对早期参与者来说可能不是问题，因为比例就是固定的。但是后来的人要参与的第一步就是法币兑换 ETH ，这个时候就尴尬了。

@Livid 我最近觉得这个问题是这样的，和大城市一样，任何人进入大城市买房都要给一笔不小的资金，而早期还未开发起来的城市房产的价格肯定是低的（比如 90 年去深圳买房）。但最后所有想在市中心能占据标志地位的机构都愿意付出这笔不小的开支。

而链上生态建设实际上和地区城市差不多，当一线的资源和价格已经容纳不下这么多人时，就会许多人到二线三线，这就像最近一年大量新用户首先 onboard 到各种侧链，二层网络一样。而二层网络的安全性由以太坊这个一层中心来保障守卫。

实际上光纤也一样，普通人不需要直接去支付海底光缆费用，而是从分销商（网络接入商）来获得低价，这个逻辑和上面的侧链+二层一样。遵循这个逻辑的东西还能举出很多，比如上面提到的普通人不会懂的 Unix/Linux 。


---
> Gas 谁拿走

@yimity 八月份之前全是由矿工拿走，硬分叉实施 EIP1559 后，矿工除了固定的 2 ETH 外小费部分几乎比之前少一半，固定由市场波动产生的基准部分烧毁，截止目前已经烧掉 ~130w ETH

https://watchtheburn.com/insights


---
很开心看到上面👆许多人能理解并写下理性见解参与讨论，而不是看到区块链就开始无端嘲讽甚至谩骂。

年中一段时间一直在 ~200gwei ，最近降下来很多，上周几次下降破 30gwei

大家都说未来用户在 Rollup ，L1 是来保障 Rollup 的

从你的头像更像是隔壁 RSS3 来招聘的😂

@jayLink 别，什么这个链那个币都是空气，没有价值，违反公序良俗

大部分人的共识才是最强的共识，卖的最贵又好用的品牌才是最好，买股票就买蓝筹，想一夜博涨停分分钟亏光

你虽然见过 1 美金 btceth ，觉得现在贵不能上车，就像老一辈几毛钱买过肉现在觉得什么都贵一样，价格心理锚定是很主观的，但肉价房价该涨还是得涨

在现在这个生态里基本是你敢想敢做就有人愿意买单，完完全全开放的金融市场，而且目前还处于能开脑洞的程序员主导的早期阶段

有些稳定币就是 1:1 存款保障的（有合规机构背书）
- $USDP https://paxos.com/usdp/
- $USDC https://www.circle.com/en/usdc

有些是靠质押其他资产生成（意味着你的抵押物掉价会被拍卖）
- makerdao<https://makerdao.com/en/ecosystem> 发行的 $Dai<https://oasis.app/>

通过多种资产混合（自由市场供需定价）产生
- $3crv https://curve.fi/ 本质上是流动性凭证

通过链上市场流动性铸造
- https://abracadabra.money/

通过衍生品铸造出来
- $sUSD https://synthetix.io/synths

有些是凭空按照博弈论动态调整发行量的
- $AMPL https://www.ampleforth.org/

---
如果全需要对接审批出入境，这些东西根本出不来，哈耶克各种畅想也只能写写字，当时完全不可能去做实验，现在你有台能上网的电脑会打字就能在自由金融市场里验证想法，就有机会成为社区明星，当然不懂的人只会骂你是臭不要脸来挥舞镰刀的。

看情况应该是，以太坊上的 erc20 btc，被骗扫描了二维码做了授权。

可以看看这篇过度授权的说明 https://www.yuque.com/imtoken/gium5q/gzk9gz

授权代币转账功能是很高的权限，假如你不清楚一个二维码在做什么，还是需要弄清楚。

---

@dahaibanfeiwu 金额大的话可以报警，一定概率能找回来。

@cheitu

这块的利益，现在除了几个单兵极强的小高手外，大部分都是团队（部分是做量化做市的），基本上单人只能不断去找新机会去做大部队还没进入的空档。另外一直盯着也很累，还有可能会被人投毒把你利润捞走。

https://www.chainnews.com/articles/310928487071.htm

机会本身我兴趣不大，但可以给你一些思路，分享了解和实践过的方式方法，帮我实践一些想法和收集不同网络上的数据情况😺

aHR0cHM6Ly8wYmluLm5ldC9wYXN0ZS9HLU42TFl1bSNlUmJobzAtR0VRbDlReHRVVDBYV3dGMXNMYkRzVzlSTlNHMFZBK2RTZXNv

@leoli

你这个社区看是个波卡生态的小圈子区块链社区？

目前以太坊拥有的社区是最大的，最多开发者，最多持币者（链上活动钱包地址）。为什么不选择做个广义的讨论区块链的社区？会不会容易把自己局限死，然后像这一两年的 EOS 社区和项目纷纷改名到 DotXX，可能过段时间又需要改名？

@flowerwrong

cloudflare 从 2018 年就开始做 ipfs 网关

https://blog.cloudflare.com/distributed-web-gateway/

@cheitu

> 你好，请问是否存在一种攻击方式，自己的交易请求发送之后，马上发送大量无效交易请求，使得其他人请求无法处理？这些无效请求比如转一笔小额，gas price 都是设置的最低。

兄弟感觉你不是一直在整个行业内，但是很懂嘛😄

你说的这个问题是存在的，前提是攻击者愿意给出市场中竞价者更高的矿工费，这由市场决定，理论上这种方式的成本是无上限的，全年在网络堵的时候，一笔简单转账愿意给好几个 ETH 的大有人在。

你上面讲到交易所“智能”链，他们的 gas price 是固定的，甚至看上去是按照先来先到 FIFO 排序的，然后他们的一个块很大，出块时间短，你要霸占住区块，也是要花不少钱的。

@cheitu 这个要具体问题具体分析，有很多公链的 PoS 就是少数节点的小圈子中心化，很多神奇的方式都能搞。

@lemayi 整个以太坊市场在去年年底的时候，应该是每个月几百万美金的套利规模，现在应该有千万美金级别，你看做 mev 的 flashbots 做的一个搜寻器，它能看到的最近三十天是在 8700w 美金。

https://explore.flashbots.net/

去中心化金融里的去中心是很重要的，普通程序员你只要理解一些项目的经济机制清算机制就能写代码去捕捉机会，而不是像传统金融一样，你要申请 api 要签约要付费给中心化机构买专线（这都是一定程度上中心化造成的垄断）。

这个不是由网络中的路由节点决定的，而是打包的矿工决定，你自己跑节点对此毫无帮助。你说的套利机会中的公平竞争假设实际上也是不成立的，因为假设矿工可以自己参与，或者与外部同谋。

对于你检测套利机会是可以通过 websocket subscribe 去监测事件再做计算，现在较高优化的套利程序都是直接在 geth 上开发，比你搭一个节点再部署一份自己程序更快。

现在 60%的以太坊矿工都跑了 mev-geth，你可以了解一下，套利失败不收费，竞争的方式是当前机会窗口下谁怎么给矿工给予最多就直接排在区块最前面（对，就是在最前面！）。

但如果矿工或者 mev-geth 运营方的 flashbots 做了审查帮助自己人你也竞争不过。对此我写过一篇观点 https://ethfans.org/posts/a-wild-MEV-age-is-coming-how-to-keep-fair-and-transparency-of-mempool

是想在 IPFS 这类去中心化文件存储平台上做一个内容平台吗？