Bài viết này đề cập đến tất cả các công cụ dữ liệu hàng đầu và cách sử dụng chúng từ góc độ nhà phân tích dữ liệu.
Viết bởi: Andrew Hong , Hiệu trưởng Dune Analytics
Tổng hợp: Con đường của DeFi
Tín dụng hình ảnh: Được tạo bởi Maze AI
Lại một năm nữa trôi qua mà cứ như mười năm! Trước khi đọc bài viết này, tôi khuyên bạn nên xem hướng dẫn năm 2022 của mình vì hầu hết các khái niệm vẫn phù hợp với ngữ cảnh. Hướng dẫn Công cụ năm nay cũng bao gồm ba trụ cột tương tự, nhưng với một góc nhìn mới so với các năm trước:
- Công cụ : Tổ chức Công cụ Dữ liệu theo Tiện ích
- Suy nghĩ : Về khả năng kết hợp và tiếng ồn trong dữ liệu được mã hóa
- Nhà phân tích nhóm : Xây dựng hình ảnh của trình hướng dẫn web3
Khi lĩnh vực này trở nên phức tạp hơn, tôi đã chia hướng dẫn thành ba phần. Phần này chỉ bao gồm các công cụ dữ liệu web3, đặc biệt là trong bối cảnh phân tích dữ liệu.
Về công cụ dữ liệu:
Mọi công cụ -- cho dù ban đầu chúng là công cụ lập chỉ mục, trình duyệt, công cụ ghi điểm, công cụ truy vấn, v.v. -- hiện bao gồm truy vấn thô và truy vấn tổng hợp với một số hỗ trợ API. Vì vậy, thay vì nghĩ về các công cụ dữ liệu như một ngăn xếp công nghệ, tôi nghĩ về nó như một ngăn xếp tiện ích.
Điều này có nghĩa là tất cả các công cụ đều có một số "trường hợp sử dụng" trong quy trình phân tích mà chúng phù hợp, do đó tạo thành một ngăn xếp. Tôi đã liệt kê các công cụ hàng đầu mà tôi biết trong hình bên dưới! Sau đó, tôi sẽ giải thích ngắn gọn từng công cụ trên cơ sở lớp tiện ích.
Một số tuyên bố từ chối trách nhiệm:
- Tôi hiện đang làm việc toàn thời gian tại Dune .
- 🧪 chỉ ra rằng phần này của sản phẩm vẫn đang trong giai đoạn thử nghiệm nội bộ. Do đó, bạn cần yêu cầu quyền truy cập từ Teams.
- Tôi đã chọn không bao gồm các sản phẩm API thuần túy trong phần phân tích này vì mọi công cụ hiện có API với sự kết hợp của dữ liệu thô/đã giải mã/tổng hợp. Tôi không thể bao gồm hợp lý tất cả các sản phẩm ở đây. Nếu bạn muốn xem hướng đi của một số API nâng cao, hãy xem bài viết này .
- Trên thực tế, các nhà cung cấp bảng điều khiển truy vấn như Dune có thể hỗ trợ tất cả các phần của chức năng này. Tuy nhiên, bảng điều khiển dựa trên truy vấn chưa thể so sánh với UX (vòng lặp chức năng và độ trễ thấp) của các phần cụ thể của ứng dụng chuyên dụng, vì vậy chúng không được đưa vào bài viết này.
Khám phá: Tìm và so sánh các xu hướng cấp cao
Tất cả các cuộc hành trình bắt đầu ở đâu đó. Tôi sử dụng một số công cụ trong phần này để nghiên cứu một chủ đề và khám phá các xu hướng mà tôi muốn khám phá thêm. Tìm đúng câu hỏi để phân tích là một trong những phần khó nhất của web3 và việc sử dụng các công cụ này có thể giúp việc này trở nên dễ dàng hơn rất nhiều.
💡 OurNetwork và Dune Digest là hai trong số những công cụ tổng hợp tin tức tốt nhất cho Alpha phân tích on-chain. Nhiều hành trình khám phá của tôi về các công cụ khác nhau trong phần này bắt đầu bằng các bài báo của chúng.
giao thức/miền
Để hiểu cách một giao thức (hoặc miền) hoạt động dựa trên các số liệu khác nhau, bạn có thể tham khảo một trong những công cụ này.
- Dune có thể được sử dụng để tìm bảng điều khiển chi tiết cho erc20s , NFT , đặt cược , AirDrop , đấu giá , v.v. Nó có một tính năng tìm kiếm gốc xếp hạng bảng điều khiển, trình hướng dẫn và truy vấn.
- Flipside có thể được sử dụng để khám phá các bài báo và nghiên cứu về khoa học dữ liệu như Nhóm thanh khoản PnL , Xếp hạng ví, v.v. Họ hiện đang thử nghiệm bản beta các tính năng bảng điều khiển mới hơn.
- DefiLlama có xu hướng nâng cao về TVL, khối lượng và sản lượng. Bạn có thể tìm thấy một số ví dụ hàng đầu trong bài đánh giá năm 2022 của họ .
- Giao thức/bảng pool Messari là một giải pháp thay thế tuyệt vời cho DefiLlama và đang phát triển nhanh chóng.
- Token Terminal làm cho việc phân tích truyền thống về giao thức (dapps) hoặc doanh thu, thu nhập và phí của chuỗi trở nên dễ dàng.
- Artemis có các biểu đồ tốt nhất về phát triển chuỗi/hoạt động xã hội và bao gồm các số liệu tổng quan về chuỗi. Và chúng tích hợp độc đáo với google sheet.
Mã thông báo
Mặc dù bạn có thể sử dụng nhiều bảng điều khiển truy vấn tùy chỉnh hơn (chẳng hạn như những bảng điều khiển được liên kết trước đó) để đi sâu vào các loại tiền, nhưng bạn có thể cần một giao diện sản phẩm được tối ưu hóa hơn để giúp quá trình khám phá và so sánh nhanh hơn và dễ dàng hơn.
- Mô hình Token God của Nansen và thiên đường mã thông báo (defi/NFT) cung cấp cái nhìn sâu sắc về xu hướng phân phối, giao dịch và ví.
- DefiLlama cho phép bạn phân tích chặt chẽ khối lượng giao dịch và độ sâu Thanh khoản của các cặp mã thông báo .
- Parsec tiến hành phân tích mã thông báo theo phong cách Bloomberg thông qua một thiết bị đầu cuối có thể tùy chỉnh .
DAO/Quản trị
Quản trị ngày càng quan trọng để theo dõi các xu hướng khi các thay đổi/cập nhật giao thức trở nên thường xuyên hơn và các kho bạc cần đầu tư hoặc chi tiêu tiền.
- Messari: Cung cấp thông tin chi tiết về các đề xuất bằng cách gắn cờ các cuộc thảo luận, tầm quan trọng, quy trình quản trị và DAOS phụ trong trình duyệt quản trị của họ .
- Kiểm đếm : Quyền bỏ phiếu là một tổng quan ban đầu tốt về DAO theo thời gian và chúng có tính năng lọc theo chuỗi để tìm DAO.
- Phòng họp : Có một nguồn cấp dữ liệu có thể lọc tốt về tất cả các đề xuất DAO , mặc dù tôi ước có nhiều tham số hơn để lọc (tức là các đề xuất trị giá hơn 20.000 đô la).
- Agora : Hiện tại nó chỉ hoạt động với Danh từ, nhưng rất hữu ích để hiểu hồ sơ cử tri và mục tiêu đại diện .
Khám phá: Xem nhanh các địa chỉ và giao dịch để biết ngữ cảnh chi tiết
Khi bạn phát hiện ra một số xu hướng thú vị, bạn có thể muốn tìm hiểu giao dịch phổ biến trông như thế nào và ví/địa chỉ nào đứng sau tất cả các giao dịch.
Đây là bước mà bạn mở rộng phạm vi để đảm bảo rằng bạn không bỏ sót bất kỳ manh mối ngữ cảnh nào có thể giúp ích cho quá trình phân tích của bạn. Và trong một bước này, bạn có thể mở 20 tab khác nhau.
💚 Tôi đã tạo một bảng điều khiển giúp dễ dàng đi sâu vào bất kỳ địa chỉ hợp đồng nào và hiểu cách thức hoạt động của giao thức.
Trình hiển thị giao dịch
Các giao dịch có thể là bất kỳ thứ gì, từ chuyển ETH đơn giản đến kho tiền stETH/ ETH có đường cong đòn bẩy phức tạp hơn một chút. Trong quá trình này, chúng tôi thường cần bỏ qua các giao dịch, dấu vết, nhật ký, mã hợp đồng, dữ liệu trạng thái.
- Blocksec/Phalcon là công cụ tuyệt vời để nghiên cứu dấu vết và nhật ký giao dịch. Chúng minh họa rõ ràng thứ tự mà tất cả các cuộc gọi và sự kiện nội bộ được phát ra . Bản cập nhật mới nhất của nó thêm các đoạn mã và lưu đồ cân bằng vào công cụ.
- Trình khám phá Đa chuỗi nhẹ nhàng bao gồm phát hiện đoạn mã <> theo dõi nhanh nhất, trong số các tính năng khác. Nó có UX/UI mượt mà nhất so với bất kỳ công cụ nào, nhưng nó có thể hoạt động tốt hơn với các dấu vết nhật ký sự kiện và đoạn mã.
- Blocknative là một trình duyệt chuyên nghiệp dành cho mempool (hàng đợi giao dịch). Tại đây bạn có thể nghe các giao dịch được gửi tới bất kỳ hợp đồng nào trong thời gian thực.
Địa chỉ/Trình hiển thị ví
Đối với những công cụ này, tìm kiếm dễ dàng và nhanh chóng, phân tích chéo, kết hợp và chia sẻ số dư và hoạt động của ví là chìa khóa. Mặc dù có nhiều ứng dụng kiểu "danh mục đầu tư" hơn như zapper.fi và rotki , nhưng không có ứng dụng nào trong số này có lợi cho công việc phân tích dữ liệu và do đó không được đề cập trực tiếp trong phần này.
- Nansen đã tăng cường các tab và khởi chạy một bộ phân tích ví hoàn toàn phù hợp với trang phân tích tiền xu của họ.
- Zerion và Debank là những lựa chọn thay thế miễn phí tốt nhất cho Nansen khi phân tích ví trên nhiều chuỗi.
- Warden cho phép phân tích ví dành riêng cho DeFi (thanh lý, cho vay, v.v.) ở định dạng có thể tìm kiếm dễ dàng. Họ hỗ trợ AAVE và sẽ sớm hỗ trợ Euler, Notional và Compound. Tôi đoán công cụ này sẽ cần phần riêng của nó vào năm tới vì nó sẽ khơi dậy một làn sóng các nhà khám phá phân tích DeFi nặng ký.
- Khi bạn đã ghi nhớ một số đồng xu, Bản đồ bong bóng sẽ giúp bạn xác định các cụm và kết nối ví thú vị.
Hỗn hợp (giao dịch + địa chỉ/ví)
Đây là những giải pháp tất cả trong một để khám phá. Nó sẽ trở thành một lĩnh vực thậm chí còn đông đúc hơn, nơi sẽ tạo ra một số sản phẩm có mục đích chung mạnh nhất trong không gian -- và có khả năng là Google tiếp theo sẽ bắt đầu từ đây.
- Etherscan là công cụ tuyệt vời để nhanh chóng có được cái nhìn tổng quan về một địa chỉ. Tôi thường sử dụng nó cho các tab và để kiểm tra nhanh số dư cũng như lịch sử chuyển tiền đối với một loại tiền cụ thể (đối với một ví nhất định). Họ cũng có tổng quan về giao dịch cơ bản nhưng dễ hiểu nhất .
- 🧪 Onceupon.gg là giấc mơ của một nhà phân tích . Chúng hỗ trợ các cửa sổ nhỏ cuộn theo chiều ngang vô hạn và nhanh chóng lọc tất cả các giao dịch theo phương thức và nguồn gốc (bao gồm cả theo dõi) trong ngữ cảnh của các thực thể và mã thông báo cụ thể. Mọi giao dịch đều được gắn nhãn và mô tả theo cách mà con người có thể đọc được trước khi bạn nhấp vào giao dịch đó. Các nhóm cửa sổ và ví có thể dễ dàng chia sẻ và xử lý. Ngoài ra, tất cả các địa chỉ đều có tab "Hàng xóm" để nhanh chóng xác định các đối tác hàng đầu và bổ sung cho phân tích của bạn bằng hình ảnh mạng đồ họa.
- 🧪 Arkham là công cụ phân tích đối tác và mạng chuyên dụng nhất . Bạn có thể dễ dàng xem các đối tác/trao đổi và số dư giữa các cá nhân/nhóm và dễ dàng chia nhỏ các luồng chuyển tiền vào/ra theo giao dịch. Các công cụ mạng đồ họa của họ giúp việc theo dõi kiểu zachxbt trở nên dễ dàng hơn bao giờ hết - bạn có thể dễ dàng điều chỉnh thang thời gian để xem mối quan hệ của các ví cụ thể trong một khoảng thời gian cụ thể.
tự tổ chức
Các tùy chọn này cho phép bạn chạy cục bộ trình thám hiểm khối nguồn mở, cũng là một giải pháp kết hợp.
- Otterscan: Các chức năng cơ bản tương đương (đại khái) với etherscan .
- Trueblocks Explorer : Công cụ lấy lịch sử tài khoản nhanh nhất (có lẽ vậy). Các dự án cốt lõi nằm trong phần tiếp theo.
Khai thác: viết các truy vấn của riêng bạn cho dữ liệu trên chuỗi
Tất cả các công cụ SQL đều dựa trên đám mây, vì vậy bạn có thể sử dụng IDE trong trình duyệt để truy vấn dữ liệu thô và tổng hợp (ví dụ: nft.trades/dex.trades). Những điều này cũng cho phép các hình thức được xác định rõ ràng, chẳng hạn như bộ lọc giao dịch rửa NFT .
Phân tích giao thức, cộng đồng và mã thông báo tốt nhất bắt đầu từ đây! Một số công cụ có nhiều bảng chuyên biệt hơn, tôi sẽ liệt kê chúng.
Bậc miễn phí có sẵn (SQL)
Truy cập vào các công cụ này là miễn phí.
- Chuyển đổi (giới hạn miễn phí 25 giây, lâu hơn tối đa 10 phút đối với các gói hàng đầu).
- Flipside (giới hạn 15 phút miễn phí, không có kế hoạch). Hiện tại là người duy nhất có bảng lưu trữ/trạng thái, được cung cấp bởi TokenFlow .
- Dấu chân (giới hạn 20 phút miễn phí, gói trả phí với máy tính có thể mở rộng). Tập hợp lấy trò chơi làm trung tâm duy nhất mà tôi từng thấy.
- Dune (giới hạn 30 phút miễn phí, gói trả phí với máy tính có thể mở rộng). Công cụ duy nhất có bảng giải mã , do đó bạn không phải xử lý các chuyển đổi hex/bytea thô, lọc chức năng/chữ ký chủ đề hoặc các mẫu proxy/nhà máy.
Chỉ trả tiền (SQL)
Quyền truy cập vào các công cụ này chỉ khả dụng nếu bạn đang sử dụng gói trả phí và được phê duyệt để truy cập.
- 🧪 Nansen hiện đang thử nghiệm công cụ truy vấn mới của họ. Cuối cùng, bạn có thể truy vấn các bảng thẻ thực thể/địa chỉ của họ!
- Goldsky cho phép di chuyển các đồ thị con từ theGraph (hoặc tạo các đồ thị con mới) sang dịch vụ lưu trữ của họ. Bạn có thể dễ dàng soạn các đồ thị con, giải quyết một trong những thiếu sót chính của Đồ thị (mặc dù mất tính phân quyền).
- Phần tăng cộng hóa trị có một bảng lớn mà từ đó tất cả dữ liệu thô được truy vấn và gần đây đã bắt đầu thêm dữ liệu tổng hợp.
tự tổ chức
Đây là các gói mã cho phép bạn nhanh chóng tìm nạp dữ liệu thô, giải mã dữ liệu và tổng hợp dữ liệu (sử dụng một số nhà cung cấp RPC cho một chuỗi nhất định ). Ưu điểm là nếu bạn chạy các ứng dụng khách hiệu quả hơn (đặc biệt là Erigon ), bạn có thể khám phá nhiều dữ liệu nhanh hơn.
Lưu ý rằng Erigon mất một tuần để đồng bộ hóa và bạn cần có >2TB dung lượng trên ổ đĩa của mình; quá trình này có thể nhanh hơn trong tương lai .
Trăn:
- web3.py: Một trong những gói đầu tiên dễ dàng sử dụng hợp đồng ABI và nhà cung cấp nút (khách hàng) trên Ethereum .
- ethereum-etl : được sử dụng bởi Nansen và google Bigquery để lấy chuỗi cho một phạm vi khối cụ thể. Có thể dễ dàng xuất sang các cơ sở dữ liệu hoặc loại tệp khác nhau.
- checkthechain : Gói duy nhất có tính năng tổng hợp tên miền (như nhóm uniswap) ngoài chức năng cơ bản của web3.py. Tùy chỉnh cho các nhà khoa học dữ liệu.
- Ape đã từng làm theo cách này trước khi nó trở thành giải pháp vyper an toàn hơn.
- mev-inspect-py: Truy vấn dữ liệu MEV theo khối (tức là các khoản thanh toán/lợi nhuận của người khai thác, hoán đổi, chênh lệch giá, v.v.). Dữ liệu flashbot này cũng có thể được tìm thấy trong Dune .
Golang:
- trueblocks-core: Công cụ này tìm nạp lịch sử giao dịch của bất kỳ địa chỉ nào một cách nhanh chóng. Hình dung trong trình thám hiểm ở trên .
Javascript/Bản đánh máy:
- web3.js : Gói tập lệnh web3 gốc. Nhiều phương thức/mẫu ở đây hiện được coi là quá dài dòng so với ether.
- ethers.js/ts: Gói tập lệnh web3 tinh gọn/hiệu quả hơn, được sử dụng rộng rãi trong các bộ thử nghiệm hợp đồng thông minh và giao diện người dùng, chẳng hạn như truffle và hardhat.
rỉ sét
- ethers-rs: Tôi tin rằng chủ yếu được tạo ra để hoạt động với xưởng đúc (như ethers.js <> hardhat).
Định nghĩa: Tạo số liệu và tổng hợp đáng tin cậy
Dữ liệu thô là tốt, nhưng để có được số liệu tốt hơn, bạn cần có khả năng chuẩn hóa và tổng hợp dữ liệu qua các hợp đồng của các giao thức khác nhau. Khi bạn đã tổng hợp, bạn có thể tạo các số liệu và thẻ mới để nâng cao phân tích cho từng cá nhân.
Tầng cộng đồng này có sự kết hợp sâu sắc nhất giữa tên miền web3, công nghệ và kiến thức nền tảng.
sự hợp tác
Tất cả các chế độ xem được xác định đều là mã nguồn mở và bạn có thể đóng góp mã của riêng mình/cộng tác với các nhà phân tích khác.
- Dune cho phép tạo bất kỳ mô hình nào bạn cần, trong đó tất cả các chuỗi nằm trong một repo (kho lưu trữ) . Hiện đã có 300 người đóng góp (kết hợp cộng đồng + thành viên nhóm).
- Flipside cho phép tạo bất kỳ mô hình nào bạn cần, trong đó mỗi chuỗi có kho lưu trữ riêng.
- DefiLlama cho phép mọi đóng góp vào một tập hợp các chỉ báo được xác định trước và thường được xây dựng dựa trên các biểu đồ con .
- theGraph cho phép mọi người tạo các lược đồ và ánh xạ graphQL , được giới hạn trong một mạng cụ thể, thường chỉ có một giao thức (tức là hợp đồng được xác định) tại một thời điểm. Messari xây dựng trên chúng theo cách có tổ chức hơn (ví dụ như repo Dune/Flipside/DefiLlama).
- 🧪 Goldsky về cơ bản là theGraph, nhưng chỉ dành cho khách hàng tư nhân/trả phí và được viết bằng SQL.
Có một số nhà cung cấp truy vấn từ phần trước xác định tập hợp của riêng họ, nhưng chúng không phải là nguồn mở và bạn không thể tự thêm vào chúng.
mong chờ tương lai
Nhìn chung, các công cụ dữ liệu Web3 đang trở nên sạch hơn, đáng tin cậy hơn, mang tính xã hội và cộng tác hơn. Cơ sở hạ tầng đang phát triển để tất cả chúng ta có thể truy vấn và xác định các chỉ số tốt hơn nhanh hơn, cải thiện những gì chúng ta có thể khám phá và khám phá trong các sản phẩm của mình. Toàn bộ hệ sinh thái giống như một "bánh đà lớn" và cộng đồng nhỏ này cuối cùng được xây dựng cùng nhau để tạo ra luồng dữ liệu. Cần nhấn mạnh rằng dữ liệu web3 đều có bản chất xã hội!
Đây chỉ là phần đầu tiên trong hướng dẫn năm 2023 của tôi, các phần khác sẽ cụ thể hơn về nhà phân tích và kỹ thuật hơn.
