최고의 Web3 데이터 도구에 대한 가이드와 이를 하나의 기사로 사용하는 방법

이 문서에서는 모든 주요 데이터 도구를 다루고 데이터 분석가의 관점에서 이를 사용하는 방법을 알아봅니다.

작성자: Andrew Hong , Dune Analytics 교장

편집: DeFi의 Tao

이미지 출처: Maze AI에서 생성

또 1년이 지났는데 10년이 지난 것 같은 느낌! 대부분의 개념이 여전히 상황에 부합하므로 이 기사를 읽기 전에 2022년 가이드를 확인하는 것이 좋습니다. 올해의 도구 가이드도 세 가지 원칙을 다루고 있지만 이전 연도와 비교하면 새로운 관점을 가지고 있습니다.

• 도구 : 유틸리티를 기반으로 데이터를 구성하는 도구
• 생각 : 암호화된 데이터의 결합성과 노이즈에 대하여
• Teams 분석가 : Web3 마법사의 이미지 구축

이 영역이 더욱 복잡해짐에 따라 가이드를 세 부분으로 나누었습니다. 이 섹션에서는 특히 데이터 분석과 관련된 web3 데이터 도구만 다룹니다.

데이터 도구 정보:

인덱서, 브라우저, 채점자, 쿼리 엔진 등으로 시작했는지 여부에 관계없이 모든 도구에는 이제 일부 API 지원과 함께 원시 및 집계 쿼리가 포함됩니다. 그래서 데이터 도구를 기술 스택으로 생각하는 대신 유틸리티 스택으로 생각합니다.

이는 모든 도구가 분석 프로세스에 적합한 "사용 사례"를 갖고 있어 스택을 형성한다는 것을 의미합니다. 아래 이미지에 제가 아는 최고의 도구를 나열했습니다! 그러면 각 도구를 유틸리티 계층별로 간략하게 설명하겠습니다.

일부 면책조항:

• 저는 현재 Dune에서 풀타임으로 일하고 있습니다.
• 🧪 제품의 이 부분이 아직 내부 테스트 단계에 있음을 나타냅니다. 따라서 팀에 접근 권한을 요청해야 합니다.
• 이제 모든 도구에는 원시/디코딩/집계 데이터가 혼합된 API가 있으므로 이 분석 부분에는 순수 API 제품을 포함하지 않기로 결정했습니다. 여기 있는 모든 제품을 합리적으로 다룰 수는 없습니다. 일부 향상된 API가 어디로 향하는지 알고 싶다면 이 문서를 확인하세요.
• 실제로 Dune과 같은 쿼리 대시보드 공급자는 여기에서 일부 기능을 지원할 수 있습니다. 그러나 쿼리 기반 대시보드는 아직 특정 부분 전용 애플리케이션의 UX(기능 루프 및 짧은 대기 시간)와 비교할 수 없으므로 이 문서에서는 포함하지 않습니다.

발견: 고급 트렌드를 찾고 비교하세요

모든 여행은 어딘가에서 시작됩니다. 저는 이 섹션의 여러 도구를 사용하여 주제를 조사하고 더 자세히 살펴보고 싶은 추세를 발견합니다. 분석할 올바른 문제를 찾는 것은 web3의 가장 어려운 부분 중 하나이며 이러한 도구를 사용하면 훨씬 쉽게 할 수 있습니다.

💡 OurNetwork 와 Dune Digest는 온체인 분석 알파를 위한 최고의 뉴스 수집자 중 두 곳입니다. 이 섹션에서는 다양한 도구에 대한 나의 발견 여정 중 상당수가 해당 기사에서 시작되었습니다.

프로토콜/도메인

다양한 지표를 기반으로 프로토콜(또는 도메인)이 어떻게 작동하는지 이해하려면 다음 도구 중 하나를 참조하세요.

• Dune을 사용하면 ERC20 , NFT , 스테이킹 , 에어드랍 , 경매 등에 대한 세부적인 대시보드를 찾을 수 있습니다. 대시보드, 마법사, 쿼리의 순위를 매길 수 있는 기본 검색 기능이 있습니다.
• Flipside는 유동성 풀 PnL , 지갑 순위 등과 같은 데이터 과학 기사 및 연구를 검색하는 데 사용할 수 있습니다. 현재 최신 대시보드 기능을 베타 테스트하고 있습니다.
• DefiLlama는 TVL, 수량 및 수율 측면에서 발전된 추세를 가지고 있습니다. 2022년 리뷰에서 몇 가지 주요 사례를 찾을 수 있습니다 .
• Messari 프로토콜/풀 보드 는 DefiLlama의 훌륭한 대안이며 빠르게 성장하고 있습니다.
• 토큰 터미널을 사용하면 프로토콜(dapp) 또는 체인에 대한 수익, 혜택 및 수수료에 대한 기존 분석을 쉽게 수행할 수 있습니다.
• Artemis는 최고의 체인 개발/사회 활동 차트를 보유하고 있으며 개요 체인 지표를 포함합니다. 그리고 구글 시트와도 잘 통합됩니다.

토큰

코인에 대해 더 깊이 탐구하기 위해 보다 맞춤화된 쿼리 대시보드(예: 이전에 링크된 것과 같은)를 사용할 수 있지만, 검색 및 비교 프로세스를 더 빠르고 쉽게 만들기 위해 보다 최적화된 제품 인터페이스가 필요할 수 있습니다.

• Nansen의 Token God 모델 과 토큰(defi/NFT) 천국은 유통, 거래 및 지갑 추세에 대한 통찰력을 제공합니다.
• DefiLlama를 사용하면 토큰 쌍 의 거래량과 유동성 깊이를 면밀히 분석할 수 있습니다.
• Parsec은 맞춤형 터미널을 통해 Bloomberg 스타일의 코인 분석을 수행합니다 .

DAO/거버넌스

프로토콜 변경/업데이트가 더 자주 발생하고 금고에 자금을 투자하거나 지출해야 함에 따라 추세를 추적하는 거버넌스가 점점 더 중요해지고 있습니다.

• Messari: 거버넌스 브라우저 에서 토론, 중요성, 거버넌스 프로세스 및 하위 DAOS에 태그 하여 제안에 대한 통찰력을 제공합니다.
• Tally : 투표권은 시간이 지남에 따라 DAO에 대한 좋은 시작 개요이며 DAO를 찾기 위한 체인별 필터링 기능이 있습니다.
• Boardroom : 필터링할 수 있는 매개변수가 더 많았으면 좋겠지만(예: $20,000 이상의 가치가 있는 제안) 필터링 가능한 모든 DAO 제안 피드가 있습니다.
• Agora : 현재는 명사에만 작동하지만 유권자 프로필과 대표 목표를 이해하는 데 유용합니다 .

탐색: 주소와 거래를 빠르게 확인하여 자세한 내용을 확인하세요.

몇 가지 흥미로운 추세를 발견한 후에는 일반적인 거래가 어떤 모습인지, 모든 거래 뒤에 어떤 지갑/주소가 있는지 파악하고 싶을 수 있습니다.

이는 분석에 도움이 되는 상황별 단서를 놓치지 않도록 범위를 넓히는 단계입니다. 이 단계에서는 20개의 탭이 열려 있을 수 있습니다.

💚 모든 계약 주소를 쉽게 드릴다운하고 프로토콜 작동 방식을 이해할 수 있는 대시보드를 만들었습니다 .

거래 시각화 도구

거래는 단순한 ETH 전송부터 약간 더 복잡한 레버리지 곡선 stETH/ETH 금고까지 무엇이든 될 수 있습니다. 이 과정에서 일반적으로 거래, 추적, 로그, 계약 코드 및 상태 데이터를 건너뛰어야 합니다.

• Blocksec/Phalcon은 트랜잭션의 추적 및 로그를 연구하는 데 적합합니다. 모든 내부 호출과 이벤트가 발생하는 순서를 명확하게 보여줍니다. 최신 업데이트에는 코드 조각과 균형 흐름 다이어그램이 도구에 추가되었습니다.
• 부드러운 멀티체인 브라우저에는 다른 기능 중에서도 가장 빠른 추적<> 스니펫 감지 기능이 포함되어 있습니다. 모든 도구 중에서 가장 부드러운 UX/UI를 갖추고 있지만 이벤트 로그 추적 및 코드 조각을 사용하면 더 나은 성능을 발휘할 수 있습니다.
• Blocknative는 mempool(트랜잭션 큐)용 전문 브라우저입니다. 여기에서 모든 계약에 제출된 거래를 실시간으로 모니터링할 수 있습니다.

주소/지갑 시각화 도구

이러한 도구의 경우 지갑 잔액 과 활동을 신속하게 검색, 교차 분석, 결합 및 공유하기 쉽게 만드는 것이 핵심입니다. zapper.fi 및 rotki 와 같은 "포트폴리오" 스타일 애플리케이션이 더 많이 있지만 이러한 애플리케이션은 데이터 분석 작업에 도움이 되지 않으며 이 섹션에 직접 포함되지 않습니다.

• Nansen은 라벨링을 강화하고 코인 분석 페이지와 완벽하게 일치하는 지갑 분석기를 출시했습니다.
• 온체인 지갑을 분석할 때 Zerion과 Debank는 Nansen의 최고의 무료 대안입니다.
• Warden을 사용하면 쉽게 검색 가능한 형식으로 지갑(청산, 대출 등)에 대한 DeFi 관련 분석을 수행할 수 있습니다. 그들은 Aave를 지원하며 곧 Euler, Notional 및 Complex를 지원할 예정입니다. 나는 이 도구가 DeFi 분석 탐색기의 물결을 촉발하므로 내년에 자체 섹션이 필요할 것이라고 생각합니다.
• 몇 개의 코인을 기억하고 나면 Bubblemaps가 흥미로운 지갑 클러스터와 연결을 식별하는 데 도움이 될 것입니다.

하이브리드(거래+주소/지갑)

이는 탐색을 위한 올인원 솔루션입니다. 이는 해당 분야에서 가장 강력한 범용 제품을 탄생시킬 더욱 혼잡한 분야가 될 것이며, 차세대 Google은 여기에서 시작될 수도 있습니다.

• Etherscan은 단일 주소의 개요를 빠르게 얻는 데 적합합니다. 나는 주로 태그에 사용하고 특정 코인의 잔액 과 이체 내역을 (지정된 지갑에 대해) 빠르게 확인하는 데 사용합니다. 또한 가장 기본적이면서도 이해하기 쉬운 거래 개요를 제공합니다.
• 🧪 Onceupon.gg 는 분석가의 꿈 입니다. 무한 수평 스크롤 미니 창을 지원하고 특정 코인 및 엔터티의 맥락에서 방법 및 출처(추적 포함)별로 모든 거래를 신속하게 필터링합니다. 모든 거래에는 클릭하기 전에 사람이 읽을 수 있는 방식으로 태그 되고 설명됩니다. 지갑과 창 그룹화를 쉽게 공유하고 소화할 수 있습니다. 모든 주소 중 가장 좋은 것은 상위 거래 상대 빠르게 식별하고 그래픽 네트워크 시각화로 분석을 보완할 수 있는 이웃 탭이 있다는 것입니다.
• 🧪 Arkham 은 가장 전문적인 네트워크 및 거래 상대 분석 도구 입니다. 거래 상대/ 거래소, 개인/그룹 간 잔액 쉽게 조회할 수 있으며, 거래별 이체 유입/유출을 쉽게 세분화할 수 있습니다. 그래픽 네트워크 도구를 사용하면 zachxbt 스타일의 조사가 그 어느 때보다 쉬워집니다. 시간 척도를 쉽게 조정하여 특정 기간 동안 특정 지갑의 관계를 확인할 수 있습니다.

자체 호스팅

이러한 옵션을 사용하면 오픈 소스 블록체인 익스플로러 로컬로 실행할 수 있으며 하이브리드 솔루션이기도 합니다.

• Otterscan: 기본 기능은 Etherscan(대략)과 동일합니다 .
• Trueblocks Explorer : 가장 빠른 계정 기록 수집기 (아마도). 핵심 항목은 다음 섹션에 있습니다.

마이닝: 온체인 데이터에 대한 쿼리를 직접 작성하세요.

모든 SQL 엔진은 클라우드 기반이므로 브라우저 내 IDE를 사용하여 원시 및 집계 데이터(예: nft.trades/dex.trades)를 쿼리할 수 있습니다. 이는 또한 NFT 세탁 거래 필터 와 같이 잘 정의된 테이블을 허용합니다.

최고의 프로토콜, 커뮤니티 및 토큰 분석은 여기에서 시작됩니다! 일부 엔진에는 보다 전문화된 테이블이 있으며 이를 나열하겠습니다.

무료 등급 사용 가능 (SQL)

이러한 엔진에 대한 액세스는 무료입니다.

• 조옮김 (25초 무료 제한, 상위 플랜에서는 최대 10분 더 길어짐).
• 뒷면 (15분 무료 제한, 계획 없음). 현재 저장/상태 테이블이 있는 유일한 테이블은 TokenFlow에서 제공됩니다 .
• 공간 (20분 무료 제한, 유료 요금제 확장 가능한 컴퓨팅). 내가 본 유일한 게임파이 중심 집계입니다.
• Dune (30분 제한 무료, 컴퓨팅 확장을 위한 유료 플랜). 디코딩 테이블이 있는 유일한 도구이므로 원시 16진수/바이트 변환, 함수/주제 서명 필터링 또는 프록시/팩토리 모드를 처리할 필요가 없습니다.

유료만(SQL)

이러한 엔진에 대한 액세스는 유료 요금제를 사용하고 액세스가 승인된 경우에만 가능합니다.

• 🧪 Nansen은 현재 새로운 쿼리 엔진을 테스트하고 있습니다. 마침내 엔터티/주소 태그 테이블을 쿼리할 수 있습니다!
• Goldsky 에서는 theGraph의 하위 그래프를 호스팅 서비스로 마이그레이션(또는 새 하위 그래프 생성)할 수 있습니다. 하위 그래프를 쉽게 구성하여 theGraph의 주요 단점을 해결할 수 있습니다(탈중앙화 손실에도 불구하고).
• Covalent Increment는 모든 원시 데이터를 쿼리할 수 있는 거대한 테이블을 보유하고 있으며 최근 집계된 데이터를 추가하기 시작했습니다.

자체 호스팅

이는 원시 데이터, 디코딩된 데이터 및 집계된 데이터( 특정 체인에 대해 일부 RPC 공급자 사용)를 빠르게 얻을 수 있는 코드 패키지입니다. 보다 효율적인 클라이언트(특히 Erigon )를 실행하면 더 많은 데이터를 더 빠르게 탐색할 수 있다는 이점이 있습니다.

Erigon은 동기화하는 데 일주일이 걸리며 드라이브에 2TB 이상의 공간이 필요하며 앞으로는 더 빨라질 수 있습니다 .

파이썬:

• web3.py: 이더 에서 계약 ABI 및 노드 공급자(클라이언트)를 쉽게 사용할 수 있는 최초의 패키지 중 하나입니다 .
• ethereum-etl : Nansen 및 Google Bigquery에서 특정 블록 범위에 대한 체인을 가져오는 데 사용됩니다. 다른 데이터베이스나 파일 형식으로 쉽게 내보낼 수 있습니다.
• checkthechain : web3.py의 기본 기능 위에 도메인 집계(예: 유니스왑 풀)가 포함된 유일한 패키지 입니다. 데이터 과학자를 위해 맞춤화되었습니다.
• Ape는 더 안전한 vyper 솔루션이 되기 전에도 이와 같았습니다.
• mev-inspect-py: MEV 데이터를 블록별로 쿼리합니다(예: 채굴자 지불/이익, 스왑, 차익거래 등). 이 플래시봇 데이터는 Dune에서도 찾을 수 있습니다 .

골랭:

• trueblocks-core: 이 도구는 모든 주소의 거래 내역을 매우 빠르게 얻을 수 있습니다. 위의 탐색기에서 시각화되었습니다.

자바스크립트/타입스크립트:

• web3.js : 원본 web3 스크립트 패키지입니다. 여기에 있는 많은 방법/패턴은 이제 이더 에 비해 너무 장황한 것으로 간주됩니다.
• ethers.js/ts: truffle 및 hardhat과 같은 프런트 엔드 및 스마트 계약 테스트 스위트에서 널리 사용되는 보다 효율적인/라이트 web3 스크립트 패키지입니다.

녹

• ethers-rs: 주로 파운드리 작업을 위해 만들어졌다고 생각합니다 (ethers.js <> hardhat 등).

정의: 신뢰할 수 있는 지표 및 집계 생성

원시 데이터는 괜찮지만 더 나은 측정항목을 얻으려면 다양한 프로토콜의 계약 전체에서 데이터를 정규화하고 집계할 수 있어야 합니다. 집계가 완료되면 새로운 측정항목과 라벨을 만들어 모든 사람의 분석을 향상할 수 있습니다.

이 커뮤니티 계층은 web3 도메인, 기술 및 배경 지식이 가장 깊이 결합되어 있습니다.

협력

정의된 모든 보기는 오픈 소스이며 자신의 코드를 제공하거나 다른 분석가와 공동 작업할 수 있습니다.

• Dune을 사용하면 하나의 저장소에 모든 체인을 포함하여 필요한 모든 모델을 만들 수 있습니다. 이미 300명의 기여자가 있습니다(커뮤니티 + 팀 멤버 합산).
• Flipside를 사용하면 각 체인에 자체 저장소가 있는 필요한 모델을 만들 수 있습니다.
• DefiLlama는 사전 정의된 지표 세트에 대한 기여를 허용하며 일반적으로 하위 그래프를 기반으로 구축됩니다 .
• theGraph를 사용하면 누구나 일반적으로 한 번에 하나의 프로토콜(즉, 정의된 계약)만 사용하여 특정 네트워크로 제한되는 graphQL 스키마 및 매핑을 생성 할 수 있습니다. Messari는 보다 체계적인 방식으로 이를 기반으로 구축합니다 (예: Dune/Flipside/DefiLlama 저장소와 같은).
• 🧪 Goldsky는 기본적으로 theGraph이지만 개인/유료 고객만 사용할 수 있으며 SQL로 작성됩니다.

자체 집계를 정의하는 이전 섹션의 일부 쿼리 공급자가 있지만 이는 오픈 소스가 아니므로 직접 추가할 수 없습니다.

미래를 기대합니다

전체적으로 Web3 데이터 도구는 더욱 단순해지고, 더욱 신뢰할 수 있으며, 더욱 사회적이며 협업적으로 변하고 있습니다. 인프라는 모두가 더 빠르게 쿼리하고 더 나은 측정항목을 정의할 수 있도록 발전하여 제품에서 발견하고 탐색할 수 있는 내용을 개선합니다. 전체 생태계는 "큰 플라이휠"과 같으며 이 작은 커뮤니티는 궁극적으로 데이터 흐름을 만들기 위해 함께 구축됩니다. web3 데이터는 본질적으로 소셜이라는 점을 강조할 필요가 있습니다!

이것은 2023년 가이드의 첫 번째 부분일 뿐이며, 앞으로 나올 다른 부분은 분석가에게 더 구체적이고 기술적인 부분이 될 것입니다.