**読み取り、インデックス作成から分析へ：Web3データインデックスの概要** この記事では、ブロックチェーンデータのアクセスibilitの発展の歴史を探求し、アーキテクチャとAI技術の応用に関して、The Graph、Chainbase、Space and Timeの三つのデータサービスプロトコルの特徴を比較しています。ブロックチェーンデータサービスは、インテリジェンスとセキュリティに向かって進化しており、今後も業界のインフラストラクチャとして重要な役割を果たし続けることを指摘しています。 クリックでサポートしていただければ幸いです！ 🫡 1. **イントロダクション** 2017年のEtheroll、ETHLend、CryptoKittiesなどの最初のdAppの波から、現在さまざまなブロックチェーンを基盤とした金融、ゲーム、ソーシャルdAppの繁栄に至るまで、非中央集権的なオンチェーンアプリケーションについて議論する際に、これらのdAppが相互作用中に採用するさまざまなデータの出所について考えたことはありますか？ 2024年はAIとWeb3に焦点を当てています。人工知能の世界では、データはその成長と進化のための命の源です。植物が太陽光と湿気に依存して繁栄するのと同様に、AIシステムは膨大な量のデータに依存して継続的に「学び」、「考える」ことができます。データがなければ、AIアルゴリズムがどれほど高度でも、それは空中の城に過ぎず、その意図した知能と効果を発揮することはできません。この記事は、ブロックチェーンデータのアクセスibilitという観点からブロックチェーンデータインデックスの進化を分析し、確立されたデータインデックスプロトコルであるThe Graphと、新興のブロックチェーンデータサービスプロトコルであるChainbaseおよびSpace and Timeを比較しています。特に、AI技術を取り入れたこれらの二つの新しいプロトコルのデータサービスと製品アーキテクチャの類似点と相違点を探求しています。 2. **データインデックスの複雑さとシンプルさ：ブロックチェーンノードからフルチェーンデータベースへ** 2.1 **データソース：ブロックチェーンノード** 「ブロックチェーンとは何か」を理解し始めると、私たちはしばしば「ブロックチェーンは分散型台帳である」というフレーズに出会います。ブロックチェーンノードは、全体のブロックチェーンネットワークの基盤であり、チェーン上のすべてのトランザクションデータを記録、保存、配信する役割を担っています。各ノードはブロックチェーンデータの完全なコピーを持ち、ネットワークの分散特性の維持を保証します。しかし、一般のユーザーにとって、ブロックチェーンノードを構築し維持することは簡単な作業ではありません。専門的な技術スキルが必要なだけでなく、高いハードウェアおよび帯域幅コストも伴います。同時に、普通のノードのクエリ機能は限られており、開発者が必要とする形式でデータを取得することはできません。したがって、理論的には誰でも自分のノードを運営できるものの、実際にはユーザーは通常、サードパーティのサービスに依存することを好みます。

この問題に対処するために、RPC（リモートプロシージャコール）ノードプロバイダーが登場しました。これらのプロバイダーはノードのコストと管理を担当し、RPCエンドポイントを通じてデータを提供し、ユーザーが自分のノードを構築することなくブロックチェーンデータに簡単にアクセスできるようにします。パブリックRPCエンドポイントは無料ですが、レート制限があり、dAppsのユーザー体験に悪影響を及ぼす可能性があります。プライベートRPCエンドポイントは混雑を減らすことによってより良いパフォーマンスを提供しますが、単純なデータ取得であっても多くの往復通信が必要になることがあります。これにより、リソースを多く消費し、複雑なデータクエリには非効率的になります。さらに、プライベートRPCエンドポイントはスケールしにくく、異なるネットワーク間での互換性が欠けていることが多いです。しかし、ノードプロバイダーが提供する標準化されたAPIインターフェースは、ユーザーがオンチェーンデータにアクセスするための障壁を下げ、その後のデータ解析やアプリケーションの基盤を築きます。

2.2 **データ解析：生データから利用可能なデータへ**

ブロックチェーンノードから得られるデータは、しばしば暗号化されエンコードされた生データです。このデータはブロックチェーンの完全性とセキュリティを保ちながら、その複雑さがデータ解析の難易度を高めます。一般のユーザーや開発者にとって、この生データを直接処理するには多くの技術的知識と計算リソースが必要です。データ解析のプロセスは、この文脈において特に重要です。複雑な生データを解析し、より理解しやすく操作可能な形式に変換することで、ユーザーはこのデータをより直感的に理解し、利用できるようになります。データ解析の成功は、ブロックチェーンデータアプリケーションの効率性と効果性を直接決定し、全体のデータインデックスプロセスにおける重要なステップです。

2.3 **データインデクサの進化**

ブロックチェーンデータの量が増加するにつれて、データインデクサの需要も増えています。インデクサは、オンチェーンデータを整理し、それをデータベースに送信して簡単にクエリできるようにする重要な役割を果たします。インデクサの作業原理は、ブロックチェーンデータをインデックスし、SQLのようなクエリ言語（GraphQL APIなど）を通じて利用可能にすることです。データをクエリするための統一されたインターフェースを提供することで、インデクサは開発者が標準化されたクエリ言語を使用して必要な情報を迅速かつ正確に取得できるようにし、プロセスを大幅に簡素化します。

異なるタイプのインデクサは、さまざまな方法でデータ取得を最適化します：

- **フルノードインデクサ**：これらのインデクサはフルブロックチェーンノードを実行し、そこから直接データを抽出します。これによりデータの完全性と正確性が確保されますが、かなりのストレージと処理能力が必要です。
- **ライトウェイトインデクサ**：これらのインデクサはフルノードに依存して必要に応じて特定のデータを取得し、ストレージ要件を削減しますが、クエリ時間が増加する可能性があります。
- **専用インデクサ**：これらのインデクサは特定のデータタイプや特定のブロックチェーン専用で、NFTデータやDeFiトランザクションなどの特定のユースケースに対して取得を最適化します。
- **集約インデクサ**：これらのインデクサは、複数のブロックチェーンやソースからデータを抽出し、オフチェーン情報を含む統一されたクエリインターフェースを提供します。これは特にマルチチェーンドAppsにとって便利です。

現在、アーカイブモードのGethクライアントにおけるEthereumアーカイブノードは約13兆5000億のストレージスペースを占めており、Erigonクライアントの下でのアーカイブ需要は約3兆です。ブロックチェーンが成長し続ける中、アーカイブノードに必要なデータストレージの量も増加します。そのような膨大なデータ量に直面して、主流のインデックスプロトコルはマルチチェーンインデックスをサポートするだけでなく、異なるアプリケーションのデータニーズを満たすためにデータ解析フレームワークをカスタマイズします。例えば、The Graphの「Subgraph」フレームワークは典型的な例です。

インデクサの出現は、データのインデックス作成とクエリの効率を大幅に向上させました。従来のRPCエンドポイントと比較して、インデクサは大量のデータを効率的にインデックス化し、高速クエリをサポートします。これらのインデクサにより、ユーザーは複雑なクエリを実行し、データを簡単にフィルタリングし、抽出後に分析することができます。さらに、一部のインデクサは複数のブロックチェーンからデータソースを集約することもサポートしており、マルチチェーンドAppsで複数のAPIを展開する必要を避けています。複数のノードに分散して実行することで、インデクサはセキュリティとパフォーマンスを向上させるだけでなく、集中型RPCプロバイダーから生じる可能性のある中断やダウンタイムのリスクを軽減します。

対照的に、インデクサは事前定義されたクエリ言語を使用し、ユーザーが基盤となる複雑なデータに対処することなく、必要な情報を直接取得できるようにします。このメカニズムは、データ取得の効率と信頼性を大幅に向上させ、ブロックチェーンデータアクセスにおける重要な革新を示しています。

2.4 フルチェーンデータベース: ストリームファーストに沿ったアプローチ

インデックスノードを使用してデータをクエリすることは、通常、APIがオンチェーンデータを消化する唯一のポータルになることを意味します。しかし、プロジェクトがスケーリングフェーズに入ると、標準化されたAPIでは提供できないより柔軟なデータソースが必要になることがよくあります。アプリケーションの要求がより複雑になるにつれて、プライマリデータインデクサとその標準化されたインデックス形式は、検索、クロスチェーンアクセス、またはオフチェーンデータマッピングなど、ますます多様化するクエリニーズに応えるのが次第に難しくなります。現代のデータパイプラインアーキテクチャにおいて、「ストリームファースト」アプローチは、従来のバッチ処理の限界を克服するための解決策となり、リアルタイムのデータ取り込み、処理、および分析を可能にします。このパラダイムシフトは、組織が受信データに即座に応答し、洞察を得てほぼ瞬時に意思決定を行うことを可能にします。同様に、ブロックチェーンデータサービスプロバイダーの開発も、ブロックチェーンデータストリームの構築に向かっています。従来のインデクササービスプロバイダーは、The GraphのSubstreams、GoldskyのMirror、ChainbaseやSubSquidのようなブロックチェーンに基づいて生成されたリアルタイムデータレイクを通じてリアルタイムブロックチェーンデータを取得する製品を徐々に展開しています。

これらのサービスは、ブロックチェーン取引のリアルタイム解析のニーズに応え、より包括的なクエリ機能を提供することを目的としています。「ストリームファースト」アーキテクチャが従来のデータパイプラインにおけるデータ処理と消費を革命的に変え、レイテンシを減少させ、応答性を向上させるのと同様に、これらのブロックチェーンデータストリームサービスプロバイダーも、より多くのアプリケーションの開発を支援し、より高度で成熟したデータソースを通じてオンチェーンデータ分析を助けることを望んでいます。

現代のデータパイプラインの観点からオンチェーンデータの課題を再定義することにより、オンチェーンデータの管理、保存、提供を全く新しい視点で見ることができます。サブグラフとEthereum ETLを最終的な出力ではなくデータパイプラインのデータストリームとして捉え始めると、あらゆるビジネスユースケースに合わせた高性能データセットをカスタマイズできる可能性のある世界を想像できます。

3. AI + データベース？The Graph、Chainbase、Space and Timeの徹底比較

3.1 The Graph

The Graphネットワークは、分散型ノードネットワークを通じてマルチチェーンデータのインデクシングとクエリサービスを可能にし、開発者がブロックチェーンデータを簡単にインデクシングし、分散型アプリケーションを構築できるようにします。その主な製品モデルは、データクエリ実行市場とデータインデクシングキャッシュ市場であり、両方とも基本的にユーザーの製品クエリニーズに応えています。データクエリ実行市場は、消費者が希望するデータを提供するインデックスノードに対して支払いを行うことを特に指し、データインデクシングキャッシュ市場は、インデックスノードがサブグラフの歴史的インデクシングの人気、集められたクエリ料金、およびデータに基づいてリソースを割り当てる場所です。サブグラフ出力のオンチェーンキュレーターからの要求。

サブグラフは、The Graphネットワークにおける基本的なデータ構造です。サブグラフは、ブロックチェーンからクエリ可能な形式（例えば、GraphQLスキーマ）にデータを抽出し、変換する方法を定義します。誰でもサブグラフを作成でき、複数のアプリケーションがこれらのサブグラフを再利用できるため、データの再利用性と効率が向上します。
The Graphネットワークは、インデクサー、キュレーター、デリゲーター、開発者の4つの主要な役割で構成されており、これらが共同でweb3アプリケーションのためのデータサポートを提供します。それぞれの責任は以下の通りです：
· インデクサー：インデクサーはThe Graphネットワークのノードオペレーターであり、GRT（The Graphのネイティブトークン）をステーキングしてネットワークに参加し、インデクシングおよびクエリ処理サービスを提供します。
· デリゲーター：デリゲーターは、インデクシングノードの運用をサポートするためにGRTトークンをステーキングするユーザーです。デリゲーターは、委任したインデクシングノードを通じて報酬の一部を得ます。
· キュレーター：キュレーターは、どのサブグラフをネットワークがインデックスすべきかを示す責任があります。彼らは、価値のあるサブグラフが処理の優先順位を与えられることを保証する手助けをします。
· 開発者：他の3者が供給側の参加者であるのに対し、開発者は需要側のユーザーであり、The Graphの主要なユーザーです。彼らはサブグラフを作成してThe Graphネットワークに提出し、ネットワークが彼らのデータニーズを満たすのを待ちます。
現在、The Graphは包括的な分散型サブグラフホスティングサービスに移行しており、異なる参加者間で循環する経済的インセンティブがシステムの円滑な運営を確保しています：

· インデクサー報酬：インデクサーは、消費者のクエリ料金とGRTトークンブロック報酬の一部を通じて収入を得ます。
· デリゲーター報酬：デリゲーターは、支援するインデクシングノードを通じて報酬の一部を受け取ります。
· キュレーター報酬：キュレーターが価値のあるサブグラフを示した場合、クエリ料金の一部を得ることができます。

実際、The Graphの製品もAIの波の中で急速に進化しています。The Graphエコシステムのコア開発チームの一つであるSemiotic Labsは、AI技術を使用してインデックス価格とユーザーのクエリ体験の最適化に取り組んでいます。現在、Semiotic Labsによって開発されたツール、AutoAgora、Allocation Optimizer、AgentCは、さまざまな側面でエコシステムのパフォーマンスを向上させています。

・AutoAgoraは、クエリ量とリソース使用量に基づいてリアルタイムで価格を調整する動的価格設定メカニズムを導入し、インデクサーの競争力と収益最大化を確保するために価格戦略を最適化します。
・Allocation Optimizerは、サブグラフのリソース割り当てという複雑な問題に対処し、インデクサーが収益とパフォーマンスを向上させるために最適なリソース構成を達成できるよう支援します。
・AgentCは、ユーザーが自然言語を通じてThe Graphのブロックチェーンデータにアクセスできる実験的なツールであり、ユーザー体験を向上させます。

これらのツールの適用により、AIアシスタンスを通じてThe Graphのインテリジェンスとユーザーフレンドリーさがさらに向上しました。

3.2 Chainbase

Chainbaseは、すべてのブロックチェーンデータを1つのプラットフォームに統合するオールチェーンデータネットワークであり、開発者がアプリケーションを構築および維持しやすくしています。その独自の機能には以下が含まれます：

・リアルタイムデータレイク：Chainbaseはブロックチェーンデータストリーム専用のリアルタイムデータレイクを提供し、データが生成されると同時にアクセス可能にします。
・デュアルチェーンアーキテクチャ：ChainbaseはEigenlayer AVS上に構築されており、CometBFTのコンセンサスアルゴリズムと並行するデュアルチェーンアーキテクチャを形成する実行層を作成します。この設計は、クロスチェーンデータのプログラマビリティとコンポーザビリティを向上させ、高スループット、低レイテンシ、最終性をサポートし、デュアルステーキングモデルを通じてネットワークセキュリティを向上させます。
・革新的なデータフォーマット標準：Chainbaseは「manuscripts」と呼ばれる新しいデータフォーマット標準を導入し、暗号通貨産業におけるデータの構造化と利用を最適化します。
・Crypto World Model：Chainbaseは広範なブロックチェーンデータリソースを活用し、AIモデル技術を組み合わせて、ブロックチェーン取引を効果的に理解し、予測し、相互作用できるAIモデルを作成します。基本バージョンモデルであるTheiaが一般向けに公開されました。

これらの機能は、特にリアルタイムデータのアクセス性、革新的なデータ形式、オンチェーンデータとオフチェーンデータの組み合わせによってよりスマートなモデルを作成することに焦点を当て、Chainbaseをブロックチェーンインデックスプロトコルの中で際立たせています。

ChainbaseのAIモデルであるTheiaは、他のデータサービスプロトコルと差別化する重要なハイライトです。Theiaは、NVIDIAによって開発されたDORAモデルに基づいており、オンチェーンデータとオフチェーンデータを時系列および空間活動と組み合わせて、暗号通貨のパターンを学習・分析し、因果推論を通じてオンチェーンデータの潜在的な価値とパターンを深く探求し、ユーザーによりインテリジェントなデータサービスを提供します。

AIによって強化されたデータサービスにより、Chainbaseは単なるブロックチェーンデータサービスプラットフォームではなく、より競争力のあるインテリジェントデータサービスプロバイダーとなります。堅牢なデータリソースと積極的なAI分析を備えたChainbaseは、より広範なデータインサイトを提供し、ユーザーのデータ処理ワークフローを最適化することができます。

3.3 Space and Time

Space and Time (SxT)は、分散データウェアハウス上でゼロ知識証明を拡張する検証可能なコンピューティングレイヤーを作成することを目指しており、スマートコントラクト、大規模言語モデル、企業に対して信頼できるデータ処理を提供します。現在、Space and Timeは最新のシリーズA資金調達ラウンドで2000万ドルを確保しており、Framework Ventures、Lightspeed Faction、Arrington Capital、Hivemind Capitalが主導しています。

データインデックスと検証の分野において、Space and Timeは新しい技術的アプローチであるProof of SQLを導入しています。これは、Space and Timeによって開発された革新的なゼロ知識証明（ZKP）技術で、分散データウェアハウス上で実行されるSQLクエリが改ざん防止かつ検証可能であることを保証します。クエリが実行されると、Proof of SQLは、クエリ結果の整合性と正確性を検証する暗号的証明を生成します。この証明はクエリ結果に添付され、任意の検証者（スマートコントラクトなど）が処理中にデータが変更されていないことを独立して確認できるようになります。従来のブロックチェーンネットワークは、データの信頼性を検証するためにコンセンサスメカニズムに依存していますが、Space and TimeのProof of SQLはより効率的なデータ検証方法を実装しています。具体的には、Space and Timeのシステムでは、1つのノードがデータ取得を担当し、他のノードはzk技術を使用してデータの信頼性を検証します。このアプローチは、コンセンサスメカニズムの下で同じデータを冗長にインデックス化する複数のノードのリソース消費を変え、合意を形成することで、システム全体のパフォーマンスを向上させます。この技術が成熟するにつれて、データの信頼性に焦点を当てたさまざまな伝統産業がブロックチェーンデータを使用して製品を構築するための足がかりを提供します。

同時に、SxTはMicrosoftのAI共同イノベーションラボと密接に協力し、生成AIツールの開発を加速させており、ユーザーが自然言語処理を通じてブロックチェーンデータにアクセスしやすくしています。現在、Space and Time Studioでは、ユーザーが自然言語のクエリを入力する体験が提供されており、AIがそれを自動的にSQLに変換し、ユーザーの代わりに実行して、ユーザーが必要とする最終結果を提示します。

3.4 違いの比較
4. 結論と展望

要約すると、ブロックチェーンデータインデックス技術は、初期のノードデータのソースからデータ解析とインデクサーの開発を経て、最終的にはAI駆動のフルチェーンデータサービスに進化しており、徐々に改善されるプロセスを経ています。これらの技術の継続的な進化は、データアクセスの効率と精度を向上させるだけでなく、ユーザーに前例のないインテリジェントな体験を提供します。

今後、AI技術やゼロ知識証明などの新技術が進展し続ける中で、ブロックチェーンデータサービスはさらにインテリジェントで安全になります。私たちは、ブロックチェーンデータサービスが今後もインフラストラクチャとして重要な役割を果たし、産業の進歩と革新に強力なサポートを提供し続けると信じる理由があります。