Еволюція технології індексації даних Блокчейн: від Ноди до AI-управлінських послуг з даних по всьому ланцюгу

1 Вступ

З 2017 року, коли з'явилися перші dApp, до сьогоднішнього дня, коли різноманітні фінансові, ігрові та соціальні dApp процвітають, чи замислювалися ми над джерелами даних, на яких покладаються ці децентралізовані додатки?

У 2024 році AI та Web3 стануть гарячими темами. У сфері AI дані є джерелом життя, що сприяє постійному навчанню та еволюції системи. Без величезної кількості даних навіть найтонші алгоритми не зможуть проявити свій справжній інтелект.

Ця стаття глибоко дослідить розвиток доступності даних в Блокчейн, проаналізує еволюцію технологій індексації даних та порівняє особливості протоколів The Graph, Chainbase та Space and Time в контексті послуг з даними та архітектури продуктів.

2 Складність та простота індексації даних: від ноди блокчейну до повноцінної бази даних блокчейну

2.1 Джерело даних: Блокчейн Нода

Блокчейн як децентралізований бухгалтерський реєстр, його ноди виконують важливу роль у записі, зберіганні та поширенні даних про транзакції в ланцюгу. Кожна нода зберігає повну копію даних Блокчейн, забезпечуючи децентралізованість мережі. Проте для звичайних користувачів створення та обслуговування ноди не є простим завданням, адже це вимагає спеціальних знань та високих витрат.

Щоб вирішити цю проблему, з'явилися постачальники RPC-нод. Вони відповідають за управління нодами та надають доступ до даних через RPC-інтерфейси. Публічні RPC-інтерфейси безкоштовні, але мають обмеження, приватні інтерфейси мають кращу продуктивність, але ефективність все ще потребує покращення. Незважаючи на це, стандартизовані API-інтерфейси постачальників нод знизили бар'єри для доступу користувачів до даних на блокчейні, заклавши основу для подальшої обробки даних і застосувань.

2.2 Аналіз даних: від прототипних даних до корисних даних

Блокчейн Нода надає вихідні дані, які часто проходять через шифрування та кодування, що ускладнює їх解析. Процес解析 даних перетворює складні прототипні дані у зрозумілий і зручний для роботи формат, що є ключовим етапом у всьому процесі індексації даних і безпосередньо впливає на ефективність і результати використання даних Блокчейн.

2.3 Еволюція індексаторів даних

З ростом обсягу даних Блокчейн, потреба в індексаторах зростає з кожним днем. Індексатори організують дані на ланцюзі та надсилають їх до бази даних, забезпечуючи ефективний пошук. Вони надають єдиний інтерфейс запитів, що дозволяє розробникам швидко знаходити необхідну інформацію, використовуючи стандартизовану мову.

Різні типи індексаторів мають свої переваги:

1. Повний індексатор нод: безпосередньо витягує дані з Блокчейн ноди, забезпечуючи цілісність, але споживання ресурсів велике.
2. Легкий індексатор: залежить від повних вузлів для отримання конкретних даних, зменшує вимоги до зберігання, але може збільшити час запиту.
3. Спеціалізований індексатор: оптимізація для певних типів даних або Блокчейн, таких як дані NFT або DeFi транзакції.
4. Агент-індексатор: об'єднує дані з кількох блокчейнів та поза блокчейном, надає єдиний інтерфейс запитів, підходить для багатоблокчейн dApp.

Стикаючись з величезними обсягами даних, основні протоколи індексаторів не лише підтримують багатоланцюговий індекс, але й налаштували рамки розбору даних відповідно до різних потреб застосувань.

Поява індексаторів значно підвищила ефективність індексації та запиту даних. На відміну від традиційних RPC-ендів, індексатори підтримують складні запити, фільтрацію та аналіз даних, а також можуть агрегувати дані з кількох блокчейнів. Завдяки розподіленій роботі, індексатори забезпечують більшу безпеку та продуктивність, знижуючи ризик переривань.

2.4 Повна база даних Блокчейн: вирівнювання за пріоритетом потоку

З розвитком вимог до застосувань ускладнюється стандартний формат індексації, що не може задовольнити різноманітні запити. У сучасній архітектурі даних метод "пріоритет потоку" стає рішенням для обмежень традиційної пакетної обробки, забезпечуючи реальний збір, обробку та аналіз даних.

Постачальники послуг даних Блокчейн також розвиваються в напрямку створення потоку даних. Зокрема, Substreams від The Graph, Mirror від Goldsky, а також реальні озера даних, що надаються Chainbase і SubSquid, спрямовані на вирішення потреб у реальному аналізі та всебічних запитах.

Перевизначення управління даними в ланцюгу з точки зору сучасних даних, ми можемо уявити собі майбутнє, в якому налаштовані високопродуктивні набори даних для будь-якого випадку використання.

3 AI + База даних? Глибоке порівняння The Graph, Chainbase, Space and Time

3.1 Граф

Мережа The Graph надає послуги індексації та запиту даних з багатьох ланцюгів через децентралізовані Ноди. Її основні продукти включають ринок виконання запитів даних та ринок кешування індексації даних, що обслуговують запити продуктів користувачів.

Дочірні графи ( є основною структурою даних мережі The Graph, яка визначає способи вилучення та перетворення даних. Мережа складається з чотирьох ролей: індексаторів, кураторів, делегатів та розробників, які забезпечують функціонування системи через економічні стимули.

Інструменти AutoAgora, Allocation Optimizer та AgentC, розроблені Semiotic Labs, використовують технології ШІ для оптимізації ціноутворення індексів, розподілу ресурсів та досвіду запитів користувачів, підвищуючи рівень інтелектуалізації системи.

![Читання, індексація до аналізу, короткий опис сектора індексації даних Web3])https://img-cdn.gateio.im/webp-social/moments-cf9a002b9b094fbbe3be7f611001b5c1.webp(

) 3.2 Ланцюгова база

Chainbase як мережа даних для всього Блокчейн, інтегрує дані з багатьох Нод, що полегшує розробникам створення та підтримку додатків. Його особливості включають:

• Оперативне даних озеро: надає миттєвий доступ до потоків даних Блокчейн.
• Подвійна архітектура: побудована на основі Eigenlayer AVS виконавчого рівня, що підсилює програмованість та комбінованість міжблокових даних.
• Інноваційний формат даних: впровадження стандарту "manuscripts", оптимізація структурування та використання даних.
• Модель крипто світу: у поєднанні з технологією ШІ, створено модель Theia для розуміння та прогнозування блокчейн-транзакцій.

Chainbase через AI-модель Theia глибоко досліджує цінність даних на Блокчейн, надає інтелектуальні дані послуги, що підвищують конкурентоспроможність платформи.

![Зчитування, індексація до аналізу, короткий опис сектора індексації даних Web3]###https://img-cdn.gateio.im/webp-social/moments-b343cab5112c1a3d52f4e72122ae0df2.webp(

) 3.3 Простір та Час

Space and Time ###SxT( прагне створити верифікований обчислювальний шар, розширюючи технологію нульових знань. Його основна інновація Proof of SQL забезпечує верифікованість та захист від підробок SQL запитів на децентралізованому сховищі даних.

SxT співпрацює з лабораторією штучного інтелекту Microsoft для розробки генеративних AI інструментів, що спрощують обробку даних Блокчейн. Користувачі можуть запитувати дані Блокчейн за допомогою природної мови в Space and Time Studio, AI автоматично конвертує це в SQL і виконує запит.

![Зчитування, індексація до аналізу, короткий опис сектора індексації даних Web3])https://img-cdn.gateio.im/webp-social/moments-97443cbd177ac4ffd1665da670ffbf12.webp(

) 3.4 Різниця в порівнянні

Три платформи мають свої особливості: The Graph зосереджується на децентралізованих індексах та сервісах запитів, Chainbase акцентує увагу на реальних даних та аналізі даних на основі штучного інтелекту, а Space and Time підкреслює перевірювані обчислення та запити природною мовою.

![Зчитування, індексування до аналізу, короткий опис треку індексації Web3]###https://img-cdn.gateio.im/webp-social/moments-0742180b7da8a9dcddafc465a4dba9cb.webp(

Висновок та перспективи

Технологія індексації даних Блокчейн пройшла еволюцію від джерел даних Нода до AI, що надає послуги з даних по всьому ланцюгу, підвищивши ефективність доступу до даних та рівень інтелектуалізації. У майбутньому, з розвитком таких технологій, як AI та нульове знання, послуги з даних Блокчейн стануть ще більш інтелектуальними та безпечними, продовжуючи виступати основою для інновацій у галузі.