Глибина аналізу Subsquid: від чого залежить конкурентоспроможність у сфері Web3?

Цей звіт був написаний Tiger Research і аналізує децентралізовану інфраструктуру даних Subsquid, яка має на меті заповнити прогалину між прозорістю даних Блокчейн і їх доступністю.

Підсумок основних моментів

• Subsquid (далі SQD) спростив доступ до даних Блокчейн за допомогою децентралізованої інфраструктури. Він підтримує понад 200 Блокчейнів та розподіляє дані на кілька вузлів.
• SQD мережа використовує модульну структуру, що дозволяє розробникам вільно налаштовувати методи обробки та зберігання даних. Це дозволяє користувачам ефективно використовувати дані через єдину структуру в багатоланцюговому середовищі.
• Subsquid прагне стати опорою даних Web3, подібно до стандарту, встановленого Snowflake з формулюванням "одна платформа, багато навантажень". Завдяки нещодавньому придбанню Rezolve AI, він розширює свій бізнес у сферах AI та платежів. SQD має потенціал стати основною інфраструктурою для зв'язку між Web3 та економікою агентів.

1. Блокчейн дані дійсно відкриті для всіх?

Однією з визначальних характеристик технології Блокчейн є те, що всі дані відкриті для всіх. Традиційні галузі зберігають дані у закритих базах даних, недоступних ззовні. Принцип роботи Блокчейну інший. Усі записи прозоро публікуються в ланцюгу.

Однак, прозорість даних не гарантує легкість їх використання. Прозорість даних не може забезпечити доступність. Блокчейн оптимізовано для безпечного виконання транзакцій та досягнення мережевої консенсусу. Він не є інфраструктурою, розробленою для аналізу даних. Функції перевірки та зберігання даних покращилися, але інфраструктура для ефективного запиту та використання цих даних все ще недостатня. Методів запиту даних у ланцюзі з десяти років тому до сьогодні не відбулося значних змін.

!

Джерело: Tiger Research

Розгляньте аналогію. Місто під назвою "Тигрове містечко" має величезну річку під назвою "Ефір". Ця річка є суспільним благом. Кожен може черпати з неї воду. Проте, черпати воду важко і неефективно. Кожен повинен приносити відро до берега річки, щоб безпосередньо черпати воду. Щоб використовувати її як питну воду, їм потрібно пройти процес очищення, кип'ятити або фільтрувати.

Поточне середовище розробки Блокчейн працює саме так. Багато даних доступні, але не вистачає інфраструктури для їх використання. Наприклад, припустимо, що розробник хоче використати дані торгівлі децентралізованої біржі Uniswap для створення dApp. Цей розробник повинен запитувати дані через RPC вузол Ethereum, обробляти їх та зберігати. Проте, RPC вузли мають обмеження для аналізу великих масивів даних або виконання складних запитів. Блокчейн екосистема працює в багатоканальному середовищі, яке містить кілька Блокчейн. Це ускладнює проблему ще більше.

Розробники можуть використовувати централізовані сервіси, такі як Alchemy або Infura, щоб подолати ці обмеження. Однак цей підхід підриває основну цінність децентралізації цієї технології Блокчейн. Навіть якщо смарт-контракти є децентралізованими, централізований доступ до даних може призвести до ризику цензури та єдиної точки відмови. Екосистема Блокчейн потребує фундаментальних інновацій у методах доступу до даних для досягнення справжньої доступності.

2. Subsquid：Нова парадигма базової інфраструктури даних Блокчейн

!

Джерело: SQD

Subsquid (далі SQD) є проектом децентралізованої інфраструктури даних, що має на меті вирішити складність і неефективність доступу до даних блокчейну. Мета SQD полягає в тому, щоб будь-хто міг легко використовувати дані блокчейну.

!

Джерело: Tiger Research

Повертаючись до попередньої аналогії. Раніше кожен повинен був носити відро до річки, щоб безпосередньо набрати воду. Тепер дистрибутивні водоочисні станції беруть воду з річок і очищають її. Людям у містечку більше не потрібно йти до річки. Вони можуть отримувати чисту воду в будь-який час, коли це потрібно. Команда SQD надала цю інфраструктуру через "SQD мережу".

SQD мережа працює як розподілений запитувальний двигун і дата-озеро. Вона наразі підтримує обробку даних з понад 200 Блокчейн мереж. З моменту запуску основної мережі в червні 2024 року, її масштаб зріс до обробки мільйонів запитів щомісяця. Це зростання зумовлене трьома ключовими характеристиками. Ці характеристики дозволяють SQD перевершити просту платформу для індексації даних та демонструють напрямок еволюції інфраструктури даних Блокчейн.

2.1. Використання децентралізованої архітектури для високої доступності

Велика частина існуючої інфраструктури даних Блокчейн залежить від централізованих постачальників, таких як Alchemy. Цей підхід має переваги у початковій доступності та управлінській ефективності. Однак він обмежує користувачів використанням лише тих ланцюгів, які підтримуються постачальником, і з ростом обсягу використання може призвести до значних витрат. Він також піддається впливу єдиних точок відмови. Ця централізована структура суперечить основній цінності децентралізації Блокчейн.

!

SQD мережа вирішила ці ці обмеження за допомогою децентралізованої архітектури. Постачальники даних збирають сирі дані з кількох блокчейнів, таких як Ethereum та Solana. Вони ділять дані на блоки, стискають їх і прикріплюють метадані для завантаження в мережу. Робочі вузли ділять дані, створені постачальниками даних, у постійному сховищі на блоки для розподіленого зберігання. Коли запит на запит надходить, вони швидко обробляються та відповідають. Кожен робочий вузол діє як міні API, що надає свої дані, що зберігаються. Вся мережа працює як тисячі розподілених API серверів. Оператори шлюзів виступають у ролі інтерфейсу між кінцевим користувачем і мережею. Вони отримують запити користувачів і пересилають їх відповідним робочим вузлам для обробки.

!

Джерело: SQD

Будь-хто може виступати в ролі робочого вузла або оператора шлюзу. Це дозволяє горизонтально масштабувати ємність мережі та обробну продуктивність. Дані зберігаються в кількох робочих вузлах у вигляді надмірності. Навіть якщо деякі вузли вийдуть з ладу, доступ до загальних даних не буде порушено. Це забезпечує високу доступність і гнучкість.

На початковій стадії впровадження постачальниками даних наразі керує команда SQD. Ця стратегія забезпечує початкову якість та стабільність даних. Зі зрілістю мережі зовнішні постачальники зможуть брати участь через токен-управління. Це дозволить повністю децентралізувати етап закупівлі даних.

2.2. Економіка токенів для забезпечення стійкості мережі

Для нормальної роботи дистрибутивної мережі учасники повинні мати мотивацію діяти добровільно. SQD вирішує цю проблему за допомогою економічної ін incentive structure навколо рідного токена $SQD . Кожен учасник стейкує або делегує токени відповідно до своєї ролі та відповідальності. Це спільно створює стабільність і надійність мережі.

Рабочі вузли є основними операторами, які керують даними Блокчейн. Щоб взяти участь, вони повинні заблокувати 100,000 $SQD як заставу на випадок зловмисних дій або надання некоректних даних. Якщо виникнуть проблеми, мережа конфіскує їхній депозит. Вузли, які постійно надають стабільні та точні дані, отримають винагороду у вигляді токенів $SQD . Це природно стимулює відповідальну роботу.

Оператори шлюзів повинні заблокувати $SQD токен, щоб обробити запити користувачів. Кількість заблокованих токенів визначає їхню пропускну здатність, тобто кількість запитів, які вони можуть обробити. Триваліший термін блокування дозволяє їм обробляти більше запитів.

Власники токенів можуть брати участь у мережі непрямим способом, не запускаючи власні вузли. Вони можуть делегувати свої права довіреним робочим вузлам. Вузли, які отримують більше делегувань, отримують право обробляти більше запитів та заробляти більше винагород. Делеганти ділять частину цих винагород. Наразі немає мінімальних вимог до делегування або обмежень на термін блокування. Це створює бездозвільну систему кураторства, в якій спільнота може в режимі реального часу обирати вузли. Вся спільнота бере участь у управлінні якістю мережі через цю структуру.

2.3. Реалізація гнучкої модульної структури

Іншою помітною рисою мережі SQD є її модульна структура. Існуючі рішення для індексації використовують монолітну структуру, обробляючи всі етапи, такі як збір, обробка, зберігання та запит даних, в єдиній системі. Це спрощує початкову настройку, але обмежує свободу розробників у виборі методів обробки даних або місць зберігання.

SQD повністю відокремлює шар доступу до даних від обробного шару. SQD мережа обробляє лише частину E (екстракція) у процесі ETL (екстракція-перетворення-завантаження). Вона виступає лише як «дані живлення», швидко та надійно екстрагуючи оригінальні дані Блокчейн. Розробники використовують SQD SDK, щоб вільно обирати, як перетворювати та зберігати дані.

!

Ця структура забезпечує реальну гнучкість. Розробники можуть зберігати дані в PostgreSQL і надавати їх через GraphQL API. Вони можуть експортувати їх у файли CSV або Parquet. Вони можуть безпосередньо завантажувати їх до хмарних сховищ даних, таких як Google BigQuery. Майбутні плани включають підтримку масштабованих середовищ аналізу даних через Snowflake, а також інтеграцію через Kafka для прямої потокової передачі даних без окремого зберігання, щоб реалізувати платформи для реального аналізу та моніторингу.

Співзасновник SQD Дмитро Железов порівняв це з "наданням LEGO-цеглинок". SQD не пропонує готову продукцію, а надає найбільш продуктивні та надійні сировини розробникам. Розробники комбінують ці матеріали відповідно до своїх потреб для створення власної інфраструктури даних. Традиційні підприємства та криптопроекти можуть використовувати знайомі інструменти та мови для обробки даних Блокчейн. Вони можуть гнучко будувати оптимізовані для своїх конкретних галузей та випадків використання канали даних.

3. Наступний крок Subsquid: шлях до кращої інфраструктури даних

Команда SQD знизила складність та неефективність доступу до даних Блокчейн через мережу SQD та заклала основу для децентралізованої інфраструктури даних. Проте, оскільки масштаб та обсяг використання даних Блокчейн швидко зростає, простий доступ вже не є достатнім. Екосистема тепер потребує швидшої обробки та більш гнучкого середовища використання.

Команда SQD працює над удосконаленням мережевої структури, щоб задовольнити ці потреби. Команда зосереджується на підвищенні швидкості обробки даних та створенні структур, здатних обробляти дані без залежності від серверів. Щоб досягти цієї мети, SQD поступово розробляє 1) SQD Portal та 2) Light Squid.

3.1. SQD Portal：Децентралізація паралельної обробки та реальних даних

У існуючій мережі SQD шлюз виконує роль посередника між кінцевим користувачем і робочими вузлами. Коли користувач запитує інформацію, шлюз пересилає його відповідному робочому вузлу і повертає відповідь кінцевому користувачу. Цей процес є стабільним, але запити можуть оброблятися лише послідовно. Масові запити потребують досить тривалого часу. Навіть за наявності тисяч робочих вузлів система не змогла повністю використати їхню обробну потужність.

!

Джерело: SQD

Команда SQD має на меті вирішити цю проблему за допомогою SQD Portal. Основою Portal є Децентралізація та паралельна обробка. Він розподіляє окремий запит на кілька частин і одночасно надсилає запити приблизно до 3000 або більше робочих вузлів. Кожен робочий вузол паралельно обробляє доручену йому частину. Portal потім в режимі реального часу збирає ці відповіді та доставляє їх через потокове передавання.

Портал заздалегідь завантажить дані в буфер. Це забезпечує безперервну доставку навіть у разі мережевих затримок або тимчасових збоїв. Як YouTube буферизує відео для безшовного відтворення, користувачі можуть отримувати дані без очікування. Команда також переписала оригінальний запитувальний механізм, який був на основі Python, на Rust. Це значно покращило ефективність паралельної обробки. Загальна швидкість обробки зросла в десятки разів у порівнянні з попереднім часом.

Portal більш досконало вирішує проблему з реальними даними. Незалежно від того, як швидко обробляються дані, робочі вузли зберігають лише підтверджені історичні Блоки. Вони не можуть отримати інформацію про нещодавно згенеровані останні транзакції або Блоки. Користувачі раніше все ще повинні були покладатися на зовнішні RPC вузли для отримання цієї інформації. Portal вирішує цю проблему за допомогою реального розподіленого потоку, що називається "Hotblocks". Hotblocks в реальному часі збирають новозгенеровані непідтверджені Блоки з RPC вузлів Блокчейн або спеціалізованих потокових сервісів та зберігають їх всередині Portal. Portal об'єднує підтверджені історичні дані з робочих вузлів з останніми даними Блоків з Hotblocks. Користувачі можуть отримувати дані з минулого до теперішнього в одному запиті без потреби окремого RPC з'єднання.

Команда SQD планує повністю перейти на Portal. Portal наразі знаходиться на етапі закритого тестування. У майбутньому будь-хто зможе безпосередньо запускати вузли Portal та виконувати роль шлюзу в мережі. Існуючі оператори шлюзів природно перейдуть на операторів Portal. (Архітектуру мережі SQD можна знайти за цим посиланням.)

3.2. Light Squid：Індекс у локальному середовищі

SQD мережа надійно надає дані, але розробники все ще стикаються з обмеженнями в управлінні незалежними серверами. Навіть при отриманні даних з робочих вузлів через Portal, потрібні великі сервери бази даних, такі як PostgreSQL, для обробки та доставки їх користувачам. Цей процес вимагає значних витрат на будівництво та обслуговування інфраструктури. Дані все ще залежать від єдиного постачальника (сервер розробника), що є далеким від справжньої дистрибутивної структури.

!

Light Squid спростив цей проміжний етап. Стара структура була схожа на оптовика (розробника), який експлуатує великі склади (сервери) для розподілу даних споживачам. Light Squid трансформує це в метод D2C (прямий доступ до споживача), доставляючи дані безпосередньо з джерела (мережа SQD) кінцевим користувачам. Користувачі отримують необхідні дані через Portal і зберігають їх у локальному середовищі. Вони можуть безпосередньо запитувати в браузері або на особистих пристроях. Розробникам не потрібно підтримувати окремі сервери. Навіть якщо з'єднання користувача з мережею переривається, вони можуть переглядати локально збережені дані.

Наприклад, програма, що відображає історію транзакцій NFT, тепер може працювати безпосередньо у браузері користувача без центрального сервера. Це схоже на те, як Instagram відображає інформаційний потік в офлайн-режимі у Web2. Вона призначена для забезпечення плавного користувацького досвіду для dApp у локальному середовищі. Однак Light Squid спроектовано як варіант, що має на меті реалізувати таке ж середовище індексації локально. Це не може повністю замінити серверну структуру. Дані все ще постачаються через розподілену мережу. З розширенням використання до рівня користувачів, екосистема SQD має потенціал еволюціонувати в більш доступну форму.

4. Як Subsquid працює на практиці

SQD мережа є лише інфраструктурою, що забезпечує дані, але її можливості безмежні. Як і всі IT-індустрії, що починаються з даних, покращення інфраструктури даних розширює можливості всіх послуг, що базуються на ній. SQD вже змінює спосіб використання даних Блокчейн у різних сферах і приносить конкретні результати.

4.1. Розробники DApp: єдине управління даними на кількох ланцюгах

Децентралізований обмін PancakeSwap є показовим прикладом. У середовищі з кількома блокчейнами обмін повинен в реальному часі узагальнювати обсяги торгівлі, дані про ліквідні пулі та інформацію про токен-пари для кожного блокчейну. Раніше розробникам потрібно було підключати RPC-нотки для кожного блокчейну, розбирати журнали подій і окремо узгоджувати різні структури даних. Цей процес повторювався щоразу при додаванні нового блокчейну. З кожним оновленням протоколу навантаження з обслуговування зростало.

Використовуючи SQD, PancakeSwap тепер може управляти даними з кількох ланцюгів через єдиний канал. SQD надає дані з кожного ланцюга у стандартизованому форматі. Тепер один індексатор може одночасно обробляти всі ланцюги. Додавання нового ланцюга тепер вимагає лише зміни конфігурації. Логіка обробки даних управляється послідовно з центрального місця. Команда розробників зменшила час, витрачений на управління інфраструктурою даних. Тепер вони можуть більше зосередитися на покращенні основних послуг.

4.2. Аналітик даних: гнучка обробка даних та інтеграційний аналіз

Платформи аналізу даних на базі Блокчейн, такі як Dune та Artemis, забезпечують високу доступність та зручність, дозволяючи швидко та легко виконувати запити до даних за допомогою SQL. Однак їхні обмеження полягають у тому, що робота може виконуватись лише в межах ланцюгів та структур даних, які підтримуються платформою. При поєднанні з зовнішніми даними або виконанні складних перетворень потрібні додаткові процеси.

SQD доповнив це середовище, що дозволяє аналітикам даних вільніше працювати з даними. Користувачі можуть безпосередньо витягувати необхідні дані Блокчейн, перетворювати їх у потрібний формат і завантажувати у свої бази даних або сховища. Наприклад, аналітики можуть отримати дані про торги конкретної Децентралізованої біржі, агрегувати їх за часовими періодами, поєднувати з існуючими фінансовими даними та застосовувати у своїх аналітичних моделях. SQD не замінює зручність існуючих платформ. Він збільшує свободу обробки даних та масштабованість. Аналітики можуть розширити глибину та діапазон застосування аналізу даних на ланцюгу за рахунок більш широкого діапазону даних та індивідуалізованих методів обробки.

4.3. AI Інтелектуальні системи: Основна інфраструктура економіки інтелектуальних систем

Щоб AI-агенти могли автономно приймати рішення та виконувати угоди, їм необхідна інфраструктура, що забезпечує надійність та прозорість. Блокчейн надає відповідну основу для автономних агентів. Усі записи угод прозорі та важко піддаються зміні. Платежі криптовалютою забезпечують автоматичне виконання.

Проте, AI інтелектуальним агентам наразі важко безпосередньо отримати доступ до блокчейн інфраструктури. Кожен розробник повинен окремо створювати та інтегрувати джерела даних. Мережеві структури різні, що ускладнює стандартизований доступ. Навіть централізовані API сервіси вимагають кількох етапів, включаючи реєстрацію облікового запису, видачу ключів та налаштування платежів. Ці процеси передбачають людське втручання, що не підходить для автономного середовища.

SQD мережа усуває цю прогалину. На основі архітектури без дозволу, агенти автоматизують запити на дані та платежі через $SQD токен. Вони в режимі реального часу отримують необхідну інформацію та незалежно обробляють її. Це закладає оперативну основу для автономного ШІ, який підключається до мережі даних без людського втручання.

!

Джерело: Rezolve.Ai

9 жовтня 2025 року Rezolve AI оголосила про придбання SQD, що ще більше уточнює цей напрямок. Rezolve є постачальником бізнес-рішень на базі ШІ, який торгує на Nasdaq. Завдяки цьому придбанню Rezolve будує основну інфраструктуру економіки інтелектуальних агентів на базі ШІ. Rezolve планує поєднати цифрову платіжну інфраструктуру Smartpay, раніше придбану, з розподіленим рівнем даних SQD. Це створить інтегровану інфраструктуру, яка дозволить ШІ обробляти дані, інтелект і платежі в єдиному процесі. Як тільки Rezolve завершить цю інтеграцію, інтелектуальний агент на базі ШІ буде в реальному часі аналізувати дані Блокчейн і незалежно виконувати транзакції. Це стане важливим поворотним моментом для SQD як основи даних економіки інтелектуальних агентів на базі ШІ.

4.4. Інституційні інвестори: інфраструктура реальних даних для інституційного ринку

З розвитком токенізації активів реального світу (RWA) інституційні інвестори активно беруть участь в блокчейні. Інституціям потрібна інфраструктура даних, яка гарантує точність і прозорість, щоб використовувати дані блокчейну для торгівлі, розрахунків та управління ризиками.

!

Джерело: OceanStream

SQD представила OceanStream для задоволення цієї потреби. OceanStream - це децентралізована платформа для зберігання даних, яка може в режимі реального часу передавати дані з понад 200 блокчейнів. Ця платформа спрямована на забезпечення якісних даних та стабільності на рівні інститутів. Вона поєднує потокову передачу з затримкою менше ніж за секунду та понад 3PB історичних даних для покращення середовища тестування, ринкового аналізу та оцінки ризиків фінансових установ. Це дозволяє установам моніторити більше ланцюгів і класів активів у режимі реального часу з меншими витратами. Вони можуть виконувати регуляторну звітність та ринковий моніторинг в єдиній інтегрованій системі.

OceanStream взяла участь у круглому столі криптовалютної робочої групи, організованому Комісією з цінних паперів і бірж США, де обговорювали, як прозорість та перевірність даних на Блокчейн впливають на стабільність ринку та захист інвесторів. Це свідчить про те, що SQD встановлює себе як структуру, засновану на даних, що з'єднує токенізовані фінансові ринки з інституційним капіталом, а не просто як просту інфраструктуру.

5. Візія SQD: побудова стовпа даних Web3

Конкурентоспроможність індустрії Web3 залежить від її здатності використовувати дані. Однак через різні структури Блокчейн дані все ще залишаються у фрагментованому стані. Інфраструктура, яка ефективно вирішує цю проблему, все ще перебуває на ранній стадії. SQD закриває цей розрив, створюючи стандартизований рівень даних, який обробляє всі дані Блок на єдиній структурі. Крім даних на ланцюзі, SQD також планує інтегрувати дані поза ланцюгом, включаючи фінансові транзакції, соціальні мережі та бізнес-операції, щоб створити аналітичне середовище, яке охоплює обидва світи.

Це бачення подібне до того, як Snowflake встановлює стандарт інтеграції даних для традиційних галузей із "однією платформою, багатьма навантаженнями". SQD має на меті стати стовпом даних Web3, інтегруючи дані Блокчейн та підключаючи позамережеві джерела даних.

Однак, SQD потребує часу, щоб розвинутися в повністю децентралізовану інфраструктуру. Проект наразі перебуває на етапі керівництва, і команда SQD все ще відіграє важливу роль. Є обмеження в масштабах спільноти розробників і різноманітності екосистеми. Проте, зростання, яке демонструється всього через трохи більше року з моменту запуску автономної мережі, а також стратегічна експансія через придбання Rezolve AI, демонструють чіткий напрямок. SQD вказує шлях вперед для інфраструктури даних блокчейну та еволюціонує в основну платформу для підтримки всієї екосистеми Web3 — від розробки dApp до інституційних інвестицій і економіки інтелектуальних агентів AI. Її потенціал, як очікується, значно зросте.