PixelRAG: візуальний RAG для вебскрейпінгу без HTML-парсингу
Опенсорсний PixelRAG індексує сторінки як скриншоти, зберігає пікселі, використовує FAISS і Qwen3-VL-Embedding та підвищує точність QA.
Вебскрейпінг уже не буде таким, як раніше.
Вийшов PixelRAG — опенсорсний ретривер-фреймворк, який використовує зображення сторінок замість традиційного HTML-парсингу
За словами розробників, традиційні HTML-to-text пайплайни можуть втрачати понад 40% вмісту сторінки, зокрема таблиці, графіки та елементи розмітки. PixelRAG працює з документом у тому вигляді, у якому його бачить користувач після рендерингу.
Як працює пайплайн:
- Рендерить кожен документ (вебсторінки, PDF, зображення) у набір тайлів.
- Будує ембеддинги за допомогою Qwen3-VL-Embedding, донавченої через LoRA на скриншотах.
- Створює індекс FAISS і надає API для пошуку.
Якщо замінити модель-читач на потужнішу, точність зросте без переіндексації, оскільки індекс зберігає лише пікселі.
Для експериментів команда проєкту створила візуальний індекс усієї Вікіпедії — понад 30 мільйонів скриншотів. У підсумку навіть у такому форматі система перевершує найкращий текстовий RAG-бейзлайн на 18,1% у завданнях question answering лише за текстом.
Також представлено плагін для Claude Code, який дає змогу аналізувати відрендерені сторінки через скриншоти без роботи з DOM.
Увесь проєкт опубліковано у доступі під ліцензією Apache-2.0, а в є докладні розбори помилок, абляційні дослідження та порівняння більш ніж із 25 VLM-моделями.
Коментарі
Дайджест щотижня
Найкраще про vibe coding, AI-агентів та open source — раз на тиждень, без спаму.
Схожі статті
Всі статтіНовий open-source RAG: корпус у 40 разів менший і пошук точніший
Open-source підхід до RAG: стискає корпус у 40 разів, зменшує токени на запит у 3 рази та підвищує релевантність векторного пошуку у 2,3 раза.
5 open-source no-code платформ для LLM, RAG та AI-агентів
Огляд 5 open-source no-code платформ для створення LLM, RAG і AI-агентів: AutoAgent, AnythingLLM, Open Agent Platform, Sim та Dify.
Socraticode: локальний RAG для коду без API-ключів і сетапу
Утиліта піднімає векторну БД, рахує ембеддинги локально та індексує код. Працює з Claude, Cursor і Copilot. Запуск: npx -y socraticode.