‏LiteParse 2.0 با بازنویسی در Rust؛ تا ۱۰۰ برابر سریع‌تر

تیم LlamaIndex از نسخه‌ی ۲.۰ کتابخانه‌ی LiteParse رونمایی کرد؛ ابزاری برای پارس‌کردن اسناد که حالا کاملاً از صفر با زبان Rust بازنویسی شده. مهم‌ترین دستاورد این بازنویسی سرعته: تا ۱۰۰ برابر سریع‌تر از قبل پارس می‌کنه.

نکته‌ی دوم پوشش پلتفرمه. LiteParse حالا به‌صورت بومی روی Rust، جاوااسکریپت/تایپ‌اسکریپت و پایتون نصب می‌شه، و یک بسته‌ی اختصاصی WASM هم ساخته‌ان که اجازه می‌ده همین پارسر داخل مرورگر و روی محیط‌های edge اجرا بشه. یعنی یک هسته‌ی واحد، روی همه‌جا.

نصب آن بسته به اکوسیستم شما به همین سادگیه:

pip install liteparse
npm i @llamaindex/liteparse
cargo install liteparse

برای کارهای مبتنی بر LLM و RAG که حجم زیادی سند را باید سریع به متن ساختارمند تبدیل کنن، این ترکیب سرعت و قابلیت اجرا در مرورگر می‌تونه پردازش را به سمت کلاینت ببره و وابستگی به سرور را کم کنه.

نکات کلیدی:

• LiteParse 2.0 از صفر با Rust بازنویسی شده
• تا ۱۰۰ برابر سریع‌تر از نسخه‌ی قبل
• نصب بومی روی Rust، جاوااسکریپت/تایپ‌اسکریپت و پایتون
• بسته‌ی WASM برای اجرا در مرورگر و محیط‌های edge