Đánh giá ban đầu về Chunking Subnet:
Sức mạnh của Cuộc thi Mở, Được Khuyến khích
Hoàn thành vào ngày 5 tháng 9 năm 2024

Hãy xem sổ tay của chúng tôi để tìm hiểu kỹ hơn về phương pháp của chúng tôi và cách truy vấn các thợ đào hàng đầu.

🔗 Juptyer Notebook: https://t.co/tkufM4haT4
🔗 GitHub Repo: https://t.co/62Cqes7sDl

Chúng tôi rất vui mừng khi chia sẻ rằng chúng tôi đã phát hành những đánh giá đầu tiên cho Chunking Subnet!

Đánh giá này xem xét phản hồi được phân đoạn của thợ đào có thứ hạng cao nhất, so với các nhà lãnh đạo ngành @AI21Labs và @UnstructuredIO, trên một đánh giá RAG hư cấu.

Với Top K = 5 (có nghĩa là năm phân đoạn liên quan nhất được bao gồm như bối cảnh), @chunking_subnet đạt 61.9%, @UnstructuredIO 56.7% và @AI21Labs 45.7%.

Đánh giá này sẽ được thực hiện hàng tuần, và sớm sẽ được hình ảnh hóa trên bảng điều khiển subnet của chúng tôi: https://t.co/T201iuXMaz

Lưu ý: Subnet vẫn đang trong giai đoạn đầu, nhưng đã bắt đầu hình thành! Bản vá tiếp theo sẽ cho phép các validator chọn ngẫu nhiên kích thước phân đoạn tối đa và số lượng phân đoạn tối đa, để các thợ đào phải tối ưu hóa cho một loạt các ứng dụng phổ biến.