Trình kiểm tra burstiness miễn phí Biểu đồ độ phân tán độ dài câu

Sự phân tán độ dài câu trong một đoạn văn, độc lập với độ dài trung bình. Hai đoạn văn có thể có cùng độ dài trung bình là mười tám từ mỗi câu và đọc hoàn toàn khác nhau: một đoạn giữ mọi câu trong phạm vi vài từ so với giá trị trung bình đó, đoạn còn lại xen kẽ câu sáu từ với câu bốn mươi từ. Bộ kiểm tra báo cáo sự phân tán đó dưới dạng hệ số biến thiên, độ lệch chuẩn của số từ trên mỗi câu chia cho giá trị trung bình, vì vậy con số phản ánh phân phối thay vì chỉ là một độ dài điển hình duy nhất.

Vì một mô hình ngôn ngữ khi tạo phần tiếp nối có xác suất cao nhất thường có xu hướng ổn định ở các độ dài câu tập trung gần trung tâm của phạm vi riêng của nó, nên đầu ra thô của mô hình thường tạo ra một chuỗi câu có độ dài gần nhau trong phạm vi vài từ. Sự tụ lại đó là một thuộc tính của phân bố, và burstiness là một cách trực tiếp để định lượng mức độ chặt chẽ mà một tập giá trị tụ quanh trung tâm của chính nó.

Khoảng 45 phần trăm trở lên cho thấy mức độ phân tán rộng, sự pha trộn giữa câu ngắn và câu dài, đặc trưng của văn bản đã được chỉnh sửa. Từ khoảng 20 đến 45 phần trăm là mức phân tán vừa phải. Dưới khoảng 20 phần trăm, độ dài cụm lại chặt chẽ và nhịp điệu đọc lên có cảm giác đồng đều. Hãy coi các mốc này là điểm tham chiếu thay vì ngưỡng, một mục phương pháp có quy trình đánh số có thể chấm điểm thấp hơn mà không có gì sai.

Không có loại khẳng định như vậy. Nó chỉ báo cáo một thống kê phân phối về độ dài câu, và không hơn gì thế. Một phân phối tập trung chặt chẽ thường xuất hiện trong đầu ra AI chưa được biên tập, đây cũng là một lý do khiến mọi người kiểm tra nó, và nó cũng xuất hiện trong nhiều bài viết của con người chưa từng được đọc thành tiếng trong quá trình chỉnh sửa. Con số mô tả một mẫu trong văn bản và không nói gì về nguồn gốc của nó.

Có, vì chỉ một hệ số có thể nén toàn bộ một phân phối thành một con số duy nhất. Một đoạn có một câu rất dài và các câu còn lại ngắn có thể nhận điểm gần như một đoạn có độ chuyển mượt từ ngắn sang dài, dù khi đọc lên hai đoạn hoàn toàn không giống nhau. Biểu đồ bên dưới tồn tại đúng vì lý do này, nó cho thấy hình dạng mà con số đang tóm tắt, ngoài phần tóm tắt đơn thuần.

Trước hết hãy biên tập để nhấn mạnh ý, rồi để phân bố tự điều chỉnh theo. Tìm câu trong mỗi đoạn đang mang mệnh đề thực sự và rút gọn nó. Gộp hai câu mỏng, có liên quan, thành một câu. Tách một câu đang chồng ba mệnh đề tại chỗ ngắt tự nhiên của nó. Mỗi chỉnh sửa như vậy làm thay đổi hình dạng của phân bố như một hệ quả phụ của văn xuôi đọc tốt hơn, và đó mới là chiều của quan hệ nhân quả nên diễn ra.