איך לבדוק כלי תמלול עם ההקלטות הקשות ביותר שלכם

למה אי אפשר להסתמך על הדגמה או על נתונים רשמיים?

בהדגמה יש שמע נקי, דובר ברור ונושא מוכר. בהקלטות שלכם יש מאוורר ברקע, דובר שנחלש ונבלע בסוף המשפט, שם משפחה שאף אחד לא יודע לאיית ומעבר פתאומי לשפה אחרת. כלים שנראים אותו דבר על שמע נקי יכולים להתנהג אחרת לגמרי על החומרים שלכם.

אותה בעיה קיימת גם במספרים שהחברות מפרסמות. המספרים האלה מגיעים ממערך בדיקה מסוים שנמדד בשיטה מסוימת, והוא לא בהכרח דומה לחומרים שלכם. חוץ מזה, אחוז בודד מסתיר איפה הטעויות קורות. כלי שתופס מילים נפוצות אבל מחטיא כל שם פרטי יכול להוציא ציון גבוה, ועדיין להיות חסר תועלת בשבילכם.

עם אילו הקלטות כדאי לבדוק?

קחו שלושה קטעים של בערך חמש דקות כל אחד. הראשון צריך להיות הקלטה רגילה שלכם. השני צריך להיות המקרה הכי גרוע שיש לכם: רעש ברקע, דובר שיושב רחוק מהמיקרופון, אנשים שנכנסים אחד לדברי השני או מבטא כבד. הקטע השלישי יבדוק את מה שמאפיין את העבודה שלכם, כמו מעבר בין שפות, מונחים מקצועיים או שיחה מרובת משתתפים.

עבדו עם הקלטות אמיתיות שיש לכם אישור מהמשתתפים להשתמש בהן, ושמרו על פרטיותן. בחרו קטעים שאתם כבר יודעים מה נאמר בהם, או פשוט תקשיבו להם פעם אחת בעצמכם, כדי שיהיה לכם טקסט מדויק להשוות אליו.

מה כדאי למדוד?

לפני שמפעילים את הכלים, רשמו לעצמכם מתוך כל קטע רשימה קצרה של פרטים שאסור לטעות בהם: עשרה שמות, עשרה מספרים או תאריכים, ועשרה מונחים מהתחום שלכם. אחרי התמלול פשוט ספרו כמה מתוכם כל כלי תפס נכון. זה יגיד לכם הרבה יותר מציון כללי, כי אלה בדיוק הטעויות שפוגעות בעבודה שלכם.

אחרי זה תסתכלו על הדברים שהופכים תמלול למשהו שאפשר לעבוד איתו. האם חלוקת הדוברים נכונה, ומה קורה כשמישהו מתפרץ לדברים? האם חותמות הזמן יושבות בדיוק על השמע? הפיסוק הגיוני? והאם הכלי שומר על השפה של כל קטע, כולל דיבור שמערבב שפות וטקסט מימין לשמאל בעברית ובערבית?

מדד שיעור שגיאות המילים, או WER, מחבר את מספר המילים שהוחלפו, נמחקו או נוספו לעומת טקסט המקור, ומחלק בסך כל המילים במקור. למחקר זה מדד מועיל, אבל אי אפשר לחרוץ על פיו דין של כלי עבודה. מבחינת המדד הזה, ה״א הידיעה שנפלה ושם משפחה שהשתבש שווים בדיוק אותו דבר.

למה הזמן עד לקובץ מוכן הוא המדד החשוב ביותר?

בסוף אתם משלמים בשביל תמלול גמור. הפעילו שעון עצר כשאתם מעלים את הקובץ, ועצרו אותו רק כשיש לכם ביד גרסה שהייתם שולחים ללקוח. הזמן הזה כולל גם את ההמתנה לתמלול הראשוני וגם את העריכה: למצוא טעויות, לתקן אותן, לוודא שהדוברים מסומנים נכון ולייצא את הקובץ.

כלי שעושה קצת יותר טעויות אבל נותן עורך מהיר וגישה נוחה לשמע יכול להביא אתכם לקובץ גמור מהר יותר מכלי מדויק שמסורבל לערוך בו. ב־KolWrite ניגון השמע, הטקסט, תוויות הדוברים וחותמות הזמן יושבים באותו מסך, ואפשר לייצא את הטקסט המתוקן ל־TXT, DOCX, PDF, JSON, SRT או VTT. מדדו את הזמן הזה מההתחלה ועד הסוף בכל כלי שאתם בודקים.

מה עוד חשוב לבדוק מלבד הטקסט?

תעברו פעם אחת על כל תהליך העבודה. העלו קובץ ארוך כדי לראות איך המערכת אוכלת אותו. ייצאו לכל פורמט שאתם צריכים ביום־יום ופתחו את הקבצים בתוכנות שבהן אתם באמת עובדים, כמו Word, נגן כתוביות או תוכנת עריכה. אם אתם עובדים בעברית או בערבית, בדקו שהטקסט המיוצא באמת נקרא מימין לשמאל ושהפיסוק ליד מילים באנגלית נשאר במקום.

בדקו גם את הסביבות שבהן אתם עובדים: דפדפן, iPhone, Android, Mac או API. אם אתם מעדיפים שבוט לא ייכנס לכם לשיחות, ודאו שהשירות מאפשר פשוט להעלות הקלטות קיימות. KolWrite עובדת ישירות מקבצים שמעלים אליה, ואפשר לפתוח אותה בדפדפן בכתובת web.kolwrite.com ולבדוק אותה על קטע קצר.

איך משווים תנאי פרטיות וחבילות שירות?

לפני שמעלים חומר רגיש, עברו על עמודי האבטחה והפרטיות של השירות. כדאי לבדוק איפה המידע יושב, אם התקשורת והאחסון מוצפנים, אילו ספקי בינה מלאכותית מעבדים את השמע, אם משתמשים בתוכן שלכם לאימון מודלים, ואיך מוחקים את הקבצים.

אחר כך עברו על פרטי החבילה והמגבלות שלה: אורך קובץ מרבי, שפות נתמכות ופורמטים לייצוא. מחירים ומכסות משתנים כל הזמן, אז בדקו את עמוד המחירים של כל שירות ביום שבו אתם מחליטים. השוו כמה עולה לכם להוציא תמלול גמור, ולא רק מה המחיר לשעת שמע.

איך מנתחים את התוצאות ומקבלים החלטה?

סדרו את התוצאות בטבלה פשוטה: כמה פרטים קריטיים יצאו נכונים, כמה טעויות היו בזיהוי דוברים, כמה זמן לקח להגיע לקובץ מוכן, איך נראה הקובץ בייצוא והאם תנאי הפרטיות מתאימים לכם. תנו לכל שורה משקל לפי מה שחשוב בעבודה שלכם. אם שני כלים יוצאים קרובים, לכו על זה שהיה יותר נוח לעבור עליו ולערוך בו.

כשהצרכים שלכם משתנים או כשאחד הכלים מוציא עדכון משמעותי, הריצו את הבדיקה שוב. הבחירה הראשונה שלכם לא חייבת להיות קבועה, ובדיקה קצרה עולה הרבה פחות מחודש של עבודה עם כלי שלא מתאים להקלטות שלכם.