מורה מדביק חיבור לתוך גלאי ומקבל "87% AI-generated". עורך מנהל מאמר פרילנסר's דרך מאמר אחר ומקבל "כנראה אנושי". למועמד לעבודה נאמר שהמכתב המקדים שלו סומן. בכל מקרה מתבקש מספר בודד לענות על שאלה על אדם: האם הם כתבו את זה? המספר הזה לא יכול לשאת את המשקל, והסיבות מתועדות היטב.
מה שניתן למדוד בכנות הוא הטקסט עצמו אורך המשפט, אוצר המילים, הגידור וסימני הפיסוק הם עובדות על כתיבה, והן אותן עובדות שגורמות לטיוטה להרגיש נוסחתיים לקורא מדריך זה מסביר מדוע זיהוי מחברים נכשל, מה המשמעות של כל אות מדיד, כיצד המספרים מחושבים וכיצד להשתמש בהם כדי לשפר טיוטה במקום להאשים מישהו הדוגמאות משתמשות ב בודק כתיבה בינה מלאכותית, אחד מה כלי כתיבה בינה מלאכותית ב-toolz, המדווח על שישה אותות ולא נותן בכוונה הסתברות למחבר בינה מלאכותית.
TL;DR: אף כלי לא יכול לדעת באופן מהימן אם AI כתב טקסט. OpenAI משכה את המסווג שלה בשנת 2023 בגלל דיוק נמוך, ומחקרים מראים שגלאים מסמנים לעתים קרובות כותבים אנגלים שאינם ילידי הארץ כ-AI. מה שבודק יכול למדוד בכנות הוא הכתיבה: וריאציה באורך המשפט (התפרצות), אורך משפט ממוצע, אוצר מילים בשימוש יתר לכל 1,000 מילים, ביטויי גידור, צפיפות מקף em ופותחי חיבור בודק כתיבה בינה מלאכותית מדווח על ששת האותות האלה עם הראיות מאחורי כל אחד מהם, פועל בצד הלקוח, והוא בחינם, ללא הרשמה.
האם גלאי AI יכול לדעת מי כתב טקסט?
מס 'גלאי AI הוא מסווג סטטיסטי שמנחש על מחבר מתכונות פני השטח של הטקסט, והניחושים האלה שגויים לעתים קרובות מספיק כדי לפעול על פיהם אינו בטוח.
העדויות הברורות ביותר מגיעות מהחברות שבנו אותן.OpenAI פרסמה מסווג טקסט בינה מלאכותית בינואר 2023 ומשכה אותו ביולי 2023. העדכון על עמוד ההכרזה שלה אומר שהסווג כבר לא היה זמין " בשל שיעור הדיוק הנמוך שלו". כאשר הארגון שאימן את המודל אינו יכול לבנות גלאי אמין עבור הפלט שלו, ציון צד שלישי ראוי לביטחון מועט.
גם הכשלים אינם אקראיים. מחקר משנת 2023 של חוקרי סטנפורד, גלאי GPT מוטים נגד סופרים אנגלים שאינם ילידי הארץ (ליאנג וחב'), הריצו שבעה גלאים בשימוש נרחב על פני מאמרי TOEFL שנכתבו על ידי דוברי אנגלית שאינם שפת אם. יותר ממחצית מאותם חיבורים שנכתבו על ידי אדם סווגו כ-AI בממוצע, בעוד שמאמרים של תלמידי כיתות ח' בארהב סווגו בצורה מדויקת הרבה יותר. המנגנון פשוט: אנשים שכותבים בשפה שנייה נוטים להשתמש באוצר מילים צר יותר ובמבנה משפטים קבוע יותר, וקביעות היא בדיוק מה שגלאים קוראים כדמוי מכונה.
שתי בעיות נוספות הופכות את הציונים לשבירים. עריכה קלה של טיוטה שנוצרה יכולה להעביר ציון מ-"AI" ל-"human". ועריכה כבדה של טיוטה אנושית עם תוכנת דקדוק יכולה להזיז אותה לכיוון השני. מדידה שמתהפכת תחת עריכה רגילה אינה מדידת מחבר.
מה בודק כתיבה יכול למדוד בכנות?
זה יכול למדוד מאפיינים של הטקסט שהם נכונים ללא קשר למי הפיק אותו. בודק Toolz מדווח על שישה:
| אות | מה זה מודד | איך מדווחים על זה | סוף דמוי אדם | סוף נוסחתי |
|---|---|---|---|---|
| וריאציה באורך המשפט | כמה אורכי המשפט שונים (התפרצות) | מקדם שונות, באחוזים | 70% או יותר | 15% או פחות |
| אורך משפט ממוצע | מילים ממוצעות למשפט | מילים | 14 או פחות | 30 או יותר |
| אוצר מילים בשימוש יתר | כ-40 מילים דוגמניות שימוש יתר | ספירה וקצב לכל 1,000 מילים | 0 לכל 1,000 | 20 או יותר לכל 1,000 |
| משפטי גידור | ביטויים כמו " ראוי לציין" | לספור | 0 | 5 או יותר |
| צפיפות מקף Em | Em ו-en מקפים | ספירה וקצב לכל 1,000 מילים | 0 לכל 1,000 | 10 או יותר לכל 1,000 |
| פותחי חיבור | משפטים המתחילים יתר על כן, יתר על כן, עם זאת | חלק משפטים | 0% | 30% או יותר |
כל אות ממוקם בסולם של 0 עד 1 בין שני העוגנים הללו, וצבע כמו אנושי (מתחת ל-0.34), מעורב (0.34 עד 0.67) או נוסחתי (מעל 0.67) העוגנים הם ספי עריכה, לא חתכים סטטיסטיים למחבר הם מסמנים היכן קורא מתחיל להבחין בתבנית.
כל אות מפרט גם את העדויות שלו: אורכי המשפט בפועל, המילים תואמות, המשוכות שנמצאו, המשפטים שנפתחו בחיבור. אם מספר נראה שגוי, הראיות מראות מדוע.
מהי התפרצות, ומדוע היא האות החזק ביותר?
התפרצות היא כמה אורך המשפט משתנה על פני טקסט כתיבה אנושית מערבבת משפטים קצרים וארוכים משפט בן שלוש מילים נוחת נקודה משפט בן שלושים מילים עובר על הסמכה עם הסעיפים שלו טיוטות שנוצרו נוטות להתיישב באורך בינוני אחיד, משפט אחר משפט של חמש עשרה עד עשרים ושתיים מילים.
הבודק מדווח על התפרצות כמקדם השונות: סטיית התקן של אורכי המשפט חלקי הממוצע. חלוקה בממוצע הופכת את הדמות לבלתי תלויה באורך המשפטים הכוללים, כך שניתן להשוות בצורה הוגנת טקסט של משפטים קצרים וטקסט של ארוכים.
הנה החישוב לארבעה משפטים באורכים של 4, 17, 2 ו-11 מילים:
mean = (4 + 17 + 2 + 11) / 4 = 8.5
squares = 4.5² + 8.5² + 6.5² + 2.5² = 20.25 + 72.25 + 42.25 + 6.25 = 141
variance = 141 / 4 = 35.25
std dev = √35.25 ≈ 5.94
CV = 5.94 / 8.5 ≈ 0.70 → "70% variation"
ב-70% הטקסט יושב בקצה דמוי האדם. שנה את האורכים הללו ל-15, 17, 16 ו-18 וסטיית התקן יורדת לכ-1.12 בממוצע של 16.5, וריאציה של בערך 7%, שהוא הקצה הנוסחתי.
התפרצות היא האות היחיד החזק ביותר מכיוון שקשה לזייף בלי לשכתב וקל לתקן אותו כשאתה עושה זאת: לפצל משפט אחד ארוך, למזג שניים קצרים ולהוסיף משפט קצר מאוד שבו נקודה ראויה להדגשה.
כיצד סופרים אוצר מילים, גידור, מקפים ופותחים?
אוצר מילים בשימוש יתר. הבודק סופר התאמות של מילים שלמות מתוך רשימה של כ-40 מילים המופיעות לעתים קרובות יותר בטקסט שנוצר מאשר בכתיבה אנושית, כולל leverage, robust, crucial, comprehensive, holistic, meticulous, transformative ו navigating. הספירה מומרת לשיעור לכל 1,000 מילים כך שטקסטים קצרים וארוכים משתווים.
משפטי גידור. עשרה דפוסים נספרים, כולל " חשוב לציין", " ראוי לציין", " יש לציין", "כשזה מגיע ל-", "בסוף היום", "אין צורך לומר" ו-"ב-today's fast-paced world".
צפיפות מקף Em. כל em dash ו-en dash נספרים ומומרים לקצב לכל 1,000 מילים אנשים המקלידים על מקלדת מייצרים את הדמות לעיתים רחוקות; דגמים מייצרים אותו ללא הרף.
פותחים מחברים. הבודק סופר משפטים שמתחילים ב- יתרה מכך, יתר על כן, בנוסף, במיוחד, חשוב, כתוצאה מכך או עם זאת, כחלק מכל המשפטים.
אורך משפט ממוצע. ספירת המילים הממוצעת למשפט. בסביבות 15 עד 20 מילים נקרא בנוחות; אחרי 25 הקורא מתחיל לעבוד.
משפטים מפוצלים לאחר תקופה, סימן שאלה או סימן קריאה ואחריהם רווח לבן, ומילים הן ריצות של אותיות ואפוסטרופים.קיצורים כמו " למשל" לכן יכול לפצל משפט מוקדם, מה שמשנה מעט את נתוני האורך. רשימת הראיות מציגה את האורכים כדי שתוכל לזהות אותו.
דוגמה עובדת עם כל מספר
הדבק את הטקסט הקצר הזה:
The report is ready. It covers three regions and explains why sales in the north fell by a fifth last spring. Read it. Moreover, it is important to note that the landscape is changing.
הבודק מדווח על 34 מילים ו-4 משפטים, עם האותות הללו:
| אות | ערך | פסק דין |
|---|---|---|
| וריאציה באורך המשפט | וריאציה של 70% (אורך 4, 17, 2, 11) | דמוי אדם |
| אורך משפט ממוצע | 8.5 מילים | דמוי אדם |
| אוצר מילים בשימוש יתר | מופע 1 (29.4 לכל 1,000 מילים): נוף | פורמולות |
| משפטי גידור | 1 נמצא: "חשוב לציין" | דמוי אדם |
| צפיפות מקף Em | 0 מקפים (0.0 לכל 1,000 מילים) | דמוי אדם |
| פותחי חיבור | 1 מתוך 4 משפטים | פורמולות |
שני שיעורים יוצאים מזה ראשית, שיעורים על טקסטים קצרים מאוד מתנדנדים חזק: מילה אחת ב-34 היא קצב של 29.4 לכל 1,000, מחוץ לסולם הדבק לפחות כמה מאות מילים לפני שתקרא הרבה לתוך אוצר המילים וקצבי המקף שנית, האותות מצביעים על משפט ספציפי האחרון נושא פותחן, גידור ומילה רשומה, ושכתוב אותו ל-" השוק משתנה." מנקה את שלושתם.
התווית הכוללת לטקסט זה היא "Reads naturally", כי הממוצע של ששת הציונים נוחת ממש מתחת לסף המעורב. התוצאה הגבולית הזו היא המחשה טובה מדוע התווית הכוללת היא סיכום של האותות ולא ציון.
איך כדאי להשתמש בבודק כתיבה, ואיך לא?
השתמש בו על הטיוטות שלך, כדי למצוא אילו פסקאות נקראות כנוסחתיות, וכדי ללמוד איך הדפוסים נראים השתמש בו בעת עריכה תרמה עבודה, כמצביע למקום שבו עריכה קלה תעזור.
אל תשתמש בו כדי להחליט אם סטודנט בגד, אם פרילנסר השתמש במודל, או אם מועמד כתב מכתב משלו. הדף אומר זאת בתיבת אזהרה מעל התוצאות, והסיבה חוזרת על עצמה: אף גלאי לא יכול לבסס מחבר, תוצאות חיוביות כוזבות נופלות בצורה הקשה ביותר על כותבים בשפה השנייה, והאשמה הבנויה על ניקוד עלולה לגרום נזק אמיתי למישהו שלא עשה שום דבר רע. אם המחבר באמת חשוב, דבר עם הכותב, עיין בטיוטות ובהיסטוריה של תיקונים, או בקש מהם להסביר את הנימוקים שלהם.
אין גם ציון לכוון אליו אם השונות נמוכה, שנה את המשפטים שלך אם הגידור גבוה, חתוך גדרות שניהם משפרים את הכתיבה מי שכתב את זה.
איך מתקנים את מה שהבודק מוצא?
לכל אות יש תיקון ישיר.
| מציאת | לתקן |
|---|---|
| וריאציה נמוכה באורך המשפט | לפצל משפט אחד ארוך; למזג שניים קצרים; להוסיף משפט קצר מאוד להדגשה |
| אורך משפט ממוצע גבוה | לשבור משפטים ב-"and", "which" ו-"כי" כאשר הסעיפים עומדים בפני עצמם |
| שיעור אוצר מילים גבוה | החלף כל מילה ברשימה במילה פשוטה: השתמש, חזק, מפתח, שלם |
| משפטי גידור | מחק את הביטוי; משמעות המשפט היא אותו דבר |
| שיעור מקף Em גבוה | החלף מקפים בנקודות עצירה, פסיקים או סוגריים, לפי המשפט שרוצה |
| פותחי חיבור | מחק את הפותח; סדר המשפטים כבר מראה את הקשר |
כמה מאלה ניתנים ליישום אוטומטי. ה AI Text Humanizer מסיר משוכות ופותחים, מחליף מילים בשימוש יתר ומחליף מקפים, ומפרט כל שינוי כדי שתוכל לסרב לאלו שאינם מתאימים. זה לא משנה את אורך המשפט, אז התפרצות היא עדיין עריכה ידנית. לולאה מעשית היא: בדוק, האנשה, ערוך קצב משפטים ביד, ואז בדוק שוב.
אם אתה רוצה לראות כמה העריכות שלך השתנו, הדבק את לפני ואחרי לתוך א בודק הבדל טקסט. עבור יעדי אורך בפלטפורמה ספציפית, המדריך ל ספירת מילים וזמן קריאה מכסה כיצד מחושבים ספירת מילים ומדוע הכלים אינם מסכימים.
בודק דפוסים לעומת גלאי AI לעומת ציון קריאות
שלושת הכלים הללו עונים על שאלות שונות ולעתים קרובות מבולבלים.
| סוג כלי | שאלה זה עונה | פלט | אמין עבור |
|---|---|---|---|
| גלאי AI | דוגמנית כתבה את זה? | הסתברות או פסק דין | שום דבר תוצאתי; הדיוק נמוך מדי |
| בודק דפוסים | אילו הרגלים נוסחתיים יש לטקסט הזה? | אותות מדודים עם ראיות | עריכה וביקורת עצמית |
| ציון קריאות (פלש וכדומה) | כמה קשה לקרוא את זה? | ציון ציון או קלות | התאמת טקסט לקהל |
נוסחת קריאות ובודק דפוסים חופפים לאורך המשפט אך מסתכלים על דברים שונים מעבר לו. ניקוד פלש סופר הברות לכל מילה; בודק הדפוסים סופר מילים וקונסטרוקציות ספציפיות. בשימוש יחד, הם אומרים לך אם טיוטה קשה לקריאה והאם היא נקראת בתבנית.
האם הטקסט מועלה או מאוחסן?
מס 'כל מדידה פועלת ב - JavaScript בדפדפן שלך הטקסט אינו משודר, נרשם או מאוחסן, והדף פועל במצב לא מקוון לאחר הטעינה כאשר תיבת הטקסט מאבדת מיקוד, הדף מתעד אירוע שימוש המכיל את ספירת המילים בלבד, לעולם לא את הטקסט.
זה חשוב למסמכים המדויקים שאנשים הכי רוצים לבדוק: טיוטות שלא פורסמו, עבודת סטודנטים, כתבי יד ותוצרי לקוחות רשימות המילים והסף קבועים בדף, כך שאותו טקסט תמיד מייצר את אותם מספרים, מה שהופך את התוצאות לניתנות לשחזור אם שני עורכים משווים הערות.
כדי לבדוק טיוטה עכשיו, הדבק אותו לתוך בודק דפוסי הכתיבה, קרא את הראיות מתחת לכל אות, ותקן את השניים או השלושה החשובים ביותר.
