השימוש בניתוח הסינטימנטציה כדי להבין את דעת הקהל ההיסטורית

הקדמה: לנס חדש על העבר

במשך מאות שנים, היסטוריונים התבססו על קבוצה מוגבלת של מקורות ראשוניים – חשבונות ראייה, מסמכים רשמיים ויצירות שפורסמו – על מנת לבנות מחדש את הנוף הרגשי של תקופות של ג'ון.מקורות אלה, בעוד בלתי-סבירים, הם בהכרח סלקטיימים ולעתים קרובות משקפים את השקפותיהם של אליטה קטנה, מילולית, על ידי רוב עצום של קולות היסטוריים – התגובות של אזרחים רגילים, שינויים של אוכלוסייה, אישורים פוליטיים, ושינויים פוליטיים בעלי השפעה עצומה, החל מניתוחים שונים, החל מניתוחים שונים של רגשות רגשיים.

מהו ניתוח החישה? – פריים טכניים

בליבתו, ניתוח רגשות הוא תת-שדה של עיבוד שפה טבעית (NLP) המשתמש בשיטות חישוביות כדי לזהות ולהוציא מידע סובייקטיבי מטקסט.המטרה היא לסווג את הקוטביות של מעבר נתון - בין אם הוא מבטא רגש חיובי, שלילי או נייטרלי - ולעתים קרובות כדי למדוד את עוצמת הרגש הזה.

גישות מבוססות לקסיקון

ניתוח רגשות מסורתי מבוסס על דיסלקציות שנבנו מראש של מילים המובנות עם valence רגשית.לדוגמה, מילה כמו "שמחה" עלולה להיות הבקיעה +3, בעוד "despair" יכול להיות הבקיע כמו -3. האלגוריתם נחשב תדירות ועוצמה של המילים האלה בטקסט וממוצע אותם כדי לייצר ציון רגשי כולל.

למידה מרחוק ולמידה עמוקה

מערכות מתקדמות יותר מאמנות מודלים על גבי אורת טקסט היברידית גדולה אשר כבר מתוייגת באופן ידני עבור סנטימנט.מודלים אלה לומדים לזהות דפוסים, כולל רצפי מילים, מבנים סינקטקטיים, והקשר. Recurrent רשתות עצביות (RNNs) ואדריכלות מבוססת מירנר כמו ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ לפעמים ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇

בניית הקורפוס ההיסטורי: מקורות מידע טקסטואלי

האיכות וההיקף של מחקר ניתוח רגשות תלויים באופן ביקורתי בנתונים.חוקרים היסטוריים מעצבים נתונים ממגוון מקורות דיגיטליים, כל אחד עם כוחותיו ומגבלותיו שלו.

עיתונים ותקופות

אוספים מסיביים כמו FLT:0 [Chronicling AmericaveFLT:1] מסד נתונים של ספריית הקונגרס או ה-FLT:2 British Journal ArchiveFLT:3 לספק מיליוני דפים המשתרעים על פני מאות שנים.עיתונים עשירים בפרשנות, מכתבים לעורך, ודיווחו נאומים - מה שהופך אותם אידיאליים למעקב אחר שיח ציבורי.

מכתבים ומכתבים אישיים

אוספים של כתבי אישיות מציעים חלון אינטימי יותר לרגשות.פרויקטים כמו ה-FLT:0Diaries of WarcioFLT:1 או את התכתובת הניתוק של דמויות היסטוריות מאפשרות לחוקרים לעקוב אחר מסלולים רגשיים בודדים לאורך זמן. טקסטים אלה הם לעתים קרובות פחות פורמליים ובאופן רגשי יותר, מה שהופך אותם בעלי ערך לניתוח רגשות.

הודעות פוליטיות ומסמכים ממשלתיים

רשומות רשמיות, כולל דיונים פרלמנטריים, כתובות נשיאותיות וכבלים דיפלומטיים, מספקות רישום רשמי של רגשנות.טקסטים אלה בנויים מאוד ולעיתים קרובות משתמשים בשפה מעוצבת בקפידה כדי לתכנן טון מסוים.ניתוח של ⁇ על נאומים יכול לחשוף שינויים ברטוריקה פוליטית - לדוגמה, את הרגש השלילי העולה בחודשים המובילים עד מלחמה.

מקורות נוספים: פמפיונים, רומנים וארכיונים חברתיים

פאמפיונים ורחבי פנים היו התוכן הוויראלי של מאות שנים קודם לכן, לעתים קרובות מלאו דעות חזקות. הרומנים והיצירות הספרותיות, בעוד בדיונים, קודמים רגשות תרבותיים ופאניקה מוסרית. לאחרונה, ארכיונים של מדיה חברתית מוקדמת - כגון פוסטים של Usenet משנות ה-80 וה-90 - מעבר לגשר לעידן הדיגיטלי.הזמינות הרחבה של טקסט דיגיטלי באמצעות יוזמות כמו גוגל האט ואמון ממשיך להרחיב את ההיסטוריונימוסכם.

תוצאות חיפוש: Case Studies in Historical Sentiment Analysis

ניתוח של Sentiment הוחל על מגוון הולך וגדל של שאלות היסטוריות, הניב תובנות שמשלבות שיטות איכותניות מסורתיות.

מעקב אחר Wartime Morale וחרדה ציבורית

במחקר של מלחמת האזרחים האמריקנית, החוקרים ניתחו אלפי דינים ומכתבים באמצעות ניתוח רגשות למפות תנודות במוסר בקרב חיילים ואזרחים. על ידי ציון כל כניסה לערעור רגשי, הם הבחינו כי רגש שלילי זינק לאחר קרבות גדולים ובמהלך תקופות של קשיים כלכליים, בעוד רגש חיובי מקביל עם ניצחונות האיחוד וחדשות של שחרור זה, גישה כמותית אישרה כי היסטוריונים חשדו זמן רב, אך גם חשפו שינויים אזוריים בלתי צפויים, מאשר חיילים אחרים, לעתים קרובות, מאשר קדמוניים, אשר היו לעתים קרובות, לאחר מכן, לאחר מכן, אשר היו אלה, לאחר מכן, אשר היו דומים, מאשר קדמוניים, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, למשל, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לעתים קרובות, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, למשל, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן, לאחר מכן,

קריטריונים כלכליים ו- Social Unrest

השפל הגדול של שנות ה-30 הותיר עקבות טקסטיים מסיביים בעיתונים, דוחות ממשלתיים ומכתבים לבית הלבן.מחקר אחד הגיש ניתוח רגשות למכתבים שנשלחו לנשיא פרנקלין רוזוולט, ומצא כי רגש שלילי הגיע לשיא סביב חגים בנקאיים ומעבר לחוק הביטוח הלאומי - האחרון שיצר מחלוקת.המחקר הראה כיצד עבר רגשני מחושך לאופטימיות זהירה כמו תוכניות חדשות דיל השפיעו, בדומה לניתוחי מערכת העיתון במהלך המעקב הרטוריקה של הרטוריקה של הרדיאלית של הרטוריקה המפולנית של הרטוריקה והרטוריקה של הרדיאלית של הרטוריקה המפולנית של הרדיאלית של הרטוריקה של הרדיאלית של 1893.

תנועות חברתיות ושינוי תרבותי

תנועת הנשים בתחילת המאה ה-20 ניתן ללמוד באמצעות עדשת הרגש בעיתונים ובעמודות. חוקרים התרשו כיצד גדל רגש הזעם בעיתונים הזרם המרכזי בעקבות הפגנות גדולות והכניסת ארה"ב למלחמת העולם הראשונה, שפיתמו את תרומתן של נשים למאמץ המלחמתי.

« « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « «

אולי האפליקציות השאפתניות ביותר לנסות למדוד את "המואוד" של תקופה תרבותית שלמה.לדוגמה, החוקרים השתמשו בניתוח סנטימנט על מיליוני ספרים מהמאה ה-19 וה-20 כדי לעקוב אחר העב והזרימה של אופטימיות מול פסימיות.מחקרים אלה מציעים כי לעידן הוויקטוריאאני יש מחזור ייחודי, עם פסגות במהלך תקופות של התרחבות אימפריאלית וגזרות במהלך דיכאון כלכלי עצום שכזה, בעוד מחקרים משותפים, הם מספקים אירועים משותפים של אירועים אישיים, אשר יש להם, אשר מספקים מבחנים אישיים, אשר יש להם מרשימים.

אתגרים מתודולוגיים ועיסוקים טובים

החלת ניתוח רגשות לטקסט היסטורי אינה עניין פשוט של הפעלת אלגוריתם מודרני על נתונים ישנים. היסטוריונים חייבים להתמודד עם קבוצה של אתגרים ייחודיים.

שינוי לשוני וקונטקסט

משמעות המילה מתפתחת. "נס" פעם הייתה "פומבית" או "מאיר"; "בחינם" במקור פירושו "מבולבל" או "שמחה" סרקסאם, אירוניה, ומטאפורה הם קשים לשמצה עבור אלגוריתמים, וטקסטים היסטוריים עשירים בהם. משפט כמו "מה רעיון מבריק לשקוע את הספינה" יכול להיות מפורש חיובי על ידי חוקרי סלקציה נאיביים חייב לעתים קרובות להשתמש בתבניות רגשיות.

התעלמות מבאס וייצוג

הטקסטים ששרדו וספרותיים אינם מדגם אקראי של דעה היסטורית. Archives לעיתים קרובות מייצגים את קולות האליטה, את המילולית, ואת הפעילים פוליטית.נשים, מיעוטים, והעניים מיוצגים על ידי ניתוח Sentiment יכול לחזק באופן בלתי נמנע את ההטיות הללו אם ה-Dataset אינו בנוי בקפידה.

אמת ואמת קרקע

כיצד יודעים שהאלגוריתם מודד כראוי את הרגש?ביישומים מודרניים, אמת הקרקעית מבוססת באמצעות תוויות אנושיות.לטקסט היסטורי, לעיתים קרובות בלתי אפשרי לשאול אנשים מהעידן שבו הם מרגישים.חוקרים חייבים להשתמש בראיות היסטוריות אחרות – כגון תוצאות בחירות, השתתפות מחאה או חשבונות זמניים – כדי לאמת ציונים סנטימנטים.הם עשויים גם להסתמך על מספר רב של מאומנים עצמאיים בהקשרים היסטוריים כדי ליצור תווית של נתונים.

ההרחבה vs. Depth

ניתוח סיינטמנט מצטיין בגילוי דפוס על פני אלפי טקסטים, אבל לעתים קרובות הוא מפספס את העדינות של קולות בודדים.כנסת יומן יחיד עשויה להיות מאוד ambivalent, אבל האלגוריתם עשוי להיות ממוצע זה נייטרלי.המחקרים היעילים ביותר משלבים ניתוח כמותי עם קריאה קרובה של טקסטים ייצוגיים. גישה זו מעורבת-methods מכבדת את המורכבות של רגש אנושי תוך כדי מינוף כוח החישוב.

עתיד ניתוח החישה ההיסטורי

ככל שטכנולוגיית NLP מתקדמת וטקסט היסטורי נוסף הופכת לזמין בצורה ממוחשבת, התחום הוא פוד לצמיחה משמעותית.כמה מגמות מתעוררות מבטיחות להעמיק את ההבנה שלנו של דעת הקהל ההיסטורית.

ניתוח רב לשוני וצלב-Cultural

ניתוח רגשות נוכחי מתמקד מאוד באנגלית.העברה לשפות אחרות - ובאופן מאתגר יותר, לשפות מתות כמו אנגלית הלטינית או מימי הביניים - יפתח רטאות חדשות למחקר היסטורי גלובלי.פרויקטים כמו FLT:0 (WWWWWWWWWWWWWWalph):1 מפתחים מודלים היסטוריים עבור טקסטים עתיקים וימיים.צלב-תרבותיים יכולים להשוות את הרגש הציבורי במהלך אירועים דומים - לדוגמה, כיצד חברות שונות הגיבו להתפרצות של מלחמת העולם הראשונה.

גילוי נאות-Gearation

במקום פשוט טוב / קטובות חיובית, מודלים חדשים יכולים לזהות רגשות דיסקרטיים כגון כעס, פחד, אמון, הפתעה ושמחה.זה שימושי במיוחד עבור ההיסטוריה, שבו הצבעים הרגשיים הוא ננוד.כעס עלול לטרף מהפכה, בעוד הפחד עשוי ללוות מגיפה.זה-רגש ניתוח רגש יכול לעזור להיסטוריונים להצביע על ההדקים של פעולה קולקטיבית.

תזמון דינמי ואירועי גילוי

ניתן לתאם סדרה של זמן רגישה עם אירועים היסטוריים, אך האלגוריתמים עצמם יכולים גם לעזור לזהות אירועים.לדוגמה, עלייה פתאומית ברגש שלילי על פני גוף עשוי לסמן משבר לא פתור או נקודת מפנה.יכולת זו של גילוי אירועים הופכת ניתוח רגשני לכלי לגילוי, לא רק מדידה.

היכרות עם מקורות נתונים אחרים

התובנות ההיסטוריות העשירות ביותר יגיעו משלב ניתוח רגשות עם צורות אחרות של נתונים כמותיים – אינדיקטורים כלכליים, רשומות מזג אוויר, נתונים דמוגרפיים המקשרים את הטון הרגשי ליבול מחירים או שיעורי תמותה, למשל, יכולים לחשוף כיצד הקשיים הכלכליים מתורגם למצב הרוח הציבורי.

מסקנה: הבנה היסטורית

ניתוח ⁇ לעולם לא יחליף את כלי השיט של ההיסטוריון, ההקשר והאמפתיה.האלגוריתם אינו יודע כי אנחה של הקלה במכתב מחייל ערב הקרב נושאת משקל שונה מאשר ההתלהבות המיוצרת של פוליטיקאי.אבל ככלי לקביעת דיוק וזיהוי דפוס, הוא מציע משהו היסטוריוני לא יכול להשיג: היכולת לעקוב אחר זרמי הרוח של חברה שלמה לאורך עשרות שנים.

ככל שהשדה הזה בוגר, סביר להניח שהוא יהיה מרכיב סטנדרטי של ערכת הכלים המתודולוגית של ההיסטוריון, המשלים מקורות מסורתיים ונרטיבים.התוצאה תהיה הבנה עשירה יותר, מרומזת יותר של החיים הרגשיים של הדורות הקודמים – ואולי, הערכה עמוקה יותר של התפקיד מנגן בעיצוב ההיסטוריה עצמה.