המפיק, אומן הצבע ומומחה בטכנולוגיה של קולנוע דיגיטלי ותהליכי עבודה, ריצ’ארד לאקיי, Richard Lackey פרסם באתר Cinema5D מאמר המתמקד בתחום הטכנולוגיות המתחדשות והראייה האנושית.
הוא כותב: יותר כושר הפרדה (resolution), תחום דינמי רחב (HDR), קצבי תמונות גבוהים יותר, כיצד המגבלות של הראייה האנושית משפיעה על הטכנולוגיה..
כאשר מספיק זה מספיק? זוהי אחת השאלות המעניינות שעלו בכנס בו הוא השתתף ARRI Broadcast Day ראש מחלקת מערכות צילום של מארק שיפמן- מולר (Marc Shipman Mueller). מולר פתח בשאלה זו את האירוע וכיצד הדבר משפיע על מערכות ההפקה, פוסט והפצה. הכתבה מבוססת על הדעה האישיות של ריצ’ארד לאקיי המבוססות על הניסיון שלו בטכנולוגיות החדשות.

הגביע הקדוש
לפני הדור שהתרגל לקבל את הביצועים של פילם 35 מ”מ, היה הגביע הקדוש של מצלמות דיגיטליות. כיום אני כבר באותה רמה ואפילו מעבר לאתגר שנוצר עם הלידה של מצלמות קולנוע דיגיטליות גם מבחינה טכנית, וגם כמעט בכל דרך אחרת.
אנחנו עכשיו הרבה יותר מודאגים בניואנסים של מדע הצילום הדיגיטלי מאשר בפילם לעומת דיגיטל. המלחמה הסתיימה בניצחון של העולם הדיגיטלי, ברב העולם התוצאות מקובלות.
אז מה השלב הבא בעולם הקולנוע הדיגיטלי? וכמה הוא מונע בצורה מסחרית על יצרני הטלוויזיות שרוצות למכור את הגאג’ט הבא ולא על ידי שיפור משמעותי של חווית החזותית? לעומת זאת לאחר מספר שנים של חשכה מספר סטנדרטים מרכזיים מוגדרים ומאומצים על ידי התעשייה.

Digital Cinema 2.0
אם השלב הראשון של הקולנוע הדיגיטלי גרם לנו להשיג ולגבור על פילם 35 מ”מ, השלב השני עבר הילוך לכיוון אחר לחלוטין.  אין זו יותר שאלה של חיקוי ומה בא לפני כן, אלא דמיון ומישוש של עתיד לא ידוע. הסרט “הגביע הקדוש”, של החוויה הקולנועית היה מטרה קבועה ומוכרת, אבל השאלה לאן ללכת כבר מעסיקה אותנו וכבר הלכנו לסמטאות חשוכות על מנת לחזור חזרה וללכת מחדש.

לרתום את העגלה לפני הסוס
אולי העובדה שלא קיימת מטרה שתנסה לקחת אותנו ללכת אחריו, הטכנולוגיה למען הטכנולוגיה על חשבון האומנות וחווית המשתמש. יצרני הטלוויזיות הסתערו קדימה שהם לא נרתעים מהנפילה האחרונה של טלוויזיה תלת מימדית לעבר UHD (4k), SUHD (8K), HDR וכל ראשי תיבות אחרים שיכולים לשכנע את הצרכן להוציא עוד כסף. וזה כבר היה לפני קביעת הסטנדרטים הרשמיים. כל זאת בעוד שיצרני התכנים מוצאים את עצמם אבודים מבחינה טכנית וספקי תכנים השקו ערוצי ושירותי UHD למרות שיש מעט מאד תכנים.

UHD, HDR, מרחב צבע גדול, תקצבי תמונות מהירים.. הכל נזרק למסך כאשר אולי מינון עדין יותר יכול לתת את התשובה הנכונה יותר הם ליותר ולהן לצופה. רק בגלל שניתן לעשות משהו זה לא אומר שזה הפתרון הטוב ביותר (או היחיד) לבעיה, יכול להיות, למעשה, שאנו לא לגמרי מבינים את הבעיה.

כושר הפרדה (Resolution)
מלחמת כושר ההפרדה הושקה בשנתיים האחרונות. כולם יודעים ש4k הוא כאן כדי להישאר, ואנחנו טיפשים אם לא נכיר בעובדה שSUHD (8k) כבר מעבר לאופק, אני לא מאמין שנראה בעתיד הקרוב SUHD במרכז המפה אבל חברת RED (וכמובן NHK והשותפים בתחום השידור) כבר ביצעו הפקות באיכות זו במציאות וזה ממש לא מעשי כפי שהיצרנים היו רוצים לחשוב.

עם זאת, להגדלת כושר ההפרדה יש מספר השלכות מרחיקות לכת. יותר פיקסלים עם תחום צבע גדול יותר משמעותי הרבה יותר מידע, מה שמצריך רוחב סרט גדול יותר, משלב הפוסט ועד ההפצה. כל המטרה של הגדלת כושר ההפרדה היא לשפר את החדות והפרטים בתמונה, למרות שיש שיטות אחרות להשיג זאת ללא תשלום רב.
קיים הבדל בין כושר ההפרדה לבין כושר הפרדה ברמת הפיסקל – נתון שחשוב להבהיר. הדבר היחידי החשוב לצופה הוא לחוות את החדות והפרטים בתמונה, וככזה, חובה להביא לנוסחה את הראייה האנושית.

אם אנחנו לוקחים בחשבון את היתרונות והחסרונות של הטכנולוגיות השונות. לעיתים קרובות על ידי פתרון של בעיה אחת – כגון הגדלת כמות הפיקסלים ב400% – יביא לבעיות אחרות. לעתים קרובות מדי בדיונים אלה נראה שאיננו מכירים כיצד אנו רואים, מעבדים ומבינים את האשליה של צפייה בסרט בכלל.

כושר הפרדה והראייה האנושית
יש לנו רק אזור קטן ברשתית שלנו אשר כולל תאי קונוס בצפיפות גבוהה מאוד. אזור זה נקרא “fovea”, ואילו הוא כולל פחות מ 1% של הרשתית, הוא אחראי על למעלה מ 50% של בתמונה החזותית במוח. רק שתי המעלות המרכזיות של השדה החזותי מתמקדות בfovea.

כאשר רואים אובייקט, העין סוקרת את האובייקט והמוח משלים את הפערים. הראייה בפועל כוללת הרבה פחות פרטים ואילו המוח משלים את הפרטים החסרים. האדם זוכר ומשחזר פרטים בחלקים של התמונה אחרי שהעין עברה והתמקדה בנושא אחר, גם בתנועה, כך אנו מודעים לכל שדה הראייה בזמן אמת.
מה שאנו רואים בפועל מתעדכן כל הזמן על ידי המוח ולא על ידי מה שהעיניים רואות. אנחנו רואים את המציאות נבחנת בצורה בטחונית כל הזמן, מערכת מורכבת הרבה יותר מאשר המצלמה יכולה להקליט המתמקדת כל העת בשבב הקבוע המוגדר על ידי כמות הפיקסלים וקצב התמונות.
תמונה נעה על המסך היא אשליה. זה טריק שהמוח שלנו תופס כתמונה נעה. עלינו להיזהר שלא לשבור את האשליה, שהיא שבירה יותר מכפי שאפשר לחשוב.

HDR
כושר ההפרדה אינו המדד היחידי לחדות, מתמטית זה נכון אבל מעבר לסף מסוים, התשואות נופלות וכיוון האפס. ההבחנה שלנו בפרטים וחדות מבוססת על ניגודיות, הקצוות של הנגידיות מאפשרות למוח שלנו להבדיל בין עצם אחד למשנהו. היא גם הקשורה לשאר התמונה, אינה בהכרח אחידה – במיוחד כאשר היא בתנועה – ומושפעת במידה רבה על ידי ניגודיות בהירות וצבע. זו הסיבה שפשוט הגדלת כושר ההפרדה ברמת הפיקסל על פני כל התמונה היא בהחלט פתרון בזבז כוח לבעיה אשר ניתן לטפל טוב יותר על ידי הזנת המערכת החזותית שלנו רק עם המידע הנוסף שהוא צריך, בדיוק איפה זה ומה ולמה צריך את זה כדי להשיג את האשליה הרצויה.

בכנס Marc Shipman-Mueller השווה צד ליד צד במוניטורים מקצועיים מחילים. וידאו 1080p SDR לעומת UHD HDR שההבדל נראה לעיין בצורה ברורה לעומת זאת 1080p HDR ו UHD HDRההבדל לא היה משמעותי.
לאחר הצפייה כל הנוכחים הסכימו ב1080p HDR סיפק שיפור ב90% בפרטים שניתן היה להשיג רק ריבוע (פי 4) בכמות הפיקלסים בUHD

רעידה
זהו האתגר הגדול ביותר שאנו עומדים מולי והיא הרעידה הפריעה לצופה לחוות את הסרט מה גורם לתופעה
הרעידה נגרמת כאשר המוח לא מצליח להחליק תנועה של אובייקטים עם בהירות, ניגודיות גבוהה על פני התמונה. תופעה זו מוכרת במסכים עם עוצמות גבוהות של בהיקות אבל בסופו של דבר זה מסתכם בגורמים הבאים:

  • יחס העצמים הנעים לעומת על זווית הראייה
  • מהירות התנועה
  • ניגודיות בפרטים
  • עוצמת הבהיקות של המסך

עוצמת בהיקות המסך היא לא הבעיה המרכזית אבל היא בהחלט גורמת לבעיה להראות יותר חמורה. ככל שכמות הבהיקות של סך התמונה התופעה תראה פחותה ברמה של מסכי SDR הרעידה לא נראתה בגלל תופעת הטשטוש (blur) בקצבי התמונות. למרות זאת הטכנאי HDR ומסכים עם תאורה אחרית לא ניתן יותר להסתיר בעיה זו אז כיצד פותרים בעיה זו קראו בהמשך

קצבי תמונות
בעולם האמיתי, העיניים שלנו ממלאות את המוח שלנו עם זרם קבוע של תמונות. איננו רואים במסגרות נפרדות או בתמונות קבועות שנדגמו לאורך זמן. עם זאת, אשליה של תנועה אנו תופסים כאשר אנו רואים סדרה של תמונות סטילס ברצף מהיר נגרמת על ידי מה שאנו מכנים את ההתמדה של הראייה, מכיוון שהרשתית מסוגלת להחזיר בובי תמונה 40 שניה.
24 תמונות בשנייה הוא הכמות המינמלית עבור התפיסה של תנועה חלקה: גבוה מספיק עבור האשליה להחזיק, אבל נמוך מספיק כדי להיות חסכוני.

הסיבה ל24 תמונות בשנייה נובעת בעיקר מההתייחסות ההיסטורית והתרבותית. במילים אחרות, כך זה היה תמיד. ההבהוב המעודן, הבלתי מורגש כמעט, מודיע לנו לצפות לתקציבים בהוליווד גדולים, הופעות עטורות פרסים, ייצור גבוה וערך אמנותי בהשוואה לציפיות נמוכות יותר של טלוויזיה ווידאו.
זה היה בסדר במשך יותר מ -100 שנים של סרטי קולנוע, עבור סרטים, טלוויזיה, כל הדרך עד מה אני מחשיב את הסוף של “Digital Cinema 1.0”, שבו יש לנו עכשיו סטנדרט דיגטלי 35 מ”מ ברזולוציה וצבע. אבל אם על מסך קטן או הקרנת קולנוע, ניסיון הצפייה שלנו נשאר בתוך הסף של ניגוד מקובל, צבע בהירות לאשליה של תנועה להחזיק בקצבי התמונה המסורתיים.

עם וידאו בכושר הפרדה גבוהה, טווח דינמי גבוה ומסכים בהירים יותר יש צורך בקצבי תמונה גבוהים יותר. ישנם יתרונות נוספים לצילום בקצבי תמונה גבוהים יותר לדוגמא. 120 תמונות בשנייה אפשר בפוסט שליטה טובה יותר על הפרטים בשדות גם בתנועה מהירה והחסרונות עבודה בקצבים מהירים יותר מגדילה את הנפחים בצורה דרמטית בשלבי העיבוד והאיכסון

סופר ראליזם ואפקט אופרה סבון
החסרון השני בתחום של צילום, הפקה והפצה בקצבים מהירים הוא דבר סובייקטיבי\ מבקרים רבים ביקרו על החלטתו של פיטר ג’קסון לצלם ולהפיץ את הסרט ההוביט בקצב של 48 תמונות בשנייה. ולאחרונה, ” מצדיעים לך, בילי לין!” של בילי לין בתלת-ממד בקצב של 120 תמונות בשנייה, המבקרים טוענים כי ההשפעה הריאלי-ריאליסטית של המראה החד וברור, הוא unableable ולא קולנועית.
אין זו אשליה של תנועה שבורה, אלא איכות ברמת חלום, הסופגת אותך לסיפור ותולשת אותך מהמציאות. זוהי החוויה האתית השבורה, וזה, אני טוען, אולי חשוב יותר לחוויה מאשר מסך 4k בבהיקות 1000nit, כמובן, ייתכן שנצטרך להתרגל לאסתטיקה חדשה.

הדמיה חישובית
אולי הפתרון האידיאלי הוא לא להסתער על התמונה עם כל הטכנולוגיות  כושר הפרדה 8/4k בקצב של 120 תמונות בשנייה. האם יכולה להיות גישה יותר ממוקדת יותר שבה אנו מגדילים את הפרטים ואת קצב בצילום בחלקים נבחרים של התמונה בלבד? זכרו, אתם רואים רק את שתי המעלות המרכזיות של שדה הראייה כולו שלכם בפירוט רב, ואפילו בעת צפייה במסך אתם סורקים כל הזמן, מעבירים את העיניים מנקודת עניין לנקודת עניין. האם אנחנו לא צריכים לחשוב יותר על איך נוכל באמת לחוות ולתפוס את התמונות שאנו יוצרים?

מיקוד הפתרונות שלנו לתפיסה האנושית פירושו להבין שהמוח שלנו כבר מבצע דחיסה וסינון מתוחכמים בזמן אמת. הרשתיות שלנו הן חלק ממערכת העצבים המרכזית שלנו, ויש כ -150 מיליון קולטנים בעין ורק מיליון סיבי עצב הראייה. הרשתית מקודדת מרחבית (דוחסת) את התמונה כך שתתאים לקיבולת המוגבלת של העצב האופטי.
המוח הוא עיבוד דינמי זרם קבוע של מידע ממוקד בתמונה בכושר הפרדה גבוהה מן fovea יחד עם שדה רחב יותר רחב של נוף, בתוספת פרטים נוספים זיכרון זוכר לבנות את מה שאנחנו יודעים ורואים כעולם שלנו סביבנו.

אם התפיסה של המציאות כבר מבוססת על העיניים שלך והמוח מסנן החוצה פרטים רבים של מידע מיותרים נוספים, והעברת בעיקר בעיקר מה שינויים מרגע לרגע (לא להבדיל דחיסה דיגיטלית ומרחבית התמונה דחיסה אנחנו כבר משתמשים כדי לדחוס וידאו) אולי אנחנו רק צריכים להציג מידע נוסף איפה זה חשוב, שם זה יהיה לראות ולהשפיע על תפיסתנו את הדימוי.
אולי בדרך זו נוכל לשפר את האופן שבו אנו חווים את הקולנוע, מוסיפים תחושה של ריאליזם משוכלל ובהירות, אבל נסוגים לאחור מהנקודה שבה אנו מתנתקים מהחלום.

 לסיכום
כמובן, 8/4k, HDR, HFR, מרחב צבע רחב על מסך איכותי OLED יגרום לנו להרגיש שאנחנו מסתכלים דרך החלון לעולם האמיתי בצד השני. אבל האם זה מה שאנחנו רוצים לסיפור שלנו? אני לא חושב כך.

למקור המאמר