משקפי אפל

לפי השמועות לאפל יש צוות סודי של מאות עובדים שעובדים על פרויקטים של מציאות מדומה ורבודה.

• כן
• לא

פרויקט המציאות המוגברת והמציאות המדומה הסודית של אפל

תוכן

1. פרויקט המציאות המוגברת והמציאות המדומה הסודית של אפל
• אוזניות מציאות משולבת
• משקפיים חכמים של AR
• דליפות iOS 14 AR
• AR ב-Xcode
• שותפות שסתום?
• שמועות אחרות
2. מציאות רבודה לעומת מציאות מדומה
3. צוות ה-VR/AR של אפל
• שכירים
• רכישות
4. פטנטים של AR / VR
5. תאריך השקה
6. תוכניות AR/VR עתידיות
7. ציר הזמן של Apple Glasses

אפל חוקרת טכנולוגיות מציאות מדומה ומציאות רבודה כבר יותר מ-10 שנים בהתבסס על הגשת פטנטים, אבל עם מציאות מדומה ורבודה שמתפוצצות בפופולריות עם השקת ARKit, ההתעסקות של אפל הולכת וגדלה יותר וצפויה להוביל ל-AR/ מוצר VR בשנת 2022.

לפי השמועות לאפל יש יחידת מחקר סודית עם מאות עובדים שעובדים על AR ו-VR ובוחנים דרכים שבהן ניתן להשתמש בטכנולוגיות המתפתחות במוצרי אפל עתידיים. גיוס VR/AR גדל במהלך השנים האחרונות, ואפל רכשה מספר חברות AR/VR כשהיא מעודדת את עבודתה בתחום ה-AR/VR.

לפי השמועות אפל עובדת על לפחות שתיים פרויקטים של AR הכוללים אוזניות מציאות רבודה שתשוחרר ממש בסביבות שנת 2022 ואחריה זוג משקפי מציאות רבודה מלוטש יותר שיגיעו במועד מאוחר יותר. שמועות רבות התמקדו אך ורק במשקפיים, עם זאת, מה שהוביל לבלבול מסוים לגבי התוכניות של אפל, אך נראה כי AR/VRheadset יהיה המוצר הראשון שיושק.

האנליסט של אפל מינג-צ'י קואו מאמין באוזניות 'מציאות מעורבת' של אפל ייצא בסוף 2022 או בתחילת 2023, כשהמשקפיים של אפל יגיעו ב-2025, אם כי מקורות אחרים אמרו שהמשקפיים יגיעו ב-2023. האוזניות הן AR/VR, כלומר מציאות מעורבת, בעוד שהמשקפיים של אפל הם מציאות רבודה.

אוזניות מציאות משולבת

המידע ו בלומברג שניהם אמרו שאפל עובדת על משקפיים חכמים ועל אוזניות AR/VR (הידוע גם במציאות מעורבת), כשהאוזניות ייצאו ראשונה ואחריה המשקפיים. על פי השמועות, האוזניות דומות לאוזניות המציאות המדומה Oculus Quest של פייסבוק, אך עם עיצוב אלגנטי יותר המשתמש בבדים וחומרים קלים כדי להבטיח שהאוזניות נוחות.

אומרים שזה מופיע שני צגי 8K ברזולוציה גבוהה ומצלמות לזיהוי עיניים שיאפשרו למשתמשים 'לקרוא אותיות קטנות' ו'לראות אנשים אחרים עומדים מול ומאחורי אובייקטים וירטואליים'. האוזניות יוכלו למפות משטחים, קצוות ומידות של חדרים עם 'דיוק רב יותר מהמכשירים הקיימים בשוק'. יהיה לו תצוגה מתקדמת יותר ושבב שהוא אפילו מהיר יותר ממעבד M1 ב-2020 מחשבי Mac.

המידע בפברואר אמר כי יהיה מצויד ביותר מתריסר מצלמות למעקב אחר תנועות הידיים בנוסף למצלמות לראיית העולם החיצון, והעיצוב חוסם ראייה היקפית כדי למנוע זליגת אור לשדה הראייה של הלובש אותו. יכול להיות גם מגן הפונה החוצה מובנה בתצוגה כדי לאפשר ללובש אותו להציג גרפיקה לאחרים.

האלק טוען ש אוזניות ה-VR תכלול צג מיקרו OLED ברזולוציה גבוהה עם עד 3,000 פיקסלים לאינץ'. בעבר שמועות על תצוגת מיקרו OLED למשקפיים החכמים, אך לא לאוזניות ה-VR.

האנליסט של אפל, מינג-צ'י קואו, אמר כי אוזניות המציאות המעורבת הקרובות של אפל יכלול 15 מודולים של מצלמה אופטית בסך הכל. שמונה מתוך 15 מודולי המצלמה ישמשו לחוויות מציאות רבודה שקופות, שישה מודולים ישמשו ל'ביומטריה חדשנית', ומודול מצלמה אחד ישמש לזיהוי סביבתי.

קואו גם מאמין שהדיבורית של אפל תצויד במערכת מעקב עיניים מתקדמת המשמשת לספק חוויה ויזואלית אינטואיטיבית המקיימת אינטראקציה חלקה עם הסביבה החיצונית, יחד עם פעולה אינטואיטיבית יותר שניתן לשלוט בה באמצעות תנועות עיניים והפחתת עומס חישובי בצורה של מופחתת רזולוציה שבה המשתמש לא מסתכל.

מבחינה עיצובית, האוזנייה תוארה כבעלת 'מצחייה חלקה ומעוקלת המחוברת לפנים על ידי חומר רשת וסרטי ראש הניתנים להחלפה'. רצועת ראש אחת כוללת לכאורה טכנולוגיית אודיו מרחבית כמו ה-AirPods Pro לחוויה דמוית צליל היקפי, בעוד שאחר מספק חיי סוללה נוספים תוך כדי תנועה. אפל עובדת על שיטות שליטה מרובות, כולל 'מכשיר דמוי אצבעון ללבישה על אצבעו של אדם'. האוזניות יוכלו גם להגיב לתנועות העיניים ולתנועות הידיים של המשתמש, בעוד שאב טיפוס אחד של האוזניות כולל גם חוגה פיזית בצד המצחייה. אפל גם בחנה את הקלט של Siri.

אפל רוצה ליצור חנות אפליקציות עבור האוזניות, עם התמקדות במשחקים, הזרמת תוכן וידאו ושיחות ועידה בווידאו. זה תואר על ידי בלומברג כ'סביבה דיגיטלית תלת מימדית כוללת' המיועדת למשחקים, צפייה בווידאו ותקשורת.

אבות טיפוס עדכניים של אוזניות נאמרים לשקול בסביבות 200 עד 300 גרם, אבל אפל שואפת להפחית את המשקל הסופי ל-100 עד 200 גרם אם ניתן לפתור בעיות טכניות, מה שיהפוך את האוזניות לקלות יותר ממכשירי VR קיימים. האוזנייה תהיה ניידת עם כוח ואחסון עצמאיים, אבל היא לא תהיה 'נייד' כמו אייפון. הוא יספק 'חוויה מושכת' העולה על מוצרי VR הזמינים כיום, והוא יכול להשתלב עם Apple TV+ ו- Apple Arcade.

פונקציונליות המציאות המוגברת של האוזניות 'מוגבלת יותר', ובעוד שחרור מתוכנן לשנת 2022, נאמר כי אפל נתקלה בכמה מכשולי פיתוח ויש לה הערכות מכירות 'שמרניות' עבור המכשיר. אפל מצפה למכור כ-180,000 יחידות, שזה שווה ערך למכשירים יקרים יותר כמו ה-Mac Pro. האוזניות צפויות להיות הרבה יותר יקרות מאוזניות של חברות אחרות, ו המידע אומר שאפל דנה בתמחור האוזניות בסביבות ,000.

העיצוב הראשוני כלל מאוורר ומעבדים חזקים, וכתוצאה מכך מכשיר כבד מדי. אפל החליטה לכאורה לקרב את האוזניות לפנים כדי לצמצם את הגודל. משתמשים לא יוכלו להרכיב משקפיים בזמן השימוש באוזניות, לכן אפל יצרה מערכת שבה ניתן להכניס עדשות מרשם מותאמות אישית על גבי מסכי ה-VR.

Kuo מאמין שהאוזניות ישתמש בעיצוב עדשת Fresnel היברידי , הכולל שלוש עדשות מוערמות לכל עין עשויות פלסטיק קל משקל. המטרה היא שהעיצוב הוא לאפשר אורכי מוקד קצרים במיוחד וביצועים אופטיים משופרים, כמו גם שדה ראייה רחב, ולשמור על משקל האוזניות מתחת ל-150 גרם.

מבחינת כוח, אוזניות ה-AR/VR הקרובות תכלול א מעבד ראשי מתקדם זה דומה לשבב ה-M1 שאפל הציגה לראשונה עבור מחשבי סיליקון אפל שלה בשנה שעברה, יחד עם מעבד קצה נמוך יותר לניהול ההיבטים הקשורים לחיישנים של המכשיר.

האנליסט של אפל, מינג-צ'י קואו, טוען שהיא תוכל לפעול באופן עצמאי מבלי להסתמך על מק או אייפון, וזו סטייה משמועה קודמת שאמרה שזה יהיה דורשים קשירה לאייפון. השבב בעל ההספק הגבוה באוזניות יניע זוג צגי 4K Micro OLED של סוני ושישה עד שמונה מודולים אופטיים כדי לספק פונקציונליות מבוססת AR. לאפל יש עבודה שהושלמה על ה-SoC עבור אוזניות ה-AR/VR, ותבצע אופטימיזציה להעברת נתונים אלחוטית, דחיסה ופירוק וידאו, ויעילות הספק לחיי סוללה מקסימליים, ואין לה מנוע עצבי כמו חלק מהשבבים האחרים של אפל.

אוזניות המציאות המעורבת הקרובות של אפל יהיו מציעים WiFi 6E תמיכה, שהוא מפרט ה-WiFi העדכני ביותר. נאמר כי אפל מתכננת ליישם את WiFi 6E כדי לספק חוויה יוקרתית ומושכת עם קישוריות אלחוטית מוצקה. ל-WiFi 6E יש את כל היתרונות של WiFi 6 אך מוסיף ספקטרום של 6GHz בנוסף לפס 2.4GHz ו-5GHz להגדלת רוחב הפס ופחות הפרעות בין מכשירים.

עיבוד אוזניות במציאות מעורבת

למעצב אנטוניו דה רוזה יש עיבוד תלת מימד שפותח מבוסס על פרטים ששותף על ידי המידע , נותן לנו הצצה כיצד אוזניות המציאות המעורבת של אפל עשויות להיראות בהתבסס על שמועות עדכניות.

המידע תיארה את האוזניות כ'מצחייה חלקה ומעוקלת המחוברת לפנים על ידי חומר רשת וסרטי ראש הניתנים להחלפה' המוצעת במספר צבעים.

אבות טיפוס מוקדמים של אוזניות

שמועות קודמות מ CNET בשנת 2018 הציעה שאפל עובדת על אוזניות AR/VR עוצמתיות עם צג 8K לכל עין, שתהיה מנותקת ממחשב או מסמארטפון, והיא תעבוד עם יישומי מציאות מדומה ורבודה כאחד.

במקום להסתמך על חיבור לסמארטפון או למחשב, האוזניות CNET המתואר יתחבר ל'קופסה ייעודית' באמצעות טכנולוגיה אלחוטית מהירה לטווח קצר הנקראת 60GHz WiGig. הקופסה תופעל על ידי מעבד אפל מותאם אישית בגודל 5 ננומטר שהוא 'חזק יותר מכל מה שזמין כרגע'. הקופסה כנראה דומה למגדל PC, אבל זה 'לא יהיה מחשב מק אמיתי'. העיצוב דמוי הקופסה הזה היה נושא שמועות מוקדמות וייתכן שהוא אב טיפוס שננטש מאז עבור הגרסה האלגנטית יותר שהשמועות מתארות כעת.

אומרים שחילוקי דעות פנימיים עיצבו ושינו את המטרות של אפל עבור אוזניות ה-AR שלה לאורך זמן. אפל הייתה מכוון בתחילה למערכת עוצמתית במיוחד שהגיעה עם רכזת לאכלס המעבד כמתואר לעיל, אבל ג'וני אייב, שעזבה מאז את החברה, לא רצתה למכור מכשיר שידרוש מכשיר נפרד ונייצב לפונקציונליות מלאה.

אני רצה במקום זאת אוזניות עם טכנולוגיה פחות חזקה שניתן להטמין ישירות במכשיר, אבל מנהיג צוות ה-AR/VR, מייק רוקוול, רצה את המכשיר החזק יותר. זה היה מחלוקת שנמשכה חודשים, וטים קוק בסופו של דבר צידד באייב. אומרים שאייב מעדיף את משקפי ה-AR החכמים שנמצאים גם הם בעבודה.

משקפיים חכמים של AR

אפל עובדת על סט משקפי מציאות רבודה, שהמדליף ג'ון פרוסר הציע אפל תקרא ל-'Apple Glass'. השם הזה יהיה בחירה יוצאת דופן בהתחשב בדמיון לשם של גוגל גלאס, מוצר שהיה קיים הרבה לפני שהעבודה של אפל על משקפי AR התגלתה, אז אולי הוא לא מדויק.

אומרים שהמשקפיים נראים דומים למשקפיים רגילים, כאשר שתי העדשות כוללות תצוגות שניתן ליצור אינטראקציה עם באמצעות מחוות. תהיה אפשרות לקבל את המשקפיים ללא עדשות מרשם במחיר התחלתי אפשרי של 499$, כאשר עדשות מרשם זמינות בעלות נוספת.

לפי בלומברג , המשקפיים בפנים שלב מוקדם של התפתחות , אפילו מוקדם יותר מאוזניות ה-AR/VR עליהן עובדת אפל. המשקפיים תוארו כ'מרחק מספר שנים', אם כי אפל תכננה בתחילה לשחרר אותם כבר בשנת 2023. אב הטיפוס הנוכחי מזכיר משקפי שמש יוקרתיים עם מסגרות עבות שמכילות את הסוללה והשבבים.

אפל היא לכאורה מתכנן להשתמש מיקרו-מסכי OLED 'חדשניים' שסופקו על ידי סוני עבור משקפי המציאות הרבודה שלה. צגי ה-OLED של סוני כוללים קצב תגובה מהיר במיוחד, ניגודיות גבוהה במיוחד, סולם צבעים רחב, בהירות גבוהה, החזר נמוך ודרייברים משולבים לעיצוב דק וקליל. אומרים שהמשקפיים כוללים מסך בגודל 0.5 אינץ' ברזולוציה של 1280x960.

Kuo מצפה שמשקפי ה-AR ישווקו כאביזר לאייפון ויקחו בעיקר תפקיד תצוגה בהורדת מחשוב, רשתות ומיקום לאייפון, עם המשקפיים מתן 'חווית AR שקופה אופטית' המותאמות לנייד. הצעת משקפי ה-AR כאביזר לאייפון תאפשר לאפל לשמור אותם דקים וקלי משקל. פרוסר אומר שהמשקפיים ייראו דומים ל-Ray-Ban Wayfarers או למשקפיים שטים קוק מרכיב.

בלומברג אמר שהמשקפיים של אפל יפעילו 'rOS' או מערכת הפעלה מציאות. אומרים ש-rOS מבוסס על iOS, מערכת ההפעלה שפועלת על האייפון. עבור אוזניות ה-AR, אפל מפתחת שבב 'מערכת על חבילה' דומה למה שיש ב-Apple Watch, אם כי היא תסתמך על האייפון כפי שהוזכר לעיל.

במהלך הפיתוח של אוזניות AR, אפל שקלה לוחות מגע, הפעלה קולית ומחוות ראש כשיטות קלט, ומגוון יישומים ממיפוי ועד הודעות טקסט עוברות אב טיפוס. חדרי ישיבות וירטואליים והפעלת וידאו ב-360 מעלות הם גם מושגים שנבדקים.

חשבתי שיש שמועות ראשוניות של השקה ב-2020 , בלומברג מאמין משקפי AR יכול לבוא רחוקים שנים מהשחרור, עם אוזניות ה-VR שתצא ב-2022. דוח מ DigiTimes הציע שמשקפי ה-AR של אפל יושקו ב-2021, והאנליסט של אפל מינג-צ'י קואו מצפה להשקה ב-2022 הכי מוקדם .

המדליף ג'ון פרוסר מאמין שאפל תחשוף את משקפי ה-AR שלה במרץ או יוני 2021, אבל זה נראה לא מדויק בהתחשב בהערכות של בלומברג ו- Kuo.

פרוסר גם אומר שאפל עובדת על גרסת 'סטיב ג'ובס מורשת' במהדורה מוגבלת של המשקפיים החכמים שנועדו להיראות כמו המשקפיים העגולים וחסרי המסגרת שסטיב ג'ובס נהג להרכיב, אבל בלומברג מארק גורמן כינה את השמועה הזו 'פיקציה שלמה'.

אפל היא עבודה עם TSMC לפתח צגי מיקרו OLED 'אולטרה-מתקדמים' שישמשו במכשירי המציאות הרבודה הקרובים של אפל כמו המשקפיים החכמים. אומרים שהצגים בגודל של פחות מ-אינץ' אחד.

צגי Micro OLED בנויים ישירות על פרוסות שבבים במקום על מצע זכוכית, מה שמביא לצגים דקים יותר, קטנים יותר וחסכוניים יותר בצריכת החשמל. לפי הדיווחים, הפיתוח במסכי מיקרו OLED נמצא בשלב ייצור ניסיון ויעברו מספר שנים עד שאפל ו-TSMC יהיו מוכנות לייצור המוני, מה שיהפוך את המסכים הללו למתאימים למשקפי אפל שעל פי השמועות יושקו מתישהו בסביבות 2023.

נכון לתחילת 2021, אפל אומרים שהוא נכנסים ל'שלב שני של פיתוח' על אב טיפוס של משקפי מציאות רבודה. המשקפיים אמורים לעבור שלב שלישי של פיתוח בעוד מספר חודשים, ולאחר מכן כאשר תכנון אב הטיפוס יושלם, הרכיב הלביש יעבור תקופה של שישה עד תשעה חודשים של אימות הנדסי.

דליפות iOS 14 AR

קוד ותמונות נמצא ב-iOS 14 אשר את עבודתה של אפל על אוזניות AR או VR, עם תמונה שהתגלתה שמתארת ​​בקר בעל מראה גנרי לאוזניות הדומה בעיצובן לאוזניות HTC Vive Focus. אפל משתמשת בחומרת HTC Vive למטרות בדיקה פנימית.

אפל בוחנת את ציוד ה-AR שלה עם אפליקציית iOS 14 בשם Gobi יחד עם קודי QR לבדיקת חוויות מציאות רבודה. אחת מחוויות המציאות המוגברת הללו היא משחק באולינג במעבר חציה המופעל במעבר חציה ספציפי בסאניווייל, קליפורניה.

AR ב-Xcode

הקוד ב-Xcode 11 מאשר העבודה של אפל על איזושהי אוזניות AR. ישנן הפניות להתקני בדיקה בעלי שם קוד בתוספת מסגרות ומעטפת מערכת הקשורה להתקנים אלו. ההפניות מצביעות על כך שאפל מפתחת תמיכה בחוויית AR מותקנת על הפנים הדומה ל-Daydream של גוגל.

שותפות שסתום?

לפי אתר טייוואני DigiTimes , אפל משתפת פעולה עם מפתח המשחק Valve על אוזניות ה-AR השמועות שלה. Valve הוציאה את אוזניות ה-VR הראשונות שלה, Valve Index, באפריל 2019.

Valve עבדה בעבר עם אפל כדי להביא תמיכה באוזניות VR מקוריות ל-macOS High Sierra, תוך מינוף התמיכה ב-eGPU עם גרסת Mac של תוכנת SteamVR.

שמועות אחרות

בנובמבר 2017, אפל רכשה את Vrvana, חברה שפיתחה אוזניות מציאות משולבת בשם Totem. הטכנולוגיה של Vrvana עשויה לשמש באוזניות עתידיות של אפל. אפל עקבה אחר רכישת Vrvana עם רכישת Akonia Holographics, חברה המייצרת עדשות למשקפי AR חכמות.

שמועות גם העלו שאפל תוכל לשלב את מחקר המציאות המוגברת שלה בפרויקט המכוניות המתמשך שלה כחלק ממערכת תוכנה לרכב שיכולה לכלול תצוגת ראשים או תכונות אחרות.

הערה: רואה שגיאה בסיכום זה או רוצה להציע משוב? .

מציאות רבודה לעומת מציאות מדומה

מציאות רבודה (AR) ומציאות מדומה (VR) הן טכנולוגיות דומות, אבל יש הבדל גדול ביניהן והיישומים הפוטנציאליים שלהן משתנים מאוד. מציאות מדומה מתייחסת לחוויה סוחפת מלאה בעולם וירטואלי, בעוד מציאות רבודה מתייחסת לראייה שונה של העולם האמיתי.

את ההבדל אפשר אולי לסכם בצורה הטובה ביותר על ידי השוואה בין שני מוצרים, אחד AR ואחד VR. משקפי גוגל , סט המשקפיים החכמים של גוגל שהוצא כעת משימוש, הוא דוגמה למציאות רבודה. ה-Google Glass עטור העין אפשר למשתמשים לראות את העולם כפי שהוא, אבל הוא הציע תצוגה מקדימה שהציפה מידע רלוונטי שסופק על ידי מחשב על פני תפיסת העולם האמיתית הזו, כגון מזג אוויר מקומי, מפות והתראות.

זה דומה למה שאפל אמורה לעבוד עליו עם ה'משקפיים החכמים' השמועות שלה.

לשם השוואה, של פייסבוק אוקולוס ריפט היא אוזניות מציאות מדומה המציעה חוויה חזותית סוחפת שאינה מגדילה את העולם האמיתי עם מידע חושי נוסף -- היא מחליפה במלואה את העולם האמיתי בעולם מדומה.

מציאות רבודה מספקת הקשר ומידע שנוצר על ידי מחשב על העולם שסביבנו תוך שהיא מאפשרת לנו לקיים אינטראקציה עם הסביבה שלנו, בעוד שמציאות מדומה נועדה לבודד אותנו מסביבתנו כדי שנוכל לקיים אינטראקציה עם עולמות פיקטיביים.

מתי יצא האייפון 10

יישומים פוטנציאליים עבור השניים שונים בתכלית. מציאות מדומה מתמקדת באופן מיוחד בצריכת תוכן סוחפת מכיוון שהיא גורמת ללובש את התחושה כאילו הוא באמת חווה את המתרחש בעולם המדומה באמצעות משוב חזותי, מישוש ואודיו. מציאות מדומה קשורה במידה רבה למשחקים כרגע, אבל יש לה גם פוטנציאל לשחזר חוויות בעולם האמיתי למטרות חינוכיות או הכשרה.

מציאות רבודה אינה תלויה בתוכן סוחף ולמרות שהוא פחות מרגש מכיוון שהיא מגדילה את המציאות במקום להחליף אותה, יש לה מגוון רחב יותר של יישומים פוטנציאליים. למעשה, אפליקציות ומשחקים של מציאות רבודה זמינים בקלות ב-iOS 11 תודה ל-ARKit.

עם ARKit, מכשיר iOS מסוגל לזהות משטח כמו טבלה, ואז ניתן להוסיף לו אובייקטים וירטואליים. בגלל כוח המחשוב של האייפון והאייפד, יכולות המציאות הרבודה של ARKit מרשימות. ARKit כבר נמצא בשימוש ליצירת מגוון עצום של אפליקציות ומשחקים, המשלב אובייקטים דיגיטליים עם העולם האמיתי.

לְשַׂחֵק

אפל עשויה לשאוף למוצר שעובד גם עם מציאות מוגברת וגם עם מציאות מדומה, כפי שהציעו שמועות אחרונות המצביעות על עבודה על אוזניות AR/VR. מוצר כזה יכול לשמש ליישומי מציאות מדומה רציניים כמו גם לחוויות מציאות רבודה, והוא יהיה דומה ל-Microsoft HoloLens.

צוות ה-VR/AR של אפל

העבודה של אפל על מציאות מדומה ורבודה מתוארכת לשנים רבות אחורה, אך השמועות התעוררו החל במרץ 2015, כאשר חדשות פרסמו כי לאפל יש צוות קטן של אנשים שעבדו על מציאות מוגברת. ב-2015 ובתחילת 2016, הצוות של אפל גדל כשהחברה שכרה עובדים עם מומחיות בטכנולוגיית AR/VR וביצעה רכישות קשורות רבות.

צוות ה-AR/VR של אפל כולל כמה מאות מהנדסים מרחבי אפל, שלכולם מומחיות במציאות מדומה ורבודה. הצוות עובד על פני פארקי משרדים הן בקופרטינו והן בסאניוייל, ואפל בוחנת מספר פרויקטי חומרה ותוכנה תחת שם הקוד 'T288'.

צוות המציאות הרבודה של אפל משלב את 'החוזקות של ותיקי החומרה והתוכנה שלה', ומובל על ידי מייק רוקוול, שהגיע מדולבי. עובדים לשעבר של חברות כמו Oculus, HoloLens, Amazon (מצוות VR), חברת האנימציה התלת מימדית Weta Digital ו-Lucasfilm עובדים על AR באפל.

ראש הנדסת החומרה לשעבר של אפל דן ריצ'יו בינואר 2021 עבר מעבר לתפקיד חדש איפה הוא פיקוח על עבודתה של אפל על אוזניות AR/VR. הפרויקט התמודד עם אתגרי פיתוח, ומנהלי אפל מאמינים שהמיקוד של Riccio עשוי לעזור.

שכירים

אחד מעובדי ה-AR/VR הבולטים של אפל היה פרופסור למדעי המחשב דאג באומן, שהוביל בעבר את המרכז לאינטראקציה בין אדם למחשב של וירג'יניה טק. הוא מתמחה בעיצוב ממשק משתמש תלת מימדי וכתב ספר בנושא המכסה ממשקי תלת מימד ואת היתרונות של סביבות וירטואליות סוחפות. יש לו מומחיות הן במציאות מדומה והן במציאות רבודה.

אפל גם שכרה עובדים שעבדו על מוצרי מציאות מדומה או מוגברת במיקרוסופט ובליטרו. אומרים שחלק מהעובדים האחרונים הם מצוות HoloLens של מיקרוסופט, בעוד שאחרים עבדו בליטרו, חברה שעבדה על מצלמה שמסוגלת לשלב אקשן חי וגרפיקה ממוחשבת לחוויית VR בשידור חי. עובדים המגיעים מצוות HoloLens יהיו בעלי ניסיון ביצירת אוזניות מציאות רבודה מתקדמות.

מצלמת Lytro Immerge 360 ​​מעלות

Zeyu Li, ששימש כמהנדס ראיית מחשב ראשי ב-Magic Leap (סטארט-אפ שמפתח תצוגת AR/VR מותקנת בראש), עובד כעת באפל בתור 'מהנדס בכיר לראיית מחשבים אלגוריתם'.

יורי פטרוב, מדען מחקר לשעבר ב-Oculus שבבעלות פייסבוק, משמש כעת כ'מדען מחקר' באפל. לפי פרופיל הלינקדאין שלו, פטרוב למד חוויות של מציאות מדומה, אב טיפוס אופטיקה ופיתח תוכנת הדמיית מחשב.

מומחה המציאות הרבודה ג'ף נוריס הצטרף לאפל באפריל 2017 כמנהל בכיר שעובד בצוות המציאות הרבודה של החברה. נוריס הקים את משרד החדשנות של Mission Operations ו-JPL Ops Lab בנאס'א. הוא הוביל מספר פרויקטים המתמקדים באינטראקציה בין אדם למערכת עם דגש על מציאות מדומה ורבודה.

אפל במאי 2018 2018 שכרה את סטרלינג קריספין, שפיתח אפליקציית ציור עבור אוזניות VR ניידות. 'צייר סייבר' מאפשר למרכיבי אוזניות VR ליצור תמונות דו-ממדיות ב-260 מעלות ב-Oculus Go, Daydream, GearVR ו-Vive Focus. עמוד הלינקדאין של קריספין אומר שהוא עובד כ'חוקר אב טיפוס', מה שמרמז שהוא הצטרף לצוות לפי השמועות שהוא עובד על טכנולוגיית אוזניות VR/AR.

אפל שכרה בדצמבר 2018 את המעצב הבכיר לשעבר של טסלה ו-Microsoft HoloLens, אנדרו קים, ובהתחשב בהיסטוריה שלו, הוא עשוי לעבוד על פרויקט משקפי ה-AR השמועות של אפל או על מכונית אפל הקרובה שלה, שנאמר כי היא בפיתוח.

מייסד Jaunt VR ארתור ואן הוף הצטרף לאפל כאדריכל בכיר באפריל 2019. לפני שעבד באפל, החברה שלו יצר חומרת VR , כולל מצלמת VR תלת מימדית של 0,000 בשם Jaunt One. לפני כשוואן הוף עזב את החברה, ג'אנט נכשל ופנה לחוויות AR.

כשהצוות של אפל מקיף מאות עובדים, יש עוד הרבה עובדים של מומחי מציאות מדומה שעברו מתחת לרדאר. בלינקדאין, ישנם מספר מהנדסי תוכנה בעלי ניסיון במציאות מדומה המועסקים על ידי אפל, אך לא ברור אם הם עובדים בצוות ה-AR/VR הסודי.

אפל ביולי 2019 העבירה את Kim Vorrath, אחד ממנהלי התוכנה שלה, אל אוזניות המציאות הרבודה חטיבה כדי 'להביא קצת סדר' בצוות. Vorrath פיקח על ניהול התוכניות בצוות פיתוח התוכנה במשך 15 שנים, ותואר כ'כוח רב עוצמה' המוודא שהעובדים עומדים בלוחות זמנים ובמקביל גם לנטרל באגים.

רכישות

ייתכן שחברים רבים מצוות ה-AR/VR של אפל הצטרפו לחברה לאחר רכישות. מאז 2015, אפל רכשה כמה חברות שיצרו מוצרים הקשורים ל-AR/VR, וחלק מרכישות ה-AR/VR שלה אפילו מתוארכות למספר שנים.

אפל באוגוסט 2018 קנתה את Akonia Holographics, סטארט-אפ שמייצר עדשות למשקפי מציאות רבודה. Akonia Holographics מפרסמת את 'האופטיקה ההולוגרפית ההולוגרפית והרפלקטיבית הראשונה בעולם הזמינה מסחרית לרכיבי תצוגה שקופים במשקפיים חכמות'.

אומרים שהצגים שהיא מייצרת משתמשות בטכנולוגיית HoloMirror של החברה ל'ביצועים אולטרה-צלולים, בצבע מלא' כדי לאפשר את 'המסכים הדקים והקלים ביותר עם הראש בעולם'.

בנובמבר 2017, אפל רכשה את Vrvana, חברה שפיתחה אוזניות מציאות משולבת בשם Totem. Totem, שמעולם לא שוחררה לציבור, תוכננה לשלב הן טכנולוגיות מציאות רבודה והן טכנולוגיות מציאות מדומה באוזנייה אחת, תוך מיזוג יכולות VR מלאות עם מצלמות מעבר כדי לאפשר תכונות מציאות רבודה מבוססות מסך.

Totem בעצם השתמשה בסט מצלמות כדי להקרין תמונות מהעולם האמיתי לתוך תצוגת ה-OLED המובנית שלה ברזולוציית 1440p, גישה מעט ייחודית שהבדילה אותה ממוצרים מתחרים כמו HoloLens של מיקרוסופט, המשתמשת בתצוגה שקופה כדי לשלב מציאות מדומה ורבודה. ייתכן שאפל מתכננת להשתמש בחלק מהטכנולוגיה של Totem במוצר עתידי.

אפל רכשה בשנת 2013 את חברת חישת הגוף התלת מימדית PrimeSense, מה שעורר ספקולציות כי יכולות מבוססות תנועה יוטמעו ב-Apple TV. טכנולוגיית עומק 3D ויכולות חישת תנועה של PrimeSense שימשו בפלטפורמת Kinect הראשונית של מיקרוסופט.

PrimeSense השתמשה באור קרוב ל-IR כדי להקרין אור בלתי נראה לתוך חדר או סצנה, ולאחר מכן נקרא על ידי חיישן תמונה CMOS כדי ליצור תמונה וירטואלית של אובייקט או אדם. זה מאפשר בקרות מבוססות תנועה עבור ממשקי תוכנה, אך היא גם מסוגלת לעשות דברים כמו למדוד אובייקטים וירטואליים ולספק מרחקים או גדלים יחסיים, שימושיים עבור יישומי מציאות רבודה כמו משחקים אינטראקטיביים, מיפוי פנימי ועוד. טכנולוגיית PrimeSense יכולה גם ליצור סריקות מדויקות ביותר של 360 מעלות של אנשים וחפצים, שיכולים להיות שימושיים עבור יישומי מציאות מדומה.

אפל רכשה את סטארט-אפ המציאות הרבודה Metaio במאי 2015. Metaio בנתה מוצר בשם Metaio Creator, שיכול לשמש ליצירת תרחישי מציאות רבודה תוך דקות ספורות. לפני שנרכשה על ידי אפל, התוכנה של Metaio שימשה חברות כמו פרארי, שיצרו אולם תצוגה של מציאות מוגברת.

טכנולוגיית Metaio שימשה גם בברלין כדי לאפשר לאנשים המבקרים באתר חומת ברלין להשתמש בסמארטפון או בטאבלט כדי לראות איך נראה האזור כשחומת ברלין עדיין עמדה על תילם. הטכנולוגיה של Metaio היא כזו שיכולה לשמש ליישום יכולות מציאות רבודה באפליקציות אפל כמו מפות.

אפל רכשה את Faceshift באוגוסט 2015, בסימן רכישת המציאות הרבודה השנייה שלה בשנת 2015. לפני שנרכשה על ידי אפל, Faceshift עבדה עם אולפני משחקים ואנימציה על טכנולוגיה שנועדה ללכוד במהירות ובמדויק הבעות פנים באמצעות חיישני תלת מימד, והפיכתן לפרצופים מונפשים ב- זמן אמת. Faceshift עבדה גם על מוצר מכוון צרכן שיאפשר לאנשים לשנות את פניהם לפרצופים מצוירים או מפלצות בזמן אמת בסקייפ.

לטכנולוגיה של Faceshift יש מגוון רחב של מקרי שימוש אפשריים, ונראה שאפל משתמשת בתכונה כדי להפעיל את Animoji באייפון X.

Emotient, חברה שבנתה כלים לניתוח הבעות פנים, נרכשה על ידי אפל בינואר 2016. הטכנולוגיה של Emotient משתמשת בבינה מלאכותית ולמידת מכונה כדי לקרוא רגשות אנושיים, תכונות ששימשו בעולם האמיתי על ידי מפרסמים כדי לקבוע תגובות רגשיות ל פרסומות.

ישנם עשרות דברים שאפל יכולה לעשות עם Emotient, החל מזיהוי פנים טוב יותר באפליקציית התמונות ועד לניתוח רגשות לקוחות בחנויות קמעונאיות של אפל ועד לפתיחת מכשירי iOS, אבל יש לה גם שימושים פוטנציאליים ב-AR/VR. בדומה ל-Faceshift, ניתן להשתמש בטכנולוגיה של Emotient כדי לנתח ולשנות הבעות פנים ליצירת אווטרים וירטואליים, שימושיים למטרות מדיה חברתית ומשחקים. ככל הנראה נעשה שימוש בטכנולוגיה רגשית עבור Animoji.

Flyby Media, שנרכשה בתחילת 2016, היא חברה נוספת שעבדה על מציאות רבודה. לעקוף יצר אפליקציה שעבד עם הסמארטפון 'Project Tango' המצויד בתלת-ממד של גוגל, המאפשר לצרף הודעות לאובייקטים בעולם האמיתי ולצפות על ידי אחרים באחד מהמכשירים של גוגל.

לדוגמה, אדם יכול 'לסרוק' נקודת ציון כמו גשר שער הזהב של סן פרנסיסקו ולכתוב הודעה מצורפת אליו. אדם המבקר בגשר מאוחר יותר יוכל לסרוק את הגשר באמצעות אפליקציית Flyby כדי לראות את ההודעה. אפליקציית Flyby משכה ככל הנראה את תשומת לבה של אפל מכיוון שהיא הצליחה לזהות ולהבין אובייקטים שונים שנסרקו, טכנולוגיה שיכולה לשמש את אפל במספר דרכים באפליקציות כמו תמונות ומפות.

בפברואר 2017, אפל רכשה את RealFace, חברת אבטחת סייבר ולמידת מכונה המתמחה בטכנולוגיית זיהוי פנים, אשר עשויה לשמש לתכונות עתידיות של מציאות רבודה.

RealFace פיתחה טכנולוגיית זיהוי פנים המשלבת בינה מלאכותית לזיהוי פנים ללא חיכוכים. ככל הנראה הופעלה טכנולוגיית Realface באייפון X , הסמארטפון הראשון של אפל עם יכולות זיהוי פנים בדמות Face ID.

אפל במאי 2020 רכשה את NextVR , חברה מקליפורניה ששילבה מציאות מדומה עם ספורט, מוזיקה ובידור, המציעה חוויות VR לצפייה באירועים חיים באוזניות VR של פלייסטיישן, HTC, Oculus, גוגל, מיקרוסופט ויצרניות אחרות.

אפל באוגוסט 2020 רכש את הסטארט-אפ Spaces של VR , חברה שעיצבה חוויות מציאות מדומה שאנשים יכלו לחוות בקניונים ובמקומות אחרים, כמו 'Terminator Salvation: Fight for the Future'. Spaces יצרה גם חוויות מציאות מדומה עבור אפליקציות תקשורת וידאו כמו זום, שזה משהו שאפל עשויה לשלב במוצר AR/VR עתידי.

פטנטים של AR / VR

אפל הגישה מספר פטנטים המתייחסים ישירות לאוזניות מציאות מדומה, כולם כבר מספר שנים. בעוד שהטכנולוגיה כנראה התקדמה מעט מעבר לאלה, הם מספקים מבט מעניין על הרעיונות שאפל חקרה בעבר.

בקשת פטנט משנת 2008 כיסתה 'מערכת תצוגה אישית' בסיסית למדי שנועדה לחקות את החוויה של להיות בבית קולנוע בעת צפייה בוידאו.

פטנט שני תיאר 'מערכת תצוגה מותקנת בראש' עם 'מנוע לייזר' המקרין תמונות על צג זכוכית שקופה המולבשת על העיניים, בדומה למשקפיים. בתצורה זו, האוזניות מחוברות לנגן וידאו כף יד כגון iPod כדי לספק כוח עיבוד.

פטנט שלישי שהוגש במקור בשנת 2008 היה דומה בעיצובו, וכיסה אוזניות וידאו דמויות משקפיים שנועדו לאפשר למשתמשים לצפות בסרטים ובתכנים אחרים. הוא התווה שני מודולים אופטיים מתכווננים בשורה אחת עם עין המשתמש, שיכולים לספק תיקון ראייה ולאפשר צפייה בתוכן תלת מימד. אפל תיארה זאת כמציעה חווית צפייה אישית במדיה.

ל פטנט רביעי משנת 2008 כיסה מסגרת של אוזניות וידאו בדומה ל-Google Glass, שתאפשר למשתמש להחליק את האייפון או האייפוד שלו לתוך האוזניות כדי לספק וידאו. האוזניות תוארו כמוצר מציאות רבודה שיאפשר למשתמשים לעשות דברים כמו לצפות בסרטון או לבדוק אימייל תוך כדי מעקב אחר סביבתם.

מעבר לפטנטים הקשורים לאוזניות, אפל גם הגישה בקשה לפטנטים המתארים דרכים אחרות שבהן ניתן ליישם תכונות של מציאות מדומה ורבודה במכשיריה. בקשת פטנט משנת 2009, למשל, כיסתה תצוגות תלת מימד מצוידות במצלמה שישתנו בפרספקטיבה בהתבסס על מיקומו היחסי של המשתמש.

תצוגה כזו תזהה תנועת ראש, ומאפשרת למשתמש להזיז את ראשו כדי להביט בתמונה תלת מימדית מזוויות שונות תוך שילוב אלמנטים מסביבת המשתמש.

פטנטים של 2010 ו-2012 תיארו את השימוש בחיישני תנועה ליצירת ממשק תלת מימדי עבור מכשירי iOS באמצעות טכניקות מציאות רבודה. אפל תיארה את הממשק כ'חדר וירטואלי' המנווט על ידי מניפולציה של כיוון המכשיר באמצעות חיישנים מובנים או באמצעות מחוות.

בשנת 2011, אפל הגישה פטנט על תכונת מציאות רבודה באפליקציית מפות הקשורה למיפוי המרחק לציוני דרך בולטים. בעזרת המצלמה, משתמש יכול היה להסתכל על האזור סביבו ולקבל הערכות בזמן אמת של המרחק בין שתי נקודות יחד עם שכבות-על של מידע רלוונטי.

פטנט שהוגש ב-2014 והוענק ב-2017 מכסה מערכת מציאות רבודה ניידת המסוגלת לזהות אובייקטים בסביבה ולכסות אותם במידע וירטואלי באמצעות שימוש במצלמות, מסך וממשק משתמש. אפל מתארת ​​את המערכת כאידיאלית לתצוגה מותקנת בראש, אך היא גם מציגה אותה בשימוש בסמארטפונים.

אפל עבדה על טכנולוגיית מציאות מדומה שיכולה להיות משמש בתוך כלי רכב אוטונומיים . מספר פטנטים של אפל מתארים מערכת הכוללת מערכת מציאות מדומה לרכב עם אוזניות VR הנלבשות כדי לספק בידור וכדי להפחית את בחילה מכוניות משימות כמו קריאה ועבודה בזמן שהרכב בתנועה.

ל בקשת פטנט ביולי 2020 מכסה שיטות קלט אפשריות עם Apple Glasses, ומתארת ​​מערכת שבה המשקפיים משתמשות בחיישת חום אינפרא אדום כדי לזהות מתי מישהו נוגע בחפץ בעולם האמיתי, ומאפשרת למשקפיים להקרין פקדים על פני משטח של עולם אמיתי.

בשיטה זו, משקפי אפל יכולים להקרין בממשק בקרת AR על כל אובייקט אמיתי בעולם האמיתי עבור אפקט שכבת-על של מציאות מעורבת.

אפל בפברואר 2021 הגיש מספר פטנטים קשור לעבודתה על אוזניות מציאות מעורבות לפי שמועות, כשהפטנטים מכסים אלמנטים עיצוביים, התאמת עדשות, טכנולוגיית מעקב עיניים ותוכנה.

אפל פיתחה מספר שיטות להפיכת האוזניות לנוחה יותר לענידה תוך שמירה על מאובטחת וחוסמת אור, בנוסף ישנה מערכת כוונון עדשות מפורטת המשתמשת בנוזל כדי להזיז בצורה חלקה את העדשות כדי להפוך את ההתאמה להתאמה אישית לכל משתמש.

אפל גם מפרטת מערכת מעקב עיניים שמשתמשת באור אינפרא אדום כדי לזהות מיקום, ויש גם פטנט על האופן שבו ניתן לערוך מסמכים במרחב תלת מימדי וירטואלי באמצעות האוזניות וזיהוי המחוות.

לאפל יש מערכות פטנט עבור הקלטת וידאו מאוזניות, שבה חיישני מעקב מבט מובנים יכולים לספק אינדיקציה לאן אדם מסתכל כרגע, מה שיכול לכוון מצלמה מובנית להקליט את הסצנה שבה עיני המשתמש ממוקמות, במקום פשוט להקליט מה שעומד מול המשתמש.

עוד בקשה לפטנט שהוגש בפברואר 2021 הראה שאפל חוקרת מכשיר מותקן באצבע עם מערך חיישנים ומשוב הפטי שישמש כמכשיר בקרה לאוזניות ממציאות מעורבת.

למכשיר הבקרה יש צורה המאפשרת למשתמשים להרגיש אובייקטים בסביבתם באופן טבעי ויכולה לוודא במדויק את האופן שבו המשתמש מזיז את האצבע שלו ומקיים אינטראקציה עם משטחים. אומרים שהמערכת כל כך מדויקת שהיא יכולה לזהות כמה חזק המשתמש לוחץ על משטח ואת הכיוון המדויק של הכוח הזה, ומספקת משוב הפטי בתגובה.

יחד עם אוזניות AR או VR, אפל אומרת שהמכשיר המותקן על האצבע יכול 'לספק למשתמש תחושה של אינטראקציה במקלדת פיזית כאשר המשתמש מבצע הקשות על משטח השולחן' או 'לאפשר למשתמש לספק ג'ויסטיק -type input' למשחקים תוך שימוש רק בתנועת קצות האצבעות של המשתמש.

תאריך השקה

אנליסט אפל מינג-צ'י קואו אמר באוקטובר 2021 כי לאוזניות המציאות המעורבת הקרובה יש התעכב עד סוף 2022 לכל המוקדם, כשהייצור אמור להתחיל ברבעון הרביעי של 2022.

בלומברג מאמין גם שאוזניות ה-AR/VR שעליהן עובדת אפל תצא ב-2022, בעוד שמשקפי ה-AR שנמצאים בפיתוח ייצאו במועד מאוחר יותר. המידע הציע אוזניות AR/VR ישוחררו בשנת 2022, ואחריה משקפיים חכמים בשנת 2023, אך זהו ציר זמן מוקדם יותר ממה שמקורות אחרים ציינו עבור מוצר המשקפיים.

אפל מפגרת לכאורה בבדיקת המשקפיים החכמים שנמצאים בעבודות, מה שעלול להוביל לעיכובים. אפל הייתה אמורה להיכנס לשלב השני של הפיתוח על המשקפיים בתחילת 2021, אך בדיקות שלב שני עדיין לא החלו ולכן ייצור נפח ברבעון הראשון של 2022 הוא לא צפוי .

אנליסטים של מורגן סטנלי אמרו לאחרונה כי אוזניות ה-AR 'מתקרבות להעלאה' בהתבסס על מספר פטנטים אפל פרסמה. האנליסטים מאמינים שפורטפוליו הפטנטים של אפל עבור אוזניות ה-AR/VR שלה דומה לפורטפוליו הפטנטים שבנתה לקראת השקת Apple Watch.

תוכניות AR/VR עתידיות

האנליסט של אפל מינג-צ'י קואו מאמין שאפל עשויה לתכנן 'עדשות מגע' במציאות רבודה יכול להשיק מתישהו בשנות ה-30.

לדברי Kuo, העדשות יביאו את האלקטרוניקה מהעידן של 'מחשוב גלוי' ל'מחשוב בלתי נראה'. אין 'נראות' לעדשות המגע בזמן הנוכחי, וזה לא מוצר מובטח שאפל תפתח.