Apple Preview: New iPhone Expected To Improve ARKit, OLED Screen Good For VR

Apple Preview: New iPhone Expected To Improve ARKit, OLED Screen Good For VR

Reports indicate the new iPhones on tap to be revealed next week by Apple could function as a best-in-class augmented reality device.

Apple earlier this year revealed its ARKit platform for developing augmented reality apps on hundreds of millions of its existing handheld devices. Since the release we’ve seen a series of impressive applications previewed on the Internet. Videos capture the immersive potential of the ARKit applications incredibly well even though they may be less impressive when viewed first-hand because they are delivered on a phone screen rather than presented on glasses and delivered directly to the eyes.

The technical difficulty of developing fashionable AR glasses people want to wear all day is extraordinary, and we’d be extremely shocked to see Apple release something along these lines in 2017. Instead, we expect the next iPhone to debut with new outward-facing cameras that improve upon the ARKit functionality Apple already debuted earlier this year, according to a report by Bloomberg.

The device is expected to also include a front-facing 3D camera that, while reports indicate could be used for payments or security, might also have AR applications. Now let me preface this by saying we’ve heard no solid reports Apple plans to include the following functionality in the new devices, but I certainly hope it comes to pass. Technology Apple acquired in 2015 could make FaceTime video calls much more fun. It is feasible this device could enable people to optionally have their entire conversation over video chat as animated cartoon characters, with all their expressions captured. In 2015, Apple acquired a company called Faceshift that allowed people to take their facial expressions and transfer those in real-time onto a myriad of cartoon characters.

Lastly, reports indicate Apple is paying Samsung a fortune for the OLED displays used in the new iPhone — contributing to the expected high cost of the device while paying the tech giant’s chief rival a major slice of the profit driving Apple’s extraordinary growth over the last decade. Apple is said to be sourcing the component exclusively from Samsung, which puts OLED screens in all of its phones compatible with its Gear VR headset. Samsung seems to have a lock on the market for these displays. Reports indicate Apple is considering an investment in LG to spur the company’s efforts so that it too can produce these components at the scale it requires for iPhone production. While Microsoft’s upcoming headsets are expected to use LCD screens with “impulse backlighting”, the vast majority of existing VR headsets have been reliant on Samsung’s OLED display technology to function. That said, we saw an excellent preview of a VR headset based on LG’s screens earlier this year. The takeaway here is that, with OLED screens finally powering the iPhone after years without, it might be possible to stick the new iPhone into a VR headset similar to the Gear VR and have a higher quality experience than has been possible with Apple devices in the past. Developers using ARKit have already tested inside-out tracking with earlier iPhones and found it to do a surprisingly solid job. With a higher quality display, developers might be able to prepare more enjoyable VR apps released on Apple’s App Store.

As with anything related to Apple, we’ll have to wait and see what the company actually deemed fit to announce and support. It is hosting its iPhone reveal event on the morning of Sept. 12.

Tagged with: , ,

ARKit: ARZombi bringt die Zombie-Apokalypse in die echte Welt

Die Kombination aus Zombies und VR erweist sich immer wieder als erfolgreiche Kombination. Der Zombie-Shooter Arizona Sunshine gehört zu einem der meist verkauften VR-Titeln überhaupt. Auch Resident Evil 7 begeisterte die Gamer und sorgte für reichlichen Umsatz. Nun entwickelten Crisly Manor mit dem ARKit den Zombie-Shooter ARZombi, der dank Augmented Reality die Zombies in die reale Welt implementiert. So könnt ihr in verschiedenen Spielmodi den Kampf in eurer eigenen Wohnung oder der nahen Umgebung aufnehmen.

ARZombi – Zombie-Apokalypse hautnah

Der Zombie-Shooter ARZombi von Crisly Manor entstand mit dem ARKit für iOS. Dabei erinnert sowohl das Spiel wie auch das Konzept stark an das bald erscheinende The Walking Dead: Our World, denn in beiden Spielen erscheinen mit AR Zombies in der gewohnten Umgebung. Entsprechend wirkt es dank Room-Mapping-Technologie immersiv, denn die Zombies tauchen in realistischer Form in den eigenen vier Wänden auf. So kann man versuchen, so lange wie möglich zu überleben, bis die Armee der Toten den Spieler umzingelt.

ARZombi-ARKit-iOS

Sowohl eine Singleplayer-Kampagne als auch ein Multiplayer-Modus sollen ein Bestandteil des Spiels sein. Innerhalb der jeweiligen Spielmodi stehen euch diverse Möglichkeiten zur Verfügung. So könnt ihr beispielsweise mit Brettern eure Türen und Fenster verriegeln, um das Eindringen der lebenden Toten zu verhindern. Natürlich stehen auch verschiedene Waffen zur Verfügung, um die unzähligen Horden der Untoten zu dezimieren. Zur Belohnung für einen langen Überlebenskampf winken versteckte Achievements und weitere Goodies.

ARZombi-ARKit-iOS

Innerhalb des Story-Modus trefft ihr Entscheidungen, die sich auf euren Charakter auswirken. So hat jede dieser Entscheidungen nicht nur Einfluss auf das jeweils aktuelle Spiel, sondern auch auf die nächsten Sessions. Dadurch definiert ihr, welcher Typ ihr in einer Zombie-Apokalypse seit.

ARZombi soll im Herbst 2017 für iOS erscheinen. Der Preis steht aktuell noch nicht fest. Ebenso wenig ist derzeit klar, ob es eine Umsetzung für Android geben wird. Der Überlebenskampf gegen die Zombiehorden ist mit sämtlichen ARKit-kompatiblen iPhones und iPads möglich.

(Quellen: UploadVR | ARZombi | Video: ARZombi Youtube)

Der Beitrag ARKit: ARZombi bringt die Zombie-Apokalypse in die echte Welt zuerst gesehen auf VR∙Nerds. VR·Nerds am Werk!

How good is Apple’s ARkit? A technical explanation

Matt Miesnieks from Superventures provided a thorough technical explanation about the recently released Apple’s ARkit.

I’ve been working in AR for 9 years now, and have built technology identical to ARKit in the past (sadly before the hardware could support it well enough). I’ve got an insiders view on how these systems are built and why they are built the way they are.

This blog post is an attempt to explain the technology for people who are a bit technical, but not Computer Vision engineers. I know some simplifications that I’ve made aren’t 100% scientifically perfect, but I hope that it helps people understand at least one level deeper than they may have already.

Continue reading the full article here: https://medium.com/super-ventures-blog/why-is-arkit-better-than-the-alternatives-af8871889d6a

Neon: Mit der ARKit-App für iPhone Freunde finden

Die ersten Teaser zu Neon sind vielversprechend: Die auf Apples ARKit basierende Social-App weist den Weg und blendet auf Wunsch ein Neon-Zeichen ein, der den gesuchten Standort anzeigt. Das kann beispielsweise praktisch auf Festivals sein oder überhaupt in großen Menschenmengen, um den Freund oder die Freundin zu finden. Aber auch eine Party lässt sich mit der App einfacher finden und wird mit großen Neonzeichen beworben.

Neon: Zeichen setzen in der Augmented Reality mit ARKit

Der Entwicklerzug für AR-Apps für Apples ARKit ist mt Volldampf unterwegs. Wenn iOS 11 im Herbst erscheint, sollten vom Start weg etliche Lösungen von der Spielerei bis zur tatsächlich praktischen Augmented-Reality-Anwendung vorhanden sein. Zu einer praktischen Spielerei könnte sich Neon entwickeln, das in Videos einen guten ersten Eindruck machen will. In der App für iPhone und iPad lassen sich Orte und Menschen einfacher finden, denn sie blendet auf Wunsch ein großes Neon-Zeichen in die „Wirklichkeit“ auf dem Bildschirm ein. Damit markiert Neon beispielsweise den Aufenthalt eines Freundes in einer Menschenmenge. Zusätzlich zeigt die App an, wie weit das Ziel entfernt ist. Kommentare lassen sich offenbar ebenfalls über die App verschicken.

In einem zweiten Beispiel-Video tippt ein Anwender „House Party hier heute Nacht ein“ und bekommt dann ebenfalls eine Anzeige in Form eines Neon-Leuchtzeichens, das anzeigt: Hier geht es heute Abend rund. Besitzer der App können so andere Neon-User einladen und ihre Party bewerben. Ob das eine wirklich so gute Idee ist, sei allerdings dahingestellt. Der Gedanke mit dem Markieren von Freunden auf Festivals scheint uns da wesentlich sinnvoller zu sein. Nach der Vorstellung von ARCore für Android-Smartphones scheint eine Umsetzung für Googles Plattform sehr wahrscheinlich zu sein. Wer vom Start der App direkt informiert sein will, kann sich auf der Webseite des Entwicklers registrieren. Man findet sie auch ohne AR-Unterstützung über diesen Link.

(Quelle: UpLoad VR)

Der Beitrag Neon: Mit der ARKit-App für iPhone Freunde finden zuerst gesehen auf VR∙Nerds. VR·Nerds am Werk!

Guns of Boom in Augmented Reality mit Apples ARKit

Der First-Person-Multiplayer-Shooter Guns of Boom gehört mit über zehn Millionen Downloads zu den erfolgreichen Smartphone-Spielen. Nun zeigt das Studio Game Insight eine kurze Demo, bei der man das Spiel aus der AR-Perspektive betrachten kann. Es soll die Zukunft des eSports sein, glauben die Entwickler. In Zukunft sollen alle Guns-of-Boom-Übertragungen hunderprozentig in Augmented Reality stattfinden.

Guns of Boom goes AR mit ARKit

Noch muss man sich bis zum Herbst gedulden, bis Apple mit iOS 11 Augmented Reality via ARKit für iPhone und iPad freigibt. Aber bereits jetzt lässt sich absehen, dass gleich zum Start eine Schwemme von Anwendungen bereit stehen werden. Eine davon wird laut Game Insight der AR-Modus für Guns of Boom sein, den die Entwickler mit Erscheinen von iOS 11 freischalten wollen. Der Modus ermöglicht es, Kämpfe aus der „Gott-Perspektive“ zu betrachten. Dabei können Spieler das iPhone oder iPad frei bewegen und die Wiederholung damit aus jedem Blickwinkel anschauen.

Guns of Boom ist kostenlos für Android und iOS erhätlich und finanziert sich wie viele derartige Spiele über In-App-Käufe. Wohl mit Erfolg. Die 2009 gegründete Firma hat laut VentureBeat inzwischen rund 300 Angestellte. 50 davon arbeiteten angeblich an Guns of Boom. In dem First-Person-Shooter treten Spieler in Clans gegeneinander an, insgesamt stehen 48 Waffen von der Schrotflinte bis zum Maschinengewehr zur Verfügung. Apple wird das erstmals auf seiner Entwicklermesse WWDC im Juni vorgestellte ARKit in iOS 11 voraussichtlich offiziell im Herbst veröffentlichen. Schätzungsweise 300 Millionen Anwender können dann auf einen Schlag Augmented-Reality-Apps mit Positional Tracking nutzen. Der Clou: Im Gegensatz zu Googles Lösung mit Tango ist keine spezielle Hardware erforderlich. Allerdings setzt ARKit einen A9-Chip oder besser voraus, womit die Software erst ab iPhone 6s und iPad Pro/iPad 2017 funktioniert.

(Quelle: VentureBeat)

Der Beitrag Guns of Boom in Augmented Reality mit Apples ARKit zuerst gesehen auf VR∙Nerds. VR·Nerds am Werk!

Supposed iPhone Leak Mentions Depth-Sensing Front Camera

Supposed iPhone Leak Mentions Depth-Sensing Front Camera

Apple’s most recent iPhones are currently preparing to make the jump into augmented reality with the launch of iOS 11 and the ARKit platform. But, this being Apple, we can’t help but wonder what the company has in store for the next iteration of its iconic device. A supposed recent leak may have just revealed what’s on the way.

You probably heard about last week’s apparently accidental leak of an internal software update for the HomePod, an upcoming smart speaker. The update was meant to be issued to Apple employees only, but its public release has seen people pick apart the fine details of the firmware, uncovering a reference to ‘D22’, which is thought to be the codename for the next iPhone. There was even the reveal of the icon above, which suggests an all-screen phone and the removal of the home button. Dig a bit deeper, though, and there’s some interesting possibilities for AR too.

Specifically, there’s reference to a depth-sensing camera on the front of the device, as spotted by The Guardian. In other words, the camera you use for selfies might soon have some AR capabilities of its own. It may be that the phone uses this new feature for the long-rumored facial ID scanning to unlock phones (which could replace the fingerprint sensor), but it might also be used for AR overlays for Snapchat like-apps that could perhaps bring ARKit’s positional information into play too.

The combination of AR for both front and rear-facing cameras could provide the next iPhone with a seamless AR experience. Personally, we like the idea of Pokemon Go selfies with Pikachu sitting on our shoulders.

This is all, of course, just a rumor, but we’re still expecting the new iPhone to be revealed during an Apple event in September. Even if the new phone isn’t a big leap forward for AR, the arrival of iOS 11 will be.

Tagged with:

„Netflix für VR“: Inception erhält bei Finanzierungsrunde 15 Millionen US-Dollar

Inception hat große Pläne und will so etwas wie das Netflix für die virtuelle Realität werden. Die App mit diversen Inhalten ist für fast jede wichtige VR-Plattform erhältlich. Lediglich die Version für PlayStation VR steht noch aus, sie soll aber in Kürze erscheinen. Das Start-up kann sich jetzt über eine Finanzierungsrunde freuen, die von der RTL Group geleitet wurde. Mit dem frischen Geld will man unter Anderem in neue VR-Inhalte investieren.

Inception: Mehr Inhalte durch erfolgreiche Finanzierungsrunde

So unterschiedlich können die Nachrichten sein: Während manche VR-Unternehmen darben und das soziale Netzwerk AltSpace schließen muss, erhalten andere dann doch noch frisches Geld. Die luxemburgische RTL Group, zu der beispielsweise Fernsehsender wie RTL, Vox, n-tv und etliche andere gehören, hat die Finanzierungsrunde geleitet. Die spült dem Start-up Inception aus Tel Aviv 15 Millionen US-Dollar in die Kasse. Inception weiß auch schon, was man mit dem Geld anfangen will. Es soll dabei helfen, den Katalog zu erweitern und das Wachstum zu beschleunigen.

Inception startete im Oktober 2016, die VR-Apps sind für die Samsung Gear VR, Google Daydream, im App Store für Apples iPhone, im Google Play Store, für die Oculus Rift und die HTC Vive erhältlich. In Kürze soll laut Webseite die Version für PlayStation VR (PSVR) folgen. Die Inhalte sind bisher ein wilder Mix, zum Beispiel kann man die virtuelle Ausstellung Dreams of Dalí besuchen, den Musikkanal von Pitchfork genieße, mit Pinguinen auf Wanderschaft gehen oder eine Burger-Auszeit in London nehmen. Inception ist laut RoadToVR auf jeden Fall stolz darauf, dass der Content immer mit VR im Kopf entsteht, von der Konzeption über das Design bis hin zur Produktion. Außerdem habe man die besten Streaming-Technologien.

Die RTL Group hält 15 Prozent an dem jungen Unternehmen und verspricht sich erfolgreiche Synergieeffekte. Inceptions Erfahrung und frischer Unternehmergeist ergänze sich perfekt mit den eigenen Traditionen und Möglichkeiten.

(Quelle: RoadToVR)

Der Beitrag „Netflix für VR“: Inception erhält bei Finanzierungsrunde 15 Millionen US-Dollar zuerst gesehen auf VR∙Nerds. VR·Nerds am Werk!

A guide to understanding the recent AR landscape changes

For years the mainstream tenet of the AR community has been that the success of Augmented Reality would indissolubly depend on the success of Smartglasses. On the other hand, current market dynamics clearly indicates that, in the transition between the current state of adoption of the technology and the mass adoption of smart glasses, there will be an intermediate state of large scale adoption of Mobile AR. Indeed, recent announcements from large companies such as Facebook and Apple have brought their attention to the fruition of augmented reality on mobile devices rather than on a new generation of wearable devices.

The reasons for this phenomenon are different. First, the fastest way to reach hundreds of millions of users is to target the platforms already in use by billions of users worldwide. Facebook, despite having since acquired Oculus, can immediately leverage over 1 billion users on its Facebook, Messenger, Instagram and Whatsapp platforms; conversely, Apple boasts a hardware-side privilege position, with a market share of 13% on the global scale, and on the software side due to the recent launch of ARkit, a free development kit that lets you create AR experiences on iOS devices.

This is the reason for the hype around Mobile AR, namely the ability to bring AR to billions of people without forcing them to buy a dedicated device. So while the awareness of the technology will increase, it will be possible to design and create new generations of immersive devices.

The numbers of the Mobile AR market

Digi-Capital has estimated the Mobile AR market to be worth $60 billion in 2021, including hardware and software components. On the hardware side, the main players are Apple, Samsung and Huawei, with the first being strongly present on the software side with ARkit. The users involved in this field could reach 400 million in 2021. On the software side, the main players are Facebook, Tencent, Apple and Snap, who together already count on users that go beyond the billion and that will grow even more in the coming years.

From a numerical point of view, the Mobile AR software players have the great advantage of interacting with a much wider user base than the hardware players, and the degree of adoption of the new AR features that is made available is very much higher.

iOS vs Android

It seems clear that Apple is enjoying a preferential position, which, thanks to the recent release of ARkit and the 13% market share on mobile hardware, is in the best conditions to impose its Augmented Reality model on the iOS world.

In the Android world, Samsung and Huawei, with a market share of 23% and 9% respectively, are forced to catch up because they are just starting to gear up with their own solutions both on the hardware and on the software sphere.

And what about the other mobile contenders? The only other real mobile contender is Microsoft, with one of the most convincing AR operative systems in the market. It’s true that Microsoft’s leap into AR has been huge and Hololens is purported to set a standard in the Smartglass market of the near future. Based on this great success, observers have started to wonder whether Microsoft will strengthen their mobile AR strategy or focus on the Smartglass development. Many believe that Microsoft is probably not going to stay at the door.

From Mobile to Wearable

These premises urge analysts to think that in the coming years we will witness a sharp increase in AR’s penetration on mobile devices already in use, thus avoiding the purchase of new dedicated devices. The next step will be the move from traditional mobile devices to user-friendly wearable devices. The tech giants seem to be the players who are likely going to control the market, given their already important user base and the huge financial resources available.

On the other hand, the challenge for the emerging players of the AR community will be to find the right repositioning inside the evolving AR landscape. That the opportunity is enormous is testified by the proliferation of startups and new entrants in the market. Will the latter be able to assert their competitive edge and carve out a space in the AR value chain?

The Bridge für iPhone: Headset mit Inside-Out-Tracking für Mixed Reality und VR

Android-Anwender haben mit der Samsung Gear VR und Google Daydream die Wahl zwischen zwei guten VR-Brillen, für iPhone-Anwender sieht die Sache abseits von Billiglösungen allerdings vergleichsweise mau aus. Hier setzt The Bridge an und legt mit dem System sogar eine Schippe drauf, denn das Headset für Apples kommt mit Inside-Out-Tracking und unterstützt Mixed Reality.

The Bridge mit Inside-Out-Tracking für Romm-Scale-Erfahrungen

The Bridge: MR und VR für iPhone
Das Start-up Occipital aus San Francisco hat mit The Bridge eine interessante VR-Lösung entwickelt, die das iPhone 6, 6s sowie 7 unterstützt und seit kurzer Zeit offiziell erhältlich ist. Wie bei Headsets für Smartphones üblich, schiebt man das iPhone in die Halterung. Hier hören die Gemeinsamkeiten aber fast schon auf, denn über einen „Struktur-Sensor“, der die iPhone-Kamera ergänzt, beherrscht The Bridge Inside-Out-Tracking. Die Position im Raum für Room-Scale-Erfahrungen bestimmt das System mit 6 Freiheitsgraden (DoF – Degrees of Freedom) und bis zu einer Entfernung von 3,5 Metern. Der wie ein Fremdkörper auf der Brille sitzende Sensor besitzt einen eigenen Akku, der bis zu vier Stunden durchhalten soll. Das Sichtfeld des Headsets gibt der Hersteller mit 120 Grad an, die Bildwiederholrate liegt bei 60 fps. Ansonsten limitiert das iPhone das Erlebnis, die Auflösung von 1334 x 750 Pixel liegt weit unter der von besseren Android-Smartphones. Das Resultat dürfte also ein ziemlich pixeliges Bild sein. Für die Bedienung legt Occipital einen Bluetooth-Controller mit 3 Freiheitsgraden und Touchpad dem Set bei.

Interessant ist die Möglichkeit, zwischen Virtual Reality und Mixed Reality umzuschalten: In der Mixed Reality liefert die Kamera des iPhone das Bild der realen Umgebung, das anschließend mit virtuellen Elementen angereichert wird. Um für diesen Modus sowie VR Anwendungen erstellen zu können, stellt der Hersteller für Apples SceneKit-Framework die Bridge Engine zur Verfügung. Ein Plug-in für Unity unterstützt lediglich den VR-Modus, soll aber laut Occipital auf einfache Weise Projekte fit für das Inside-Out-Tracking machen. Ein Showstopper dürfte für die meisten Anwender allerdings der Preis sein, denn für das komplette System verlangt der Hersteller 399 US-Dollar. Wer auf den Sensor und damit auf das Inside-Out-Tracking verzichtet, kommt mit 279 Dollar davon.

(Quelle: The Bridge)

Der Beitrag The Bridge für iPhone: Headset mit Inside-Out-Tracking für Mixed Reality und VR zuerst gesehen auf VR∙Nerds. VR·Nerds am Werk!

VR Headset The Bridge Brings VR To iPhone

Since Apple announced its entry into the virtual reality (VR) and augmented reality (AR) spheres there has been much speculation on if and when Apple will be releasing its own VR headset. Though there is some evidence that there are plans for a Google Glass-style AR headset, so far there has been little to suggest that Apple are planning a VR headset. So one company has taken matters into its own hands to produce a VR headset compatible with iPhones.

The Google Daydream and Samsung Gear VR are primary compatible with Android smartphones, and though the Google Cardboard will work with iPhones, its capabilities are limited in comparison. Enter The Bridge, a VR and mixed reality (VR) headset compatible with the iPhone.

Claiming to offer inside-out tracking, along with six degrees of freedom positional tracking and full room-scale VR experiences, the Bridge headset was created by San Francisco-based startup Occipital. Compatible with the iPhone 6, 6s and iPhone 7, the headset offers a resolution of 326 PPI with a refresh rate of 60fps.

The headset bundle comes with a custom bluetooth controller, a structure sensor, bridge controller and the head-mounted display and costs $399 (USD) from the Occipital website. The software that powers the headset, referred to the Bridge Engine, allows developers to craft mixed reality apps such as the one used for Occipital’s demonstration, which involves a tiny robot called Bridget, who races across and around real world objects to retrieve a virtual ball thrown by the user, something which the team at Occipital believe is just the tip of the iceberg.

Full details on what apps will be compatible with The Bridge headset has not yet been confirmed, though further information, including the ability to purchase the headset, can be found at the Occipital website.

VRFocus will bring you further news on The Bridge and other Apple-related VR and AR devices as it becomes available.