Category: ARKit

Posted on

Dance Reality: Tanzen lernen mit Apples ARKit

Augmented Reality mag ja cool sein, aber gibt es auch sinnvolle Anwendungen oder ist die ganze Sache nur eine Spielerei? Dance Reality beweist: Ja, es gibt sinnvolle Einsatzzwecke. Die App für iPhone und iPad nutzt Apples ARKit und blendet auf dem Bildschirm virtuelle Füße ein. So kann man nicht nur die richtigen Tanzschritte üben, sondern dabei auch versuchen, im Takt zu bleiben. Und das nicht nur allein, sondern auch zweit.

Schwofen mit Dance Reality

Wer schon immer eine kesse Sohle aufs Parket legen wollte, aber die richtigen Schritte nicht kennt, bekommt mit der App Dance Reality demnächst eine virtuelle Hilfe auf das iPhone oder iPad. Das Programm ist einfach gehalten: Nachdem man einen Song ausgewählt hat, hält man das iOS-Gerät in Richtung Boden. Über ihn blendet die App auf dem Screen ein oder zwei Paar Füße ein und zeigt, wohin man die eigenen setzen muss.
Dance Reality spielt die Tanzschritte in einer Schleife ab, wodurch man genügend Gelegenheit hat, die Bewegung zu lernen. Eine weitere Hilfe ist die Sprachausgabe, sie zählt die Tanzschritte und hilft so, im Takt zu bleiben. Zudem lässt sich die Geschwindigkeit verringern und auswählen, ob man führen oder folgen will. Zum guten Schluss gibt es noch Videos von echten Tanzlehrern, die das gewünschte Endergebnis zeigen. Einen echten Partner kann die App zwar nicht ersetzen, sie eignet sich aber für Übungen zwischendurch, schreibt der Entwickler Andy Albani auf Producthunt.

Noch ist die Anwendung im Betastatus, aber man kann sich auf der Webseite der Entwickler registrieren und am Betaprogramm teilnehmen. Voraussetzung ist iOS 11, das sich derzeit ebenfalls noch im Betastatus befindet, und ein neueres, ARKit-fähiges iPhone oder iPad. Entwickelt haben Dance Reality zwei Salsa-Tänzer aus Seattle, die zufällig auch Apps programmieren, wie sie auf ihrer Webseite schreiben.

Wer Lust auf noch mehr Augmented-Reality-Apps hat: In einem Artikel haben wir die besten Videos zu Apples ARKit versammelt.

(Quelle: UploadVR)

Der Beitrag Dance Reality: Tanzen lernen mit Apples ARKit zuerst gesehen auf VR∙Nerds. VR·Nerds am Werk!

Posted on

Using Apple’s ARKit, This Company Built Inside-Out Tracking for a VR Headset

Nexus Interactive Arts, an immersive media division of VFX production studio Nexus Studios, have used Apple’s ARKit working on an iPhone 7 in an experiment that creates basic inside-out positional tracking and pass-through AR for a Google Cardboard headset.

Announced last month at Apple’s annual Worldwide Developer Conference (WWDC), ARKit is an iOS 11 tool allowing developers to create AR applications thanks to the device’s computer vision capabilities. With ARKit, iOS 11 devices are able to map surfaces in real time, and allow users to superimpose digital objects onto the physical world—replete with interactive animations and dynamic lighting.

Using ARKit, the team reports their inside-out positional tracking solution clocks in “at around 60 frames per second,” or right around mobile VR’s current target framerate. This, according to the team, means Apple has created the foundations for a cheap, but still ultimately reliable positional tracking solution for mobile VR headsets.

In the video, they demonstrate inside-out positional tracking for VR and pass-through AR by touring a conceptual ‘art museum’ in a park. When in VR, walking close to a boundary like a tree results in a point cloud materializing into the otherwise closed-off experience—essentially acting as a guardian system to keep you from bumping into things as explore the infinite (or sufficiently large) tracking volume afforded by the device’s machine vision. In the AR demonstration, the digital skybox is lifted to reveal digital scenery affixed to the park’s trees and landscape.

The AR headset capabilities presented in the video, while an impressive use of ARKit, are less useful in this case because of the lack of stereoscopic vision afforded by the iPhone 7’s monoscopic rear-mounted camera. The developers aren’t couching this as a verified AR headset solution however, but rather showing the versatility of ARKit itself.

Allowing developers free reign to create applications for AR—and thanks to this experiment, now free-roaming VR experiences currently puts Apple back into competition despite its lack of discrete AR/VR headsets.

The post Using Apple’s ARKit, This Company Built Inside-Out Tracking for a VR Headset appeared first on Road to VR.

Posted on

Company Claims Solid VR Tracking With Apple’s ARKit

Company Claims Solid VR Tracking With Apple’s ARKit

This is interesting.

A company called Nexus Studios is claiming to have tested Apple’s ARKit tracking technology with a Cardboard VR headset and found it to do a somewhat suitable job. Tilt Brush artwork is said to have been placed throughout an outdoor environment and point clouds displayed in VR to show the location of real-world objects — operating as a kind of safety system

“It’s possible to do both pass-through AR (where the single camera feed is displayed to both eyes), as well as inside out positional tracking for VR at around 60 frames per second on an iPhone 7,” according to the company. “That’s not enough for quick head movements, but as long as you are walking around and observing at a ‘gallery pace’, the tracking does a pretty good job of keeping you in the right spot.”

We’ve reached out for more information about the project and the quality of the tracking, and we’ll update this post if we hear back. At this point our skepticism is extreme because the bar for quality VR tracking that doesn’t make users uncomfortable is quite high given the precision we’ve enjoyed in systems like the HTC Vive.

We’re also surprised it took this long for someone to test this out, and if any other developers have tried we’d love to hear reports in the comments or emailed to tips@uploadvr.com.

Tagged with:

Posted on

VRobot Developer Luden.io Reveals AR Tribe Made with Apple’s ARKit

Today, Luden.io, the developer behind virtual reality (VR) titles such as InMind 2 and VRobot, has announced its first foray into the world of augmented reality (AR), unveiling AR Tribe, a videogame that utilises Apple’s ARKit technology.

AR Tribe is a god simulator where players have to look after and guide their tribe, just this time it’s using AR, so these digital folks are in the real-world as well. Still in its early stages, the videogame will allow players to choose from a range of options to improve the prosperity of their tribe whilst at the same time the tribe comes to them for advice.

ARTribe1

Luden.io hasn’t revealed much more than that and the couple of gifs you can see above and below.

“We want to make your first app, which will help you to get acquainted with ARKit technology and have a lot of fun,” commented Oleg Chumakov, CEO of Luden.io in a statement. “But if you look deeper, this game is about how to adapt to a rapidly changing environment, and how to help others to adapt. Even if you are not a patron with your tribe”.

For those interested in getting a first look at the title the studio will be running an early access test towards the end of the summer. All you need to do is subscribe and Luden.io will notify you accordingly.

While some developers have likely had access to ARKit for sometime, the software was only announced during Apple’s   annual WWDC 2017 conference in June. The keynote featured a couple of demonstrations such as a LEGO model that could be exploded and Wingnut AR Studio with an interactive scene. 

As further details on AR Tribe are released, VRFocus will keep you updated.

ARTribe2

Posted on

Video Gives Us a Peek Into the Future of How AR and VR Will Work Together

We’re all waiting for the day when you can put on a singular, tether-free headset and experience all the ‘R’s that VR/AR/MR have to offer—and NormalVR, a “small but focused” group of passionate immersive media creators just gave us a peek into what’s possible when you mash it all together.

Known recently for their whimsical open source keyboard (and magnificently weird blobby-guy), Normal is a group of remotely-located developers that are using their own technology to make developing from separate locations an easier experience. By their own admission, they aren’t entirely sure what they’re doing, but it’s clear from the video that surfaced yesterday that they’re hitting on some very big ideas and executing them with serious flair.

In a recent tweet, the group shows what at first appears to be another fun video demonstrating the potential of creating apps with Apple’s recently released ARkit. But this is more than just a dancing hotdog-guy. Zooming out, we see the blobby-guy avatar is in fact controlled by a person using an HTC Vive standing just out of frame, creating a digital sunflower with some species of art program like Tilt Brush (2016).

Why is this so important? Normal is building this on readily available, cost-effective hardware and it seems to work perfectly.

As a launchpad for universal Windows apps that are designed to work across HoloLens and the company’s wallet-friendly fleet of VR headsets, Microsoft’s Windows Mixed Reality Platform is taking the first baby steps into making sure there’s a strong base of apps in the AR/VR shared ecosystem. More important to the scope of the article, Microsoft also spearheaded a neat way to turn your DSLR into an AR capture device so you can see what goes on in the digital realm, but this requires you to buy an extra HoloLens, which at $3000 is a pretty steep price to pay.

By picking up an iPhone and a VR headset like the Oculus Rift, which now costs even lower than ever at $400, developers can start building the future of games and apps for all immersive platforms—hopefully coming sooner rather than later.

The post Video Gives Us a Peek Into the Future of How AR and VR Will Work Together appeared first on Road to VR.

Posted on

ARKit mit HTC Vive zeigen Potenzial der Mixed Reality auf dem iPad

Apple veröffentlichte vor Kurzem das ARKit für iOS 11 und stieß damit auf großen Anklang. Die Plattform zum Entwickeln von Augmented-Reality-Inhalten ist durch die intuitive Bedienung sowohl für Anfänger, als auch für Fortgeschrittene geeignet und wird entsprechend häufig genutzt, um interessante und einzigartige AR-Erlebnisse zu gestalten. Doch die VR-Entwickler Normal VR zeigten in einem kürzlich geposteten Video auf Twitter, was mit dem ARKit wirklich möglich ist. In diesem kombinieren sie AR und VR in ihrer vorgestellten App in Echtzeit auf einem iPad.

ARKit: Die nächste Stufe der Mixed Reality?

Das amerikanische Unternehmen Normal VR hat ein Video auf Twitter veröffentlicht, in dem es ihre mit dem ARKit gestaltete AR-Erfahrung vorstellten. Darin sieht man einen erstellten Avatar, der mit Tilt Brush etwas im Büro des Unternehmens zeichnet. Doch ein Kameraschwenk zeigt, dass in Wirklichkeit eine echte Person mit einer HTC Vive den virtuellen Pinsel führt und der Avatar lediglich die Bewegungen imitiert.

Virtual Reality und Augmented Reality clever vereint

Normal VR war also in der Lage, durch das ARKit die Bewegungen eines echten Menschen aufzunehmen und die Darstellung innerhalb der Virtual Reality per Augmented Reality in die Realität zu projizieren. Die App bringt damit virtuelle Elemente in Echtzeit ins echte Leben. Dies ist auch im Video deutlich sichtbar, denn der Avatar kopiert sämtliche Bewegungen der Künstlerin ohne zeitliche Verzögerung. Zudem überträgt die App die erstellten Zeichnungen. Daher kann man davon ausgehen, dass auch diverse Hintergründe oder Objekte transferierbar sind. Nebenbei erkennt man, dass weitere Optionen wie z. B. die Veränderung der Größe möglich sind.

Bisher sind leider noch keine weiteren Informationen über hauseigene App vorhanden. Ob und wann diese Technologie veröffentlicht wird, steht noch offen. Jedoch zeigt das Video deutlich, welches Potenzial innerhalb der Mixed Reality steckt. Der Ansatz könnte es ermöglichen, uns die Inhalte aus AR und VR auch ohne VR-Headset zugänglich zu machen.

(Quellen: VRScout | Normal VR | Video: Normal VR Twitter)

Der Beitrag ARKit mit HTC Vive zeigen Potenzial der Mixed Reality auf dem iPad zuerst gesehen auf VR∙Nerds. VR·Nerds am Werk!

Posted on

Apple-Entwickler mischen bei WebVR mit

Die Unterstützung von WebVR wächst: Nach beispielsweise Facebook, Google und Microsoft sind jetzt auch Entwickler von Apple beim Standard dabei. WebVR soll es ermöglichen, Virtual-Reality-Erfahrungen direkt im Browser darzustellen. Für Anwender entfällt damit die Notwendigkeit, Apps herunterzuladen und zu installieren. Google unterstützt bereits WebVR für den Browser Chrome und den Android-Browser auf Android-Geräten.

Apple-Entwickler in der WebVR-Community

Auf der letzten Veranstaltung setzte Apple mit ARKit ein beeindruckendes Zeichen für Augmented Reality mit iPhone und iPad: Neuere Geräte werden mit der kommenden iOS-Version voll AR-fähig, Entwickler zeigten schon einige spannende Projekte. Bei VR hängt Apple etwas hinterher, brachte aber zumindest Hardware auf den Markt, die leistungsfähig genug für VR ist. Nun schickt Cupertino drei Entwickler in die WebVR-Community: David Singer, Repräsentant für Multimedia und Software-Standards, der Senior Front-End Entwickler Brandel Zachernuk und WebGL-Spec-Editor Dean Jackson.

Chance auf größere Zielgruppe

Damit wachsen die Chancen, dass Apples Browser Safari ebenfalls in Zukunft WebVR unterstützen wird. Der Standard könnte die derzeitige Zersplitterung der Systeme verringern und eine Basis für Inhalte sein, die auf allen Headsets gleich funktionieren. Entwickler könnten dann ihre Anwendungen lediglich in WebVR entwickeln und würden eine sehr viel größere Zielgruppe finden als derzeit. Allerdings mit Einschränkungen, aufwendige Spiele sollte man beispielsweise nicht erwarten. Vor allem für kommerzielle Lösungen wie virtuelle Supermärkte oder Werbe-Erfahrungen dürfte der Standard ein Segen sein – und damit VR-Entwicklern bessere Einnahmemöglchkeiten bieten. Brandon Jones von Google, einer der Köpfe der WebVR-Community, meldet auf Twitter noch Bedenkenwegen der Beteiligung von Apple an: Auch wenn die Entwickler an der Gruppe teilnehmen, heißt es noch lange nicht zwingend, dass das Unternehmen WebVR am Ende implementiert.

Man muss also abwarten, ob Cupertino tatsächlich auf den WebVR-Zug springt und den Standard in Safari einbringt – die Wahrscheinlichkeit ist jedoch hoch und würde dem ganzen Thema Virtual Reality eine gute zusätzliche Grundlage geben.

(Quelle: UploadVR)

Der Beitrag Apple-Entwickler mischen bei WebVR mit zuerst gesehen auf VR∙Nerds. VR·Nerds am Werk!

Posted on

Apple AR: Die besten Videos mit dem ARKit von Apple

Apple hat kürzlich mit dem ARKit ein Verfahren in iOS integriert, welches es erlaubt, die Kamera des iPhones für eine Erkennung des Raums zu verwenden und Mixed Reality Erfahrungen auf das Smartphone zu bringen. Beeindruckt ist, wie akkurat die Lösung von Apple arbeitet, obwohl das System lediglich auf eine optische Erkennung mit der herkömmlichen Kamera setzt.

Die besten Videos mit dem ARKit

Im Video von ViewAR wird sehr eindrucksvoll gezeigt, wie zuverlässig das Verfahren arbeitet. Der Nutzer verlässt das Zimmer, geht durch die Wohnung und kehrt zurück zu seinem Hologramm:

Portal AR? Nedd zeigt, wie man andere Welten mit dem ARKit betreten kann:

MatthewHallberg lässt Zombies durch die Wohnung laufen und demonstriert, welche Informationen Apple aus den Bildern ziehen kann. Zudem lernt ihr in dem Video, wie die Anwendung erstellt wird:

Mark Dawson gibt einen sehr detaillierten Einblick in die Qualität der optischen Erkennung des Raums. Außerdem sieht man in dem Video, das Spiegelungen auf Oberflächen extrem realistisch dargestellt werden können:

Wer bei Vollmond nicht schlafen kann, der sollte sich gut überlegen, ob er sich diese App auf das iPhone zieht:

Das ARKit von Apple kann auch produktiv eingesetzt werden. Hier seht ihr, wie man mit dem ARKit in die reale Welt zeichnen und Objekte vermessen kann:

 

Der Beitrag Apple AR: Die besten Videos mit dem ARKit von Apple zuerst gesehen auf VR∙Nerds. VR·Nerds am Werk!

Posted on

Apple: Developer Support for ARKit has been ‘Unbelievable’

Apple, Inc. finally showed its hand to the virtual reality (VR) and augmented reality (AR) industries at the Worldwide Developer Conference (WWDC), San Jose, earlier this month, revealing their work to bring both technologies to iOS and MacOS formats. In terms of AR, this begins with ARKit, the company’s own solution for AR development which is already available to developers.

 

ARKit (2)In an interview with The Australian, Apple vice-president of product marketing Greg “Joz” Joswiak said the enthusiasm of Apple’s development community building AR applications had been “unbelievable”.

“They’ve built everything from virtual tape measures [to] ballerinas made out of wood dancing on floors. It’s absolutely incredible what people are doing in so little time,” stated Joswiak. “Who knows the kind of things [are] coming down the road, but whatever those things are, we’re going to start at zero.”

Joswiak suggested that it was never Apple’s plan to build AR glasses or a head-mounted display (HMD) of any kind, but instead to leverage the existing iPhone and iPad audiences for AR.

“I think there is a gigantic runway that we have here with the iPhone and the iPad. The fact we have a billion of these devices out there is quite an opportunity for developers.”

 

Wingnut AR 1Since the announcement of ARKit, Apple has revealed their work with IKEA to create an AR shopping experience, plus highlighted work by Peter Jackson’s Wingnut and an improved Pokemon Go during WWDC itself. VRFocus will continue to keep you updated with all the latest details on Apple’s work in AR and VR.

 

Posted on

5 Awesome iPhone AR Demos Made Using Apple’s ARKit

5 Awesome iPhone AR Demos Made Using Apple’s ARKit

A lot of people believe that when things are all said and done that augmented reality (AR) will be the dominant technology over the likes of virtual reality (VR.) The two formats often get lumped in together but actually offer almost directly opposite opportunities. VR, for example, immerses the user in a digital space that doesn’t actually exist whereas AR brings aspects of the digital space into the real world around you.

On the heels of Apple’s developer-friendly ARKit announcement users have already taken to the toolset to create some amazing proof of concept demos. In fact, it’s already being used to make Pokemon GO even better. Now by perusing the excellent Twitter feed at MadeWithARKit we broke out some of our favorites, included below:

Draw In The Air Using Your iPhone

Google’s Tilt Brush is often one of the very first VR apps people try. It’s easy to use, simple to understand, and amazingly powerful with what you can accomplish in a short period of time.

Naturally, the AR-equivalent is expected to be a big hit when the day finally comes. This proof of concept shows just how cool it would be to draw in 3D space in the air around you using AR.

Measure 3D Objects In Real-Time 

Have you ever been doing something like hanging pictures, buying appliances, or just moving furniture around and needed to know a specific measurement but didn’t know where the tape measure was, didn’t have the right size, or simply didn’t want to go get the tool you needed? AR has the potential to alleviate a lot of those issues.

What if you could just pull out your phone and have it measure things in 3D space without any other equipment necessary? Point at a picture frame and measure the size or check the size of your book shelf before carrying it into another room.

Play A Real World Version Of Space Invaders 

When discussing the greatest and most influential classic games of all-time, Space Invaders has to be near the top of the list. It’s a legend. The game was so popular in arcades in Japan there is even debate about whether or not it was to blame for the country’s national coin shortage at the time.

It’s a bit dated by modern standards now, but there is still a lot of fun to be had with shooting down aliens, even in AR. This demo shows what it could be like to seek and destroy the little baddies as they flutter around you instead of just on an arcade cabinet’s screen.

Witness The Moon Landing In Your Home

The United States’ historic moon landing in 1969 will forever go down as one of the greatest achievements in human history. Now you can witness something of a much smaller scale for yourself, in your own home, using the power of the iPhone’s ARKit.

It’s not quite the real thing, but it’s still a really cool concept!

Watch A Space X AR Rocket Landing

Space X has made a lot of headlines over the past year for its groundbreaking technology that enables the company to land and re-use rockets as opposed to them being destroyed when re-entering the Earth’s atmosphere.

Watching a landing in person is a rare sight, but now you can get the next best thing with this AR-recreation. The user above watched a landing right in their own backyard!

*BONUS: Play Minecraft In The Real World

This is a bonus entry because we already wrote about the project earlier this week. If you want to read more about Minecraft AR using Apple’s ARKit, then feel free to check out our previous story and watch the video above.

Tagged with: , ,