Immersive technology like virtual reality (VR) and augmented reality (AR) can be very valuable for training and education. In the case of schoolchildren, it can let them travel to places they have never seen before, and with AR, amazing and fantastic things can come to them. The latter case is when Google is testing out with its new Google AR Expeditions.
For the past year, Google have been testing out the AR technology with a selected sample of students, and now the technology is being made available to anyone through the Google Expeditions app.
Expeditions AR tours lets users bring a full-sized African elephant into the room, letting students walk around and examine the giant creature from all angles, or look at the artistry and design of ancient Greek statues.
The Google Expeditions app is available on both Android and iOS, and has been updated to help users find new tours they might be interested in or find a tour that has been previously saved. Over 100 AR tours have already been made available, alongside 800 VR tours created Google Arts & Culture partners like the Smithsonian, Oxford University Press, Museo Dolores Olmedo and Aquila Education.
“AR takes the abstract and makes it concrete to the students. We wouldn’t be able to see a heart right on the desk, what it looks like when beating, and the blood circulating.” said Darin Nakakihara of the Irvine Unified School District.
The upgraded Google Expeditions app can be used on a compatible android or iPhone which has ARKit or ARCore. Schools can also purchase Expeditions VR and AR kits from Best Buy Education, further information on this can be found on the Best Buy website.
The Google AR tours have already helped over one million students learn about a variety of subjects from biology to Impressionist art, and Google say it is keen to see it continue to grow. Further news on how immersive technology is being used in education will be covered here on VRFocus.
Google may have launched its augmented reality (AR) software ARCore earlier this year in North America and Europe, but it’s the Chinese market most western companies are keen on breaching. This has proven difficult in the past, with Google’s core services still blocked in the country, yet thanks to a partnership with Xiaomi, ARCore is now available on its Mi Mix 2S smartphone.
Google announced that ARCore apps are now available via the Xiaomi App Store, just for Mix 2S devices at this time, getting past the Play Store block that’s in place. Obviously, the tech giant won’t be stopping there, more partners will be on their way including the likes of Huawei and Samsung in the future.
There’s already a reasonable number of smartphones that are compatible with ARCore, with Google planning on even more over the course of 2018. The company has previously said “hundreds of millions” of devices will be supported, and with the Chinese tech market dominated by smartphones (most videogames are played on them), the country is of great importance, offering a huge potential market.
During Google I/O earlier this month the company revealed a slew of updates for ARCore, making it more social, interactive and users friendly. New features included Vertical Plane Detection, allowing AR objects to be placed on more surfaces, and Cloud Anchors, enabling players to interact with one another in the digital world.
Google isn’t the only western company to utilise Xiaomi to gain a foothold in China. Oculus also partnered with Xiaomi on a new standalone head-mounted display (HMD), revealing the collaboration during CES 2018. While Oculus will make the Oculus Go for worldwide markets, Xiaomi will build the Mi VR Standalone for the Chinese market. As further details are released on Google’s ARCore plans for China, and the rest of the world, VRFocus will keep you updated.
Google wants to put a spotlight on some of the creative minds behind some of your favorite mobile games. The company has launched a new video series called First Person, which goes behind the scenes of some mobile games.
Auch wenn die Anzahl an ARCore-Titel im Google Play Store derzeit noch überschaubar ist, ist das Auffinden guter Anwendungen nicht unbedingt eine leichte Aufgabe. Deshalb möchten wir euch an dieser Stelle unsere Highlights für den ARCore vorstellen. Welche Smartphones derzeit unterstützt werden, könnt ihr hier nachlesen.
Die besten Augmented Reality Spiele für den ARCore
Zwar ist das Smartphone einer Smart-Brille beim Einsatz von AR-Inhalten deutlich unterlegen, allerdings müssen wir uns als Konsumenten noch etwas länger gedulden, bis wir eine solche Brille in den Händen halten dürfen. Einige Entwickler wagen dennoch bereits heute einen Blick in die Zukunft und erstellen kreative Inhalte für AR-Enthusiasten:
Knightfall AR
Ein sehr gutes, ausgereiftes und kostenloses Spiel, erhaltet ihr mit Knightfall AR. Im Spiel feuert ihr mit Pfeilen und Kometen aus der Vogelperspektive auf feindliche Truppen, um eure Festung zu verteidigen. Besonders schön ist, dass ihr unterschiedliche AR-Modelle und Animationen freischalten könnt, um anschließend Fotos oder Videos mit diesen aufzunehmen.
Das kostenlose AR-Spiel CRANGAR!: Harbor Frenzy ist ein hübscher Jenga-Ableger für den ARCore. Anstelle von Holzblöcken, versucht ihr jedoch Schiffscontainer aus dem Turm herauszuziehen. Ansonsten ähnelt das Spiel sehr dem realen Vorbild. Dabei müsst ihr stets um den Turm herumlaufen, um den gewünschten Container drücken zu können. Crangar kann nicht nur alleine gespielt werden, sondern verfügt zudem über einen Mehrspieler-Modus.
Total simpel, aber dennoch extrem unterhaltsam: Während ihr in BounceBall eine Scheibe auf eurem Spielfeld bewegt, um einen Basketball bouncen zu lassen, müsst ihr in Bottle Shoot AR Flaschen aus der Luft schießen, wobei die virtuellen Scherben direkt auf eurem Wohnzimmerteppich landen. Beide Spiele setzen auf simples Gameplay, das jedoch schnell süchtig machen kann. Da beide Anwendungen kostenlos sind, kann man mit einem Download auch wenig falsch machen.
In Capsule Commander AR erwarten euch keine vorgefertigten Missionen, stattdessen dürft ihr euer Spielfeld selbst designen. Dadurch entsteht der Vorteil, dass es keine Fehler bei der Darstellung der Objekte im Raum gibt, da ihr jedes Element frei verschieben könnt. Ziel des Spiels ist es, eine Raumkapsel sicher zu steuern und zu landen. Wie schwer dies ist, hängt letztlich von der Gestaltung eurer Map ab.
In Nightenfell AR ist es eure Aufgabe, vier Pilze vor vom Himmel herabfallenden Kometen zu beschützen, die kurzen Prozess mit den geheimnisvollen Lebewesen machen. Zwar lässt uns die Gestaltung des Zauberstabes etwas ratlos zurück, aber ansonsten erwartet euch ein nettes Tower-Defense-Game, welches ihr sogar mit drei weiteren Mitspielern gleichzeitig spielen könnt.
Das Rätsel-Spiel Brickscape ist nicht unbedingt ein Spiel, welches AR tatsächlich benötigt, jedoch bereitet die AR-Ansicht bei diesem Spielkonzept viel Freude. Die kleinen Rätsel finden innerhalb transparenter Würfel statt, in denen Quader zum Ausgang geführt werden müssen. Per Schieberegler könnt ihr schnell und einfach zwischen der AR-Ansicht und der normalen Darstellung wechseln.
Echte AR-Anwendungen können auch auf dem Smartphone nützliche Helfer im Alltag sein. Schnell die Wohnung einrichten, etwas vermessen oder kreativ tätig werden. Alles kein Problem, mit diesen nützlichen Tools:
Just A Line
Just A Line hält, was es verspricht: Ihr zeichnet einfach eine Linie in die echte Welt und könnt diese daraufhin von allen Seiten begutachten, ein Video oder Foto aufnehmen und die erstellten Inhalte mit euren Freunden und Freundinnen teilen. Die App ist einfach und funktioniert perfekt. Das richtige Tool für schnelle und kreative Botschaften.
Mit ShareVOX könnt ihr gemeinsam Voxel-Grafiken erstellen und diese auch als Objekt exportieren. Die Anwendung bietet bereits einige nützliche Funktionen, jedoch fanden wir die Steuerung umständlich.
Wer seine Wohnung neu einrichten möchte und ohnehin einen Besuch bei Ikea plant, der kann mit der passenden AR-Anwendung Möbelstücke des Unternehmens direkt in seiner Wohnung platzieren. Außerdem könnt ihr Möbel fotografieren und nach ähnlichen Modellen beim skandinavischen Möbel- und Einrichtungshaus suchen. Die Beschränkung auf das Sortiment von Ikea ist zwar ärgerlich, aber es zwingt euch niemand, die Möbel auch tatsächlich dort zu kaufen.
Mit dem ARuler könnt ihr nicht nur die Entfernung zwischen zwei Punkten ausmessen, sondern zudem Volumen berechnen und Winkel anzeigen lassen. Da man sein Smartphone meist griffbereit hat, ist der ARuler definitiv ein nützliches Alltags-Tool.
Wer sich für die Erkundung anderer Planeten interessiert, der sollte ein Auge auf Spacecraft AR werfen. Mit dieser Anwendung könnt ihr euch diverse NASA-Roboter in das eigene Wohnzimmer holen und von allen Seiten genauer unter die Lupe nehmen. Besonders cool: die Objekte lassen sich in originaler Größe anzeigen, was teilweise sehr beeindruckend wirkt.
Derzeit findet in LA die Display Week statt und am Stand von LG sorgt ein neues OLED Display mit 4,3 Zoll für Aufsehen. Eine Pixeldichte von 1443 PPI (pixel per inch) werden versprochen, was die Bildqualität von VR-Brillen auf ein neues Level heben soll.
Google und LG zeigen 1443 PPI VR Display in LA
Bei der Vorführung von LG sind die Displays und Linsen nicht in einer VR-Brille verbaut, sondern in eine Wand des Ausstellers. Das neue Display kommt auf eine Auflösung von 3820 x 4800 Pixel bei 120Hz, womit es deutlich über den Spezifikationen der Displays in aktuellen VR Brillen liegt. Zum Vergleich: Die Oculus Rift besitzt zwei Displays mit einer Auflösung von 1080 x 1200 Pixel und diese besitzen eine Pixeldichte von 456 PPI.
UploadVR konnte bereits ein Foto des neuen Displays (links im Bild) in Aktion schießen. Auch wenn die Vergleichsbilder sicherlich nicht perfekt sind, zeigen sie deutliche Unterschiede zwischen der aktuellen Generation (538 PPI) und der zukünftigen Generation (1443 PPI). So sind die Texte im linken Bild deutlich schärfer und der Fliegengitter-Look ist deutlich weniger ausgeprägt bzw. kaum erkennbar.
Wann Google und LG solche Displays in einer VR-Brille verbauen werden, ist noch völlig offen und sicherlich wird es kein leichtes Unterfangen sein, solche Displays auch schnell genug mit Daten zu versorgen.
One of the most anticipated features of this week’s Display Week event in LA is a new screen built by Google and LG, designed specifically for VR. At its booth LG is showing off a 4.3-inch OLED panel with a pixel density of 1443 pixels per inch (PPI). We’ve just gone hands-on with it and you can see the results below.
Senior Editor Ian Hamilton is on the ground at the show and took the below images of two displays LG is exhibiting (click to enlarge or open in a new tab for the full size). Inside each lens, which is fitted to a wall and not embedded inside a headset, there’s the same image of a map with text both big and small text. The new OLED display has a resolution of 3840 x 4800 and a refresh rate of 120Hz. It’s being shown next to a ‘conventional’ 538 PPI display for comparison’s sake.
These images were both taken with an iPhone 8 camera.
Left: Google and LG’s new 1,443 PPI display. Right: A ‘conventional 538 PPI display
Even at first glance, the near-tripled pixel density seems to make a huge difference. Smaller text is far clearer on the 1,443 PPI display and the screen-door effect is hugely reduced, too. Obviously taking a picture through a camera can’t compare with seeing the display for yourself, though, so don’t draw any conclusions just yet.
While it’s exciting to see a leap in VR display tech, we don’t actually know when we’ll see this type of screen integrated into headsets. It’s likely to be some time before we can dive into VR with this kind of clarity.
At the recent Google I/O 2018 developer conference held in Mountain View, California, China’s leading mobile internet company Meitu was a key partner and contributor during the Firebase presentation session during the conference. Meitu have collaborated with Google on a number of global advertising campaigns and on the Firebase platform. The two firms have plans to explore further opportunities for ongoing cooperating in the further which will see their relationship grow further.
Meitu has continued to position itself as a world leader in the augmented reality (AR), technology and internet industries by developing new products and partnerships that push the industries forward. The firm launched the popular app PartyNow earlier this year on both iOS and Android devices which took advantage of Google’s ARCore and Apple’s ARKit. The PartyNow app allows user a chance to easily create their own AR special efforts short films, which faster became a popular app when it released. Back in July 2017, Facebook announced that Meitu would be the first partner for their Facebook AR Studio’s Beta cooperation program, with Meitu providing three AR camera effects as part of the deal.
The ongoing cooperation between Meitu and many of the world’s leading technology and internet companies reflects the success of the business globalization efforts. The company has more than 500 million users of their products outside of its home market, supported by operations in Brazil, Hong Kong, India, Indonesia, Japan, Singapore and the United States. Meitu have been able to achieve this global reach thanks to the establishment of local teams to research the markets in which they want to have a presence, and have those team design or update the products to better meet the expectations and preference of local users.
One of the companies more successful apps is the Meitu App which was included in Time Magazine’s list of top 25 recommend apps of the year in 2017, which also features other big named apps such as Super Mario and Instagram. Time Magazine commented: “the Meitu App has been popular in Asia for years and, recently, its huge popularity has expanded to the USA. It may be that you have not heard of the Meitu App, but you have certainly seen the special effects produced by the app on Instagram and Facebook, especially the feature that allows users to create a hand-painted cartoon-style version of their selfie. The feature has helped the Meitu App gain momentum worldwide soon after its launch.”
Meitu founder and CEO Wu Xinhong commented on this adding: “Everyone seeks beauty. As a technology company with a deep understanding of what constitutes beauty, we are particularly well positioned to expand across the world. By partnering with Google, Apple and Facebook, among other leading global tech firms, we are committed to helping more people realize their dreams.”
For more on Meitu in the future, keep reading VRFocus.
Google is allegedly developing a standalone augmented reality headset that aims to offer users a tethereless AR experience, German tech publication WinFuturereports.
WinFuture maintains they’ve obtained documents proving the existence of the Google AR headset project, which internally carries the code name ‘A65’. The headsets is said to rely on processors built by Qualcomm, and much like Microsoft’s HoloLens headset, Google A65 is said to function without a tether to a PC, and pack several camera sensors a microphones, offer vocal input.
According to WinFuture, the project is still at a very early stage of development, as both Qualcomm QSC603 and Qualcomm QSC605 are still currently under consideration as potential chips to drive the AR headset.
Google A65 is reportedly a collaboration between Google and the Taiwanese contract manufacturer Quanta, who built Google devices in the past, including the Pixel C Tablet. WinFuture maintains the developers were busy prototyping the hardware design, and that “there are still several stages of hardware development to go through.”
Image courtesy Google
Google has done extensive work in AR, both through the now retired AR platform Project Tango, and the subsequently released ARCore dev kit, a software developer kit that brings basic AR functions to several flagship Android smartphones.
The company has also implemented what it calls ‘WorldSense’ tracking in its first 6DOF entry into the Daydream platform, the Lenovo Mirage Solo, which launched earlier this month. Google’s WorldSense employs two front-facing camera sensors to place Mirage Solo users in an hypothetically unlimited tracking volume—something a potential Google AR headset would need if it were to be a truly standalone experience.
While there wasn’t a great deal of virtual reality (VR) news at Google I/O last week one announcement came by way of the company’s blog, revealing Tour Creator, a platform for teachers and students to build their own 360-degree tours. But Tour Creator is more than just a portal to help young minds create immersive content, it can also be used by companies to showcase their business to customers and employees.
Google created Tour Creator as way for anyone to tell a story in 360-degrees using either imagery from Google Street View as a base or even their own 360-degree photos. It’s Expeditions initiative allows school children to take immersive field trips anywhere in the world whilst never leaving the classroom, proving so popular that kids wanted to feature their own communities.
For businesses, Tour Creator offers a new opportunity to promote themselves, whether that taking a tour of a hotel prior to booking or viewing an apartment without having to make the journey.
Since its launch some companies have already begun to embrace the platform like real estate company Moinian Group, Spectrum Designs, nonprofit organisation that employs adults with autism and Time Out New York. Spectrum Designs is using Tour Creator to train new staff says Tim Howe, their COO: “An individual with autism can be very sensitive to sights and sounds. With Tour Creator, we can show them exactly what to expect their first day on the job.”
“Tour Creator is super useful for journalists because it creates an experience that is a lot more interactive and immersive than video itself would be,” says Delia Barth, Content Producer at Time Out. “Time Out is all about helping people discover amazing things to do and Tour Creator helps us do just that.”
After creators make their tours they can then be uploaded to Google’s 3D content library Poly. This allows anyone to experience the tour with just a URL link, enabling the tour to be embedded in a website to view on a browser or through a Google Cardboard headset. VRFocus will continue to follow further updates and announcements to Tour Creator, reporting back with the latest news.
Zwar hat Lenovo mit der Mirage Solo eine VR-Brille auf den Markt gebracht, welche autark arbeitet und durch Positional Tracking Bewegungsfreiheit bietet, doch den Controller ignoriert die smarte Brille aktuell noch und daran wird sich laut Google wohl auch nichts ändern.
Keine 6DOF Controller für die Mirage Solo
Die Mirage Solo wird mit einem 3DOF Controller verkauft, was bedeutet, dass der Controller zwar seine Ausrichtung an die Brille übermittelt, aber seine Position im Raum wird nicht erkannt. Dementsprechend sind Spiele mit Bewegungssteuerung nicht wirklich möglich, obwohl die Brille Kameras an der Frontseite besitzt, welche theoretisch auch für die Erkennung eines Controllers verwendet werden könnten. Zudem arbeitet Google auch an einer optischen Erkennung über Computer Vision, jedoch glaubt Clay Bavor, Head of VR & AR bei Google, dass diese Technologie nicht mehr für die Mirage Solo zur Verfügung gestellt werden könne. Laut Bavor werden wir in der Zukunft jedoch nicht nur mit Controllern spielen, sondern wir werden unseren kompletten Körper benutzen. Also auch unsere Arme, Augen und unsere Hände.
An der Entscheidung festzuhalten, einen 3DOF Controller zu verwenden, ist vermutlich die Software nicht unbeteiligt. Aktuell gibt es für Android (Daydream) keine Spiele, welche eine Eingabe mit Bewegungssteuerung erlauben. Würde die Mirage Solo solche Controller jedoch verwenden, wäre sie kein Produkt mehr für Konsumenten, sondern sie wäre nur für Entwickler verügbar.
