Apple carplay как работает – Как мы запустили 2ГИС под CarPlay и до сих пор расхлёбываем / 2ГИС corporate blog / Habr

Как пользоваться CarPlay в машине и какие устройства Apple ее поддерживают

Система CarPlay в автомобилях и телефонах iPhone. 

Телефоны навсегда заменили GPS-навигаторы, музыкальные плееры и много чего еще. Естественно, если вы идете в ногу со временем, сегодня было бы стыдно не использовать смартфон в машине. Все знают о том, что телефоны, работающие на Android, можно подключить к современной машине через систему Android Auto, которая зазеркаливает функции телефона на совместимую автомобильную информационно-развлекательную систему. Но что предлагает компания Apple для владельцев современных смартфонов iPhone и автовладельцев современных автомобилей? Как мы уже не раз писали, для обладателей iPhone есть система CarPlay, которая поможет вам сделать экран в машине зеркалом смартфона. Итак, что же может система CarPlay и что она позволяет сделать?

 

Смотрите также: iPhone 7: Плюсы для автолюбителей

 

Впервые компания  Apple объявила о своей идее использования телефона в автомобиле во время конференции WWDC в 2013 году. Тогда концепция получила название «iOS in the Car» – система предполагала, что некоторые элементы операционки iPhone — iOS могут отображаться и управляться с экрана автомобиля. Премьера же интерфейса состоялась на автосалоне в Женеве в 2014 году. Правда, к тому времени система получила новое название – CarPlay, но функциональность осталась прежней.  

 

Что такое CarPlay?

Чаще всего это называется интерфейсом, который может зазеркалить экран вашего iPhobne, выведя изображение приложений на экран автомобильной информационно-развлекательной системы. В результате этого вы можете пользоваться вашим телефоном, нажимая на сенсорный экран вашего автомобиля. То есть 

вы взаимодействуете с экраном информационно-развлекательной системы, а команды выполняются на вашем iPHone. Благодаря этому, садясь в машину, вам не нужно иметь с собой флешку со сборником вашей любимой музыки. Вся ваша музыкальная коллекция в iPhone будет доступна вам в любом автомобиле, в котором есть система Apple CarPlay. Также эта система позволяет вам пользоваться навигацией в тех машинах, где на борту нет GPS/Глонасс системы. То есть вы включаете стандартное приложение навигатора и пользуетесь спутниковой системой на экране автомобиля. 

 

При использовании CarPlay мультимедийное аудио с iPhone воспроизводится через автомобильные динамики. Как и в стандартных решениях, музыкальные и навигационные команды имеют независимые настраиваемые уровни громкости.

 

Для телефонных разговоров, диктовки текста или для использования Siri в автомобиле используется микрофон громкой связи. Благодаря этому система CarPlay создает впечатление неотъемлемого элемента автомобиля.

 

Как пользоваться CarPlay в машине?

Apple подготовила автомобильный интерфейс iOS, чтобы им можно было управлять тремя способами: касанием, нажатием и кнопками, в том числе на руле. Кроме того, водитель может использовать электронную помощницу Siri. Как правило, голосовую помощницу можно вызвать, нажав на руле соответствующую кнопку. Это очень интересная функция, особенно учитывая, что теперь Siri без проблем работает на русском языке.

 

Смотрите также: 27 новых функций автомобиля, которые доказывают, что мы живем в будущем

 

Напомним, Siri поддерживает следующие языки: английский, арабский, китайский, датский, финский, французский, иврит, испанский, голландский, японский, корейский, немецкий, норвежский, португальский, русский, шведский, тайский, турецкий и итальянский. 

 

Кроме того, водитель может пользоваться телефоном в обычном режиме. Единственное, что нужно помнить – что на экране автомобиля отображается интерфейс приложения, открытого на смартфоне. К сожалению, вы не можете использовать на телефоне одно приложение, а на экране автомобиля пользоваться другим. 

 

Что вы можете сделать с CarPlay?

Функциональность CarPlay довольно скромная. По умолчанию на экране автомобиля при подключении смартфона отображаются значки приложений 

Музыка, Сообщения, Карты (от Apple), Телефон, Подкасты и Аудиокниги (из iBooks). Кроме того,  Apple подготовила специальный виджет Now Playing, который служит универсальным контроллером для воспроизведения мультимедиа. Кстати, система CarPlay позволяет использовать на экране автомобиля выбранные вами приложения из AppStore.

 

Смотрите также: Автомобиль или iPhone: Что происходит с этим миром?

 

Например, к ним относятся такие приложения, как Spotify, Overcast, Whatsapp, Audible, Google Play Music, Tidal и другие, которые позволяют воспроизводить музыку или слушать аудиокниги. Начиная с операционной системы iPhone iOS 12, Apple разрешила использовать на экране автомобиля внешние навигационные приложения, такие как Google Maps и Waze. Напомним, что до iOS 12 в качестве навигатора в машине можно было использовать только карты Apple Maps.

 

 

Так что большинство доступных сегодня приложений для CarPlay представляют собой программы для воспроизведения в машине мультимедиа с iPhone. Исключением являются стандартные функции телефона. Например, водитель, находясь за рулем, может прослушать поступившие сообщения SMS или iMessage и продиктовать свой ответ. Ну и, конечно, стандартное приложение «Телефон» позволяет совершать звонки, выбирая звонящего по голосу или с экрана.

 

В каких автомобилях доступна система CarPlay?

Apple может похвастаться тем, что работает с большинством крупных производителей автомобилей. Поэтому CarPlay доступен в следующих брендах:

 

Некоторые производители на российском рынке не предлагают эту функцию в своих автомобилях. Причем несмотря на то, что она доступна в их машинах на других рынках. 

 

Смотрите также: Инструкция: как включить офлайн режим в Яндекс Навигаторе

 

Кстати, владельцы автомобилей, в которых нет встроенной системы Apple CarPlay, могут использовать стороннее оборудование, поддерживающее этот стандарт. Так, например, многие нештатные автомобильные мультимедийные музыкальные системы совместимы с CarPlay. Например, такие автомагнитолы и мультимедийные системы, как Alpine, Clarion, JVC, Kenwood, Pioneer и Sony, понимают протокол Apple CarPlay.

 

Какие телефоны поддерживают систему Apple CarPlay?

CarPlay работает только с iPhone, оснащенными разъемом Lightning. Вот список поддерживаемых смартфонов:

 

 

Можно ли к системе CarPlay подключить iPad?

Хотя другие устройства Apple, такие как iPad или iPod Touch, работают на базе iOS, они несовместимы с CarPlay. Кроме того, для подключения смартфона к машине необходимо использовать соответствующую версию программного обеспечения. Так, CarPlay не будет работать с iPhone на базе iOS в версии ниже 7.1. Однако большинство совместимых моделей телефонов уже продавались с подходящей системой, так что с подключением даже iPhone 5 не должно быть проблем.

 

Как подключиться?

Apple позволяет использовать CarPlay двумя способами. Наиболее популярным является подключение телефона с помощью кабеля. Это делается просто. Разблокируйте iPhone, а затем подключите кабель к USB-порту автомобиля и устройства. Иногда это будет разъем с обозначением телефона.

 

Интерфейс CarPlay должен появиться на экране автомобиля немедленно. В свою очередь телефон запросит у вас разрешение на его использование, когда устройство заблокировано. Это согласие может быть дано или отменено позже в настройках.

 

Некоторые автомобили предлагают возможность беспроводного использования CarPlay. В таких моделях необходимо удерживать нажатой кнопку голосового набора на руле или перейти в режим подключения нового устройства Bluetooth. Затем на iPhone перейдите в «Настройки», далее в «Основные», «CarPlay» и в раздел «Доступные автомобили». Там выберите автомобиль.

Как мы запустили 2ГИС под CarPlay и до сих пор расхлёбываем / 2ГИС corporate blog / Habr

Привет! Меня зовут Ваня, я пишу мобильное приложение 2ГИС под iOS. Сегодня будет история о том, как наш навигатор появился в CarPlay. Расскажу, как с такой себе документацией и недоделанными инструментами мы создали рабочий продукт и разместили его в AppStore.

Пара слов о CarPlay

Сначала немного матчасти для понимания некоторых аспектов работы CarPlay и причин, по которым мы приняли те или иные решения.

CarPlay — это не ОС внутри другой ОС, как об этом пишут в очень многих статьях. Если грубо, то CarPlay — это протокол для работы с внешним дисплеем экрана головного устройства; звуком из динамиков автомобиля; тач-скринами, тач-панелями, шайбами и другими устройствами ввода.

То есть весь исполняемый код находится непосредственно в основном приложении (даже не в отдельном extension’е!) Это очень круто: чтобы получить новые фичи, не нужно обновлять магнитолу или даже машину, нужно просто обновить iOS.

На WWDC 2018 Keynote нам представили возможность создания навигационных приложений под CarPlay, что нас очень обрадовало. Сразу после презентации мы отправили запрос на разрешение разработки под CarPlay. В запросе необходимо было показать, что наше приложение умеет в навигацию.

Пока мы ждали ответа от Apple, вышла лекция, в которой на примере sample-приложения CountryRoads рассказывали о работе с CarPlay.framework. В лекции не рассказали о подводных камнях и тонкостях при работе с CarPlay, но упомянули, что после подключения к CarPlay-магнитоле приложение будет работать в режиме background.

Первая палка в колёса

Работа приложения в background’е нас разочаровала. На это было две причины:

1. Мы не работаем в background’е. Когда-то оставили это ограничение по техническим причинам и ради энергосбережения.
2. Наша карта написана на OpenGL (да, deprecated, да, не Metal, мы всё это знаем), а OpenGL в background state’е не работает. В лучшем случае вы получите чёрную вьюху, а в худшем — краш.

С работой в background’е ещё можно было справиться, но с картой определённо нужно было что-то решать. Тогда-то и пришла идея сделать её через стандартную MKMapView. Пока вы не начали закидывать нас камнями за идею использовать стандартные карты Apple, объясню: мы собирались использовать MKMapView, но не карты Apple.

Дело в том, что MKMapView умеет в загрузку сторонних тайлов. Тайлы — это специальные прямоугольные контейнеры для текстур. У нас как раз оказался сервачок, который умеет отдавать тайлы. На GitHub есть код с реализацией.

Ответ от Apple

Нам пришёл ответ от Apple, в котором, кроме разрешения на разработку, мы получили ещё и документацию «для избранных», код sample-приложения CountryRoads (его показывали на лекции WWDC) и, самое важное, приватный capability-ключ com.apple.developer.carplay-maps. Этот ключ прописывают в entitlements-файле со значением YES, чтобы система поняла, что вы можете обработать события от CarPlay при запуске вашего приложения.

Не дождавшись спринта с выделенными под разработку сториками, я полез качать Xcode Beta. Первая попытка собрать 2ГИС была провальной. Зато проект sample-приложения CoutryRoads удалось собрать под симулятор.

Перед каждым открытием окна симулятора CarPlay, последний должен был кастомизироваться через такое вот окно:

Для этого нужно было прописать в терминале строчку: defaults write com.apple.iphonesimulator CarPlayExtraOptions -bool YES

По какой-то причине это не сработало — пришлось запускать почти на самом маленьком симуляторе с разрешением 800×480 поинтов и скейлом ×2. В данный момент эта настройка работает и отлично помогает.

Создав свой sample-проект и вооружившись документацией, я начал разбираться, что к чему.
Первое, что я понял: навигационные приложения для CarPlay состоят из слоёв base view и templates.

Base view — это ваша карта. На этом слое должна быть только карта, никаких других вьюх и контролов.

Templates — это почти не кастомизирующийся обязательный набор UI-элементов для отображения маршрутов, манёвров, всяких списочков и так далее.

Разработка беты

Перейдём уже к написанию кода. Первое, что необходимо сделать, — реализовать парочку обязательных методов CPApplicationDelegate в файле ApplicationDelegate.

func application(
   _ application: UIApplication,
   didConnectCarInterfaceController controller: CPInterfaceController,
   to window: CPWindow
) {}

func application(
  _ application: UIApplication,
  didDisconnectCarInterfaceController controller: CPInterfaceController,
  from window: CPWindow
) {}

Давайте рассмотрим сигнатуру:

С UIApplication всё понятно.
CPWindow — наследник UIWindow, окно для внешнего дисплея головного устройства магнитолы.
CPInterfaceController — что-то типа аналога UINavigationController’а, только из CarPlay.framework.

Теперь перейдём непосредственно к реализации метода.

func application(
   _ application: UIApplication,
   didConnectCarInterfaceController controller: CPInterfaceController,
   to window: CPWindow
) {
  let carMapViewController = CarMapViewController(
    interfaceController: controller
  )
  let navigationController = UINavigationController(
    rootViewController: carMapViewController
  )
  window.rootViewController = navigationController
}

В didConnect необходимо написать код, похожий на тот, который мы привыкли видеть в didFinishLaunching. CarMapViewController — это base view (контроллер на самом деле, но ладно), как по документации.

Вот такую картинку в итоге я получил:

Где-то в это время до меня дошло, что в новом Xcode new build system включена по умолчанию и, скорее всего, из-за этого 2ГИС не собирается.

Я открыл Xcode, поставил legacy (а точнее stable, давайте называть вещи своими именами) build system, и моя теория подтвердилась: 2ГИС собрался.

Выставив тот самый capability-ключ, я запустил 2ГИС под CarPlay и не увидел логов о переходе приложения в режим background. Стало ещё непонятнее, ведь инженеры Apple со сцены сказали про background-режим, но, с другой стороны, нам обещали contentView у UIAlertView, а в итоге UIAlertView стал deprecated.

Решив, что так и должно быть, я не стал заморачиваться с MKMapView. Она лишила бы нас оффлайна и заставила заново писать отрисовку маршрутов.

Проблема одной карты

Не успел я обрадоваться новости о том, что в CarPlay будет наша карта, как передо мной встала следующая проблема: из-за технических особенностей карта может быть только одна.
Быстрое решение этой проблемы было, хоть и не очень элегантное.

Обычно в момент использования 2ГИС на CarPlay телефон заблокирован и лежит где-нибудь на полочке. А значит карта в этот момент на телефоне не сильно-то и нужна (не помешает для поиска, конечно). Поэтому мы решили при подсоединении телефона к CarPlay забирать карту из основного приложения и выводить её на экран CarPlay магнитолы. А при отсоединении, соответственно, возвращать обратно в приложение на телефон.

Да, решение такое себе, но оно быстрое, до сих пор работает и не пришлось пинать пару других команд, чтобы склепать MVP.

Контролы на карте

Итак, мы получили нашу карту на экране магнитолы. Теперь необходимо было сделать первые и очевидные для любой карты вещи: контролы зума, текущего местоположения и перемещения карты.

Начнём с зума и текущего местоположения, ведь эти контролы находятся на самой карте и это не обычные UIControl. Как я писал выше, на base view находится только карта.

Для того, что бы поместить эти контролы на карту, пришлось снова лезть в документацию и sample-приложение. Там я вычитал про первый темплейт — CPMapTemplate.

CPMapTemplate — прозрачный темплейт для отображения некоторых контролов на карте и аналога navigationBar’а. Создаётся и выставляется он так:

let mapTemplate = CPMapTemplate()
self.interfaceController.setRootTemplate(mapTemplate, animated: false)

Далее необходимо создать эти контролы и положить их на карту.

let zoomInButton = CPMapButton(…)
let zoomOutButton = CPMapButton(…)
let myLocationButton = CPMapButton(…)

self.mapTemplate.mapButtons = [
  zoomInButton, 
  zoomOutButton, 
  myLocationButton
]

Но массив mapButtons оказался с приколом, ведь сколько в него элементов ни клади, он возьмёт только первые три элемента и отобразит их на экране. Ни ошибок в лог, ни ассертов вы не получите.

Дальше я полез смотреть, как мне заставить двигаться карту, и нашёл в документации вот такое:

Navigation apps are designed to work with a variety of car input devices, and CarPlay does not support direct user interaction in the base view (apps do not directly receive tap or drag events). 

Странно, подумал я, и полез смотреть, как это сделано в sample-приложении CountryRoads. Ответ — через вот такой интерфейс:

Не очень удобно, но по-другому никак, документация же не будет врать, верно?

Поскольку место для контролов на карте у нас закончилось, необходимо было сделать кнопку для перевода карты в режим «таскания» в этом аналоге navigationBar’а.

let panButton = CPBarButton(…)
self.mapTemplate.leadingNavigationBarButtons = [panButton]
self.mapTemplate.trailingNavigationBarButtons = []

Но вот массивы leadingNavigationBarButtons и trailingNavigationBarButtons тоже оказались не без прикола: сколько элементов в них ни пихай, они возьмут только первые два. Тоже без ошибок в логе и ассертов.

А для активации и деактивации режима перетаскивания карты необходимо написать:

self.mapTemplate.showPanningInterface(animated: true)
self.mapTemplate.dismissPanningInterface(animated: true)

Построение и отображение маршрутов на карте

Далее я приступил к тому, чтобы наше уже существующее API переиспользовать для построения маршрутов.

Просто для демки и понимания, что и как делать, решил взять две точки и строить между ними маршрут. Точкой А было местоположение пользователя, а точкой Б — наш главный офис в Новосибирске.

Код

let choice0 = CPRouteChoice(
  summaryVariants: ["46 км"],
  additionalInformationVariants: ["с учетом пробок"],
  selectionSummaryVariants: ["1 час 7 мин"]
)
let choice1 = CPRouteChoice(
   summaryVariants: ["46 км"],
   additionalInformationVariants: ["с учетом пробок"],
   selectionSummaryVariants: [“1 час 11 мин"]
)

let startItem = MKMapItem(…)
let endItem = MKMapItem(…)
endItem.name = "Толмачёво, международный аэропорт”

let trip = CPTrip(
   origin: startItem,
   destination: endItem,
   routeChoices: [choice0, choice1]
)

let tripPreviewTextConfiguration = CPTripPreviewTextConfiguration(
   startButtonTitle: "В путь”,
   additionalRoutesButtonTitle: “Ещё”,
   overviewButtonTitle: "Назад"
)

self.mapTemplate.showTripPreviews(
  [trip],
  textConfiguration: tripPreviewTextConfiguration
)

На экране мы получили контрол с описанием маршрута:

Режим навигации

Маршруты — это хорошо, но главная фишка навигатора всё же в навигации. Чтобы она появилась, необходимо написать следующее:

func mapTemplate(
  _ mapTemplate: CPMapTemplate,
  startedTrip trip: CPTrip,
  using routeChoice: CPRouteChoice
) {
   self.navigationSession = 
       self.mapTemplate.startNavigationSession(for: trip)
}

CPNavigationSession — класс, с помощью которого можно отображать некоторые UI-элементы, необходимые только в режиме навигации.

Чтобы отобразить манёвр, необходимо:

let maneuver = CPManeuver()
maneuver.symbolSet = CPImageSet(
  lightContentImage: icon, 
  darkContentImage: darkIcon
)
maneuver.instructionVariants = ["Ул. Кутателадзе"]
maneuver.initialTravelEstimates = CPTravelEstimates(…)

self.navigationSession?.upcomingManeuvers = [maneuver]

После чего на экране магнитолы мы получим вот это:

Чтобы обновлять метраж до манёвра, необходимо:

let estimates = CPTravelEstimates(…)
self.navigationSession?.updateEstimates(estimates, for: maneuver)

It just works!

Когда основная функциональность для навигатора был готова, я решил показать эту поделку на внутренней презентации. Презентация удалась: все загорелись идеей доделать, потестировать и запустить навигатор как можно скорее.

Первым делом мы заказали реальное головное устройство с поддержкой CarPlay. И тут, как говорится, пошла жара.

Provision Profiles

Из-за добавления нового capability-ключа необходимо перегенерировать профили. В обычной разработке мы не думаем об этом, ведь Xcode сделает всё сам. Но не в случае с приватным ключом.

Code Signing Error: Automatic signing is unable to resolve an issue with the "v4ios" target's entitlements. Automatic signing can't add the com.apple.developer.carplay-maps entitlement to your provisioning profile. Switch to manual signing and resolve the issue by downloading a matching provisioning profile from the developer website.

Это так же сломало нам CI, так как для локальной дистрибуции версий приложения мы используем enterprise-аккаунт, в который мы не запрашивали разрешение на разработку приложения под CarPlay. Но это уже совсем другая история

Debugging

Подключиться к CarPlay можно через Bluetooth или Lightning. Практика показывает, что второй способ гораздо популярнее. Наша магнитола в Bluetooth не умела, поэтому во время разработки пришлось пользоваться Wi-Fi дебагом. Если вы пробовали его на проектах сложнее, чем hello world, то вы знаете, какой это ад.

А для тех, кто не пробовал, рассказываю:

Я собирал приложение по проводу на телефон, а только потом, подключив телефон к CarPlay, через Wi-Fi, заливал на телефон и запускал по несколько минут.
Копирование приложения на телефон было около 3 минут, запуск приложения ещё около минуты и только потом после запуска остановка на брейкпоинтах была только секунд через 15.

И тут мне стало очень интересно, почему Apple не сделала никакой DevKit (чтобы Apple-way, it just works и вот это всё). Без него собирать тестовый стенд было не очень удобно. До сих пор раз в пару недель что-нибудь отваливается — приходится по фоткам вспоминать, что куда втыкать. Хорошо, что админ при сборке этого стенда рассказал, что и зачем.

The best framework we ever made

В конце концов, когда всё собралось на реальное устройство, стало понятно, что фиче «2ГИС под CarPlay» точно быть. Настало время делать по красоте.

Проблемы с вьюпортом

Необходимо было настроить вьюпорт карты, чтобы рисовать маршруты в области без лишних контролов, а не просто посередине. Короче говоря, чтобы это выглядело не так:

А так:

Я рассчитывал, что получу какой-нибудь layoutGuide с текущей видимой областью. Чтобы он учитывал и navigationBar, и вьюшку с маршрутом, и контролы на карте. На деле я не получил ничего. До сих пор непонятно, как настраивать вьюпорт, поэтому у нас в коде есть хардкод типа:

let routeControlsWidth = self.view.frame.width * 0.48 
let zoomControlWidth = self.view.frame.width * 0.15

Построение проезда не только между двумя точками

В первый релиз мы решили взять наш рубрикатор, сделанный через CPGridTemplate:

Избранное и Дом/Работа через CPListTemplate.

И клавиатурный поиск через CPSearchTemplate:

Код я показывать про темплейты не буду, так как он простой и про него хорошо написана документация (хоть про что-то).

Однако стоит упомянуть, какие проблемы были обнаружены при работе с ними.

CPInterfaceController может в навигацию, похожую на UIKit. т. е.

self.interfaceController.pushTemplate(listTemplate, animated: true)
self.interfaceController.presentTemplate(alertTemplate, animated: true)

Но если вы попытаетесь запушить, например CPAlertTemplate, то получите ассерт в логах, что CPAlertTemplate может быть только модально представлен.

Непонятно, почему Apple не спрятали логику транзишенов под капотом, не сделав тогда интерфейс типа:

self.interfaceController.showTemplate(listTemplate, animated: true)

Это также сломало возможность пользоваться наследниками CPTemplate, словно контроллерами в UIKit.

При попытке, например, положить в стек темплейтов ваш наследник, вы получите вот это:

Terminating app due to uncaught exception 'NSInvalidArgumentException', reason: 'Unsupported object <YourAwesomeGridTemplate: 0x60000060dce0> <identifier: 6CAC7E3B-FE70-43FC-A8B1-8FC39334A61D, userInfo: (null)> passed to pushTemplate:animated:. Allowed classes: {(
    CPListTemplate,
    CPGridTemplate,
    CPSearchTemplate,
    CPMapTemplate
)}’

Тестирование и баги

Тестированием занимался artemenko-a-a. Один из первых багов, который он нашёл, мы до сих пор не можем починить.

Дело в том, что при отсоединении телефона от CarPlay-магнитолы спорадически нас прибивает Watchdog — без объяснении причины. Даже syslogs открывали, ничего не понятно. Так что если есть идея, как починить или понять причину, то велкам в комменты.

Следующий баг был в этом же месте, но с особенным поведением. Я писал выше, что метод didDisconnect у CPApplicationDelegate вызывается в момент отсоединения телефона от CarPlay. И в этом методе мы возвращаем карту с экрана магнитолы обратно в основное приложение. Представьте себе, сколько бы мы словили проблем, если бы этот метод не вызывался хотя бы раз из пяти.

Стало понятно, что это проблема iOS, а не конкретно нашего приложения, так как вся система считала, что она подключена к CarPlay.

Я даже зарепортил это как radar (как и все остальные баги). Меня попросили скинуть логи с таким-то профилем, но я не мог ответить поддержке в течение некоторого времени, поэтому они закрыли radar.

Раз Apple делать ничего не планировала, проблему пришлось обходить самостоятельно, так как воспроизводилась она достаточно часто.

И тут я вспомнил, что львиная доля подключений к CarPlay идёт через Lightning. Это значит, что телефон в момент подключения заряжается, а в момент отключения заряжаться перестаёт. А если так, то можно подписаться на состояние батареи и точно узнать, когда телефон перестал заряжаться и отключился от CarPlay.

Схема хиленькая, но выбора у нас не было. Мы пошли этим путём, и всё сработало!

К счастью, этот костыль из кода давно уже удалён: разработчики Apple починили всё в одном из релизов iOS.

История двух реджектов

Первый реджект был связан с метадатой. В тексте реджекта говорилось, что у нас в описании (не release notes) не сказано о том, что мы поддерживаем CarPlay. Как вы можете догадаться, ни в review guideline’ах, ни у того же Google Maps такого не было. Мы не стали спорить (потому что это обычно дольше, чем править метадату), скопировали строчку из Release Notes в Description и стали ждали нового ревью.

Второй реджект случился из-за списка городов. У 2ГИСа есть очень крутая фича — полный офлайн-режим работы. Эта фича стрельнула нам в ногу.

При подключении приложения без установленного города к CarPlay, мы не показываем карту, потому что показывать нечего. За это нас и зареджектили. Решение было простым: алерт без кнопок, в котором написано, что нужно скачать город.

То, о чём нельзя говорить

Перемещение карты жестами

Примерно в это же время вышел навигатор под CarPlay от Google Maps — и там можно было передвигать карту жестами по экрану. Приватные API, подумал я, это очевидно! Ребята из Google просто пришли из соседнего здания и сказали, что им надо. Ведь документация гласит:

Navigation apps are designed to work with a variety of car input devices, and CarPlay does not support direct user interaction in the base view (apps do not directly receive tap or drag events). 

Однако я всё-таки решил убедиться и полез гуглить, хоть это и было почти бессмысленно, ведь никаких технических статей про CarPlay Navigation Apps не было. Однако я умудрился найти что-то полезное и, ВНЕЗАПНО, на сайте Apple.

В гайдлайнах я нашел видео, которое говорит, что документация нагло врёт. На видео видно, как карту всё-таки можно перетаскивать жестами. Я понял, что ничего не понял, и единственное, что мне оставалось, — открыть CarPlay.framework и пересмотреть все .h файлы.

И о чудо! Я нахожу в CPMapTemplate’е его делегат CPMapTemplateDelegate, в котором есть 3 метода, которые как будто кричат о том, что если их реализовать, то можно будет получить управление жестами картой.

3 метода

/*Called when a pan gesture begins. May not be called when connected to some CarPlay systems.
/
optional public func mapTemplateDidBeginPanGesture(_ mapTemplate: CPMapTemplate)

/*Called when a pan gesture changes. May not be called when connected to some CarPlay systems.
/
optional public func mapTemplate(_ mapTemplate: CPMapTemplate, didUpdatePanGestureWithTranslation translation: CGPoint, velocity: CGPoint)

/*Called when a pan gesture ends. May not be called when connected to some CarPlay systems.
/
optional public func mapTemplate(_ mapTemplate: CPMapTemplate, didEndPanGestureWithVelocity velocity: CGPoint
)

Я реализовал их и запустил приложение на симуляторе — ничего не сработало. Не успев расстроиться, я понял, что симулятор может быть такого же качества, как и документация, и собрал на девайс. Всё завелось, счастью не было предела!

Забавный факт: CarPlay-магнитоле необходима четверть экрана, чтобы понять, что начался pan-жест. Хочу заметить, что UIPanGestureRecognizer’у нужно всего 10 поинтов.

Неодинаковость UI на разных магнитолах

Нам в поддержку поступило обращение: у пользователя в поиске вылезает всего один саджест, хотя могло бы быть и больше. Странно, подумал я, ведь на всех экранах помещается всего одна строка. Запросили скриншот:

И это совсем отличается от UI CPSearchTemplate, который я показывал выше. И это нужно учитывать при разработке, хоть и никак нельзя понять, сколько ячеек в табличке внизу может вместиться в экран.

Контрол ограничения скорости

Мы посмотрели на статистику и поняли, что навигатором для CarPlay пользуются и надо довести его хотя бы до уровня навигатора в основном приложении. В первую очередь решили добавить контрол ограничения скорости. Без проблем, конечно, не обошлось.

Вопрос номер один: где размещать?

Пошарив снова по .h файлам в CPWindow, я нашел любопытный layoutGuide:
var mapButtonSafeAreaLayoutGuide: UILayoutGuide

И это оказалось тем, что нужно. Наш контрол отлично туда вписался:

Вопрос номер два: это, вообще, законно?

Дело в том, что технически контрол находится на base view. А base view по документации не может содержать в себе ничего, кроме карты:

The base view is where the map is drawn. The base view must be used exclusively to draw a map, and may not be used to display other UI elements. Instead, navigation apps overlay UI elements such as the navigation bar and map buttons using the provided templates. 

Но ревьюверы пропустили нас в AppStore, а значит контролы, которые касаются навигации, встраивать всё-таки можно.

Голосовой поиск

По-хорошему, эту фичу нужно было сделать в первую очередь, но у нас накопилось несколько задач из техдолга, которые мешали реализовать голосовой поиск для CarPlay. И эта задача оказалась не такой простой, как казалось.

Проблема первая: анимации. Дело в том, что в CPVoiceControlTemplate нет возможности сделать стандартные анимации. Анимацию для распознавания речи и поиска пришлось собирать покадрово из картинок и указывать, сколько они идут по времени.

for i in 1...12 {
   if let image = UIImage(named: "carplay_searching_\(i)") {
      images.append(image)
   }
}

let image = UIImage.animatedImage(with: images, duration: 0.96)

Выглядит, как можете догадаться, не очень, но и размер приложения раздувать не хочется.

Проблема вторая: доступы. Алерты на доступ к микрофону и распознаванию речи появляются на дисплее телефона. Пришлось писать на дисплее магнитолы, что пользователю необходимо взять телефон в руки, дать разрешение и только потом пользоваться навигатором на магнитоле. Очень удобно!

Праворульные автомобили.

Нам прислали скриншот, в котором UI всего приложения был перевёрнут!

И, естественно, вьюпорт карты оставался таким, как мы его захардкодили, ведь никто не ожидал, что есть отдельная настройка для праворульных автомобилей. Как «правильно» это обойти, я не нашёл, но заметил, что, поскольку наш контрол ограничения скорости лежит в layoutGuide’е для контролов карты, он переместился в левую сторону.

Ультрафикс не заставил себя ждать. Сделали грубо, но это работает.

let isLeftWheelCar = self.speedControlViewController.view.frame.origin.x > self.view.frame.size.width / 2.0

Очень надеюсь, что есть правильное решение, и я просто не дочитал.

На этом у меня всё. Если вдруг соберётесь делать свой навигатор под CarPlay, учтите, что документация и фреймворк несовершенны. Платформа абсолютно новая, никто ничего не знает, а Apple делиться знаниями не торопятся.

Что такое Apple CarPlay и Google Android Auto? » Автомобили и тюнинг

Учитывая постоянные обновления высокотехнологичных приложений, нет лучшего момента для их изучения, чем сегодняшний день. То же самое касается и автомобильного оборудования: программное обеспечение давно уже занимает не самое последнее место в современном автопроме. Самые последние обновки в арсенале автомобильного софта 2014 года, а соответственно и темы нашего сегодняшнего обзора — это Google Android Auto и Apple Car Play.

Apple CarPlay

CarPlay – молодая разработка всемирно известной компании Apple, концепт которой впервые удалось протестировать на международной презентации WWDC летом прошлого года. Только на тот момент система называлась по-другому – iOS In The Car. Позже, уже на открытой выставке в 2014 году она приобрела теперешнее своё название и была представлена широкой аудитории.

Как и всё, что выходит из-под конвейера Apple, CarPlay – максимально ненавязчивая, простая и удобная в обращении система. Использовать CarPlay – почти то же самое, что использовать iPhone. Отличие лишь в том, что доступ к инструментам и функциям телефона находится не у вас в руках, а на дисплее вашего автомобиля. Фактически, CarPlay превращает машину в огромный iPhone. Вы можете всё так же выполнять звонки, выбирать маршрут GPS, отправлять текстовые сообщения и слушать вашу любимую музыку, однако теперь делать это за рулём стало намного легче.

При звонке по телефону звук воспроизводится через аудиосистему автомобиля. В системе абсолютно всё от написания SMS-сообщений до выбора композиции в iTunes может контролироваться человеческим голосом. Что касается системы GPS (в CarPlay приложение называется просто «Карты»), она также слушает голосовые команды, прокладывая и комментируя кратчайший маршрут к нужному месту.

CarPlay использует Siri – вездесущий цифровой ассистент от Apple. Он работает от контроллеров вашего автомобиля: кнопок, ручек, циферблатов и сенсорных дисплеев. Все приложения системы были отформатированы специально для управления системой за рулём, чтобы водитель мог выполнять все операции фактически не отрывая глаз от дорожной полосы.

Если вы уже знакомы с продукцией iOS и Apple, вы быстро интуитивно поймёте, как работает CarPlay. Чтобы активировать Siri, нужно просто нажать на кнопку на рулевом колесе. Если у вас сенсорный экран, выберите нужное вам приложение. То же самое и с автомобилями, где управление происходит с помощью кнопок: просто нажмите на одну из них, чтобы привести систему в действие.

Нет сомнений, что система обретёт своих поклонников, когда её станут устанавливать на большее разнообразие марок авто. В первую очередь водителям понравится, как легко обращаться с Apple Maps на панельном дисплее. Приложение предоставляет как стандартные функции, типа предупреждения поворотов, расчёта пробега, так и свои особенности. Например, система предупреждает о местах, где вы, возможно, хотите побывать, сверяя адреса в списке ваших контактов, текстовые сообщения и календарь.

Специально для меломанов, тяготеющих к приложениям для работы с музыкой, для CarPlay был адаптирован ряд таких программ, как iHeartRadio, Spotify, Stitcher и Beats Music.

В 2014 году CarPlay уже показывает свои возможности на новых автомобилях марок Ferrari, Volvo, Honda, Hyundai и Mercedes-Benz. Само собой, в ближайшем будущем система также будет доступна на дюжине других марок. Первыми, кто стоит на очереди к адаптации CarPlay в свои модели будут Toyota, Peugeot, Nissan, BMW, Ford, Opel, Land Rover, Mitsubishi, Nissan, Citroën, KIA, Subaru, Suzuki и Chevrolet.

Кроме того, в скором времени технологический гигант Apple в сотрудничестве с Pioneer и Alpine Electronics сделает возможным послепроизводственную установку CarPlay на любой автомобиль.

Google Android Auto

В конце июня Google объявили о выходе Android Auto – аналоге системы CarPlay для OS Android. Новый «технологический выпад» Google представляет собой точно такую же систему, но разработанную специально для операционной системы Android версий L и более поздних OS. После того, как Google выкупили Android, к новинкам ещё одного гиганта информационной эпохи присматриваются точно так же, как и к Apple.

Всё, что нужно водителю для работы с этой системой, созданной для беспрепятственного выполнения операций, – подключить свой телефон на базе Android к панели автомобиля. Вуаля! Все ваши любимые приложения, важные контакты и сообщения теперь прямо перед вами на дисплее, готовы к работе.

В отличие от CarPlay, детище Google Android Auto поддерживает большее количество приложений. Начиная перечисление с самого важного, стоит указать карты Google Maps, выполняющие роль навигатора с бесплатным голосовым управлением, текущей информацией о пробках, с подбором наилучшего маршрута и с голосовыми предупреждениями. Само собой, Android Auto поддерживает множество приложений для прослушивания музыки на любой вкус: своё «родное» Google Play Music, Pandora Internet Radio, Songza и другие популярные приложения для меломанов.

Как и в CarPlay, основной посыл в создании системы Android Auto направлен на облегчение работы водителя за рулём, на сокращение сковывающих свободу управления автомобилем действий, а, соответственно, и на безопасность на дороге. Поэтому Android Auto имеет максимально простой и интуитивный интерфейс, контроллеры, интегрированные в рулевое колесо и, само собой, систему динамического распознавания голоса.

Android Auto, в отличие от уже вышедшего CarPlay, ещё ждёт своего выхода в ближайшем будущем. По информации от компании Google, 25 новых моделей разных брендов будут оснащены системой совсем скоро. Первые автомобили с интерфейсом от Android будут доступны в продаже к концу текущего года. По последней информации, первыми использующими Android Auto в своих новых моделях будут бренды Subaru, Volvo, Audi, Chrysler, Dodge и Chevrolet.

Что такое Apple CarPlay?

IOS в вашем автомобиле.

 

Apple собирается выпустить свою автомобильную информационно-развлекательную систему, что позволит полностью интегрировать электронные гаджеты продукции компании с автомобилем. Основной упор делается на интеграцию со смартфонами iPhone.

 

По планам компании Apple фирменная система CarPlay начнет устанавливаться на новые автомобили с конца текущего года. По всей видимости, данная система перевернет представление о информационно-развлекательных системах, которые мы привыкли видеть в новых автомашинах. Как это работает? Все предельно просто. Вы, слушая свою музыку на смартфоне, садитесь в машину, которая автоматически подключается к Вашему iPhone, чтобы Вы могли дальше слушать свою любимую музыку с помощью аудио системы автомобиля.

 

Также на экране автомобиля появляются все Ваши последние контакты, которые находятся в памяти телефона. Apple хочет сделать процесс автоматического подключения к телефону незаметным, чтобы интеграция не доставляла водителю неудобства.

 

Управление и подключение

 

CarPlay использует те же элементы управления, к которым мы привыкли. Для управления системой Вы можете использовать идеальное голосовое управление, традиционные кнопки и сенсорный экран. Продуманная навигация и качественная работа системы проста в использовании и не требует обучения.

На экране автомашины, точно такое же меню и элементы управления, как в Вашем смартфоне. Вам не надо будет привыкать к навигации, так как она полностью идентичная iPhone. 

 

Информационно-развлекательная система CarPlay подключается к телефону с помощью кабеля Apple Lightning, а не с помощью Bluetooth. Подключение по кабелю позволяет передавать между смартфоном и автомобилем больше данных без потери качества соединения, что позволит мгновенно передавать Ваши действия на экране машины на телефон.

 

Внешний вид

 

Важно понимать, что CarPlay, связывающая Ваш телефон и автомобиль, является частью автомобильной информационно-развлекательной системы, поэтому если у Вас отсутствует телефон iPhone, система может работать самостоятельно.

Когда Вы включаете CarPlay, на экране появляются иконки сеткой 4х2. Приложения можно включить, как с помощью кнопок, которые расположены вокруг, так и с помощью сенсорного экрана. В том числе Вы можете запустить приложение Siri управлять системой с помощью голосовых команд.

 

После запуска системы Вы увидите в нижнем правом углу знакомую кнопку «Home» (Домой), которая встречается на смартфонах и планшетах. При нажатии на эту кнопку, Вы выйдите из приложения, попав на главную страницу информационно-развлекательной системы. Все точно также как на телефоне.

 

Перейдя на экран Музыка, Вы увидите плейлисты из своего телефона, а также сможете использовать ITunes радио, используя интернет подключение своего электронного гаджета.

Как только Вы начинаете слушать музыку, на экране автомашины, в фоновом режиме увидите изображение обложки песни или альбома исполнителя. Также на этом же экране, Вы увидите удобные значки для управления мелодиями.

Значки прорисованы высококлассно и имеют нормальный размер, для удобства нажатия пальцами на экране, что не будет отвлекать водителя от движения.

 

Интерфейс карты Apple в CarPlay подчеркивает важность интеграции смартфона с автомобилем. Пользуясь навигацией на экране автомашины, Вы не пропустите смс или электронное сообщение и сможете прочитать его, не отвлекаясь от дороги и маршрута на карте. Также для прочтения почты Вы можете использовать удобное голосовое управление. 

 

Для более расширенной интеграции с CarPlay, будут доступны дополнительные приложения: iHeartRadio, Spotify, Pandora, Stitcher, Beats Music. Эти приложения будут также работать на экране автомобиля, и управляться всеми доступными способами.

 

Дата запуска

 

Несколько крупных автопроизводителей планируют оснастить свои новые автомобили 2015 года этими информационно-развлекательными системами. К примеру, новинок с этой системой уже к концу года стоит ждать от  Mercedes, Volvo, Ferrari и Honda. Но это еще не все. Компания Apple договорилась с компанией Pioneer выпускать специальные мониторы со встроенным программным обеспечением CarPlay. Они могут быть установлены в большинство автомобилей, которые не имеет подобную систему.

 

Только для iPhone

CarPlay первое время пока будет работать только с iPhone 5 (а в конце года и с новыми iPhone 6). То есть тем, у кого старый смартфон Apple не повезло. Интересно будет ли компания поощрять и делать различные скидки при покупки нового телефона, если покупатель собирается пользоваться автомобильной системой CarPlay?

 

Скорее всего, нет. Все дело в том, что CarPlay на рынке не уникальна. Есть аналог MirrorLink, которая работает с несколькими марками телефонов, воспроизводя на экране автомашины, данные со смартфона.

Но все-таки разница между двумя системами огромная. Разная технология и совершенно иное позиционирование. Также как и качество. У Apple, как всегда быстрота работы и надежность на высоте.

 

Siri в автомобиле

 

Когда Apple запустила Siri с пятой прошивкой в 2011 году, она впервые представила встроенный помощник в Ваш телефон, который откликается на Ваш голос и готов понимать Вашу речь и команды. Казалось бы, это идеальное решение не только для пользователей телефоном, но и удобная вещь для водителей, которые могут, не отвлекаясь от дороги, контролировать свой телефон с помощью голоса.

Но на самом деле это было не так. Для водителей использовать Siri было не удобно поскольку при использовании голоса Вам необходимо смотреть на экран, чтобы при необходимости нажать необходимую дополнительную команду.

 

Но в новой системе CarPlay используется технология «Siri Eye-Free mode», которая разработана для отдельных новых автомобилей, чтобы водитель смог пользоваться Siri не отвлекаясь от дороги. CarPlay не только добавляет визуальные элементы к этому программному обеспечению, но и также интегрирует физические элементы управления, используя все те же кнопки управления, к которым мы уже привыкли в iPhone. 

 

Стоит отметить, что CarPlay это не концепция, а реальный продукт, который готов появиться на новых автомобилях. Даже если информационно-развлекательная система CarPlay не получит мировое признание и не станет сверхпопулярным, то она тем не менее сможет послужить стимулом для более быстрого развития информационно-развлекательных систем в автомобилях, что позволит улучшить существующие системы кардинальным образом.