Русские Блоги
Используйте игровой движок Android Angle для разработки интерфейса отображения китайских иероглифов
Angle не поддерживает отображение китайских символов. Включенный AngleFont не имеет проблем с поддержкой текста E. AngleFont загружает шрифты, изменяя символы в растровые изображения, подготавливая текстуры. Для библиотеки китайских символов этот процесс займет много времени, все они загружены и занимают много памяти, если она частично загружена и кэш шрифтов обновляется в соответствии с частотой использования, алгоритм слишком хлопотный.
Я использую глупый метод, сначала использую Android Canvas для рисования китайских символов на изображении в памяти, а затем генерирую AngleSprite (включая поддержку связанных с AngleSpriteLayout и AngleSpriteLayout Texture) на основе изображения. Ниже приведен класс, который преобразует китайские символы в растровое изображение, поддерживает однострочное рисование текста и может быть опущен при необходимости.
Вышеописанной обработки недостаточно, генерируется растровое изображение, и его необходимо преобразовать в текстуру.
AngleTextureEngine в библиотеке Angle может загружать только текстуры из Resouce. На первом этапе я изменил класс AngleTextureEngine и добавил следующий метод для генерации объектов текстуры из существующего растрового изображения.
Второй шаг заключается в изменении класса AngleSpriteLayout для поддержки создания текстур из растрового изображения. Добавьте следующие два метода (без указания cropWidth и cropHeight, а только с указанием ширины и высоты размера текстуры).
Функция doInit, вызываемая двумя вышеупомянутыми методами, перегружается со ссылкой на исходную функцию doInit класса AngleSpriteLayout.
Третий шаг — реализовать класс текстуры AngleBitmapTexture. код шоу, как показано ниже:
Что ж, подготовительная работа завершена, посмотрим, как ее использовать. Это на самом деле очень просто, например:
Хорошо, пока китайские символы могут отображаться нормально, но я не знаю, какова производительность. В приведенном выше коде я добавил некоторый тестовый код, и время создания не слишком много. На моем устройстве я создаю 30 строковых рисунков, около 150 миллисекунд.
Кажется, что сначала нужно проанализировать структуру движка Angle, но кодов и классов не так уж и много. Проще разобраться. Чтение кода не займет слишком много времени. Я заполню его, когда у меня будет время. Это также может быть одной из причин, по которой этот движок не задокументирован.Автор считает, что код может объяснить большинство вещей, которые не нужны.
Операционная система Telegram: директор по продукту Futurico о том, как должны выглядеть полноценные чат-боты Статьи редакции
Директор по продукту Futurico (развивает проекты Dirty и «Лепрозорий») Денис Ширяев опубликовал в своём блоге материал, в котором порассуждал, как будут выглядеть чат-боты в будущем, и предложил концепцию операционной системы, построенной на разговорном взаимодействии. Редакция vc.ru публикует материал с разрешения автора.
Эта статья будет интересна тем, кто увлекается продуктологией или работает в этой сфере в ИТ, и тем, кто задавал себе вопрос «Как я буду запускать приложения через пару лет?» или «Что вообще такое чат-боты сейчас и потом?». Здесь не будет красот UI — скорее размышления на тему будущего UX. А ещё речь пойдет только о мобильных операционных системах — так как эта основная зона моих интересов и экспертизы. Так что усаживайтесь поудобнее — поехали, а я постараюсь не быть занудой.
Боты не огонь
Примерно так я бы охарактеризовал нынешнее положение дел в индустрии чат-ботов. Часть ботов никогда не поймут, что вы от них хотите, другая часть ляжет в тот момент, когда вы решите послать запрос, третью часть еще нужно найти — причём нужно знать, как искать, читать какие-то отзывы и обзоры. И всё это на фоне отсутствия вменяемой монетизации (кроме b2b-разработки или подписки) и таргетированной рекламы.
Случайный бот предлагает увеличивать инвестиции по 3% в день, вау, повезло
Ещё один бот даст мне свои функции, но только после подписки на канал — механика интересная, но ведь я ничего не понимаю
Добавьте сюда ещё и то, что порог входа в индустрию разработки чат-ботов ниже обычного. То есть как ниже — он ниже требований, которыми необходимо обладать для создания нативных приложений под iOS, Android или Windows Phone — ещё до начала разработки в каждой из этой экосистем есть тонны материалов об «идее» платформы, о том, почему ваше приложение могут не пропустить, о лучших UX/UI-решениях и так далее
С чат-ботами другая история — туда пускают почти всех и дают вам возможность писать на том языке, на котором вы привыкли. В итоге получается что-то очень модное, малофункциональное, неудобное, но «маркетинговым» шумом и забивающее реальные перспективы.
Есть две хорошие статьи на тему того, почему чат-боты, по мнению авторов, не взлетят в текущем виде — одна на русском, другая на английском. Если коротко, то обе утверждают, что чат-боты — это дань моде. И мне тоже лень расписывать, что понимать суть фраз в нормальном виде (NLP) мы пока всё ещё не можем — я думаю, это всем очевидно.
К примеру, заказать пиццу через бота в голову пока не приходит, так как количество полей, которые необходимо заполнить, довольно большое, а никаких интеграций пока с сервисами, где эти данные уже вбиты, нет. Другое дело приложение — скачал, выбрал пиццу, с одной кнопки прописал геопозицию, с другой — телефон, и сиди ешь свою салями уже через 30 минут.
Справедливости ради, повторный заказ сделать через чат-бота можно уже быстрее, так как данные-то заполнены — осталось только найти его в списке контактов, но найти что-то в этом огромном списке чатов — та ещё задача.
Лаунчер смерти
У приложений в iOS и Android и чат-ботов помимо схожей функциональности есть ещё одно слабое место — то, как их запускают. Иными словами, лаунчер.
Семь экранов приложений, с которыми я пытаюсь жить
Насколько я знаю, Apple отказалась от моделей смартфонов с объёмом памяти в 16ГБ, а в Android уже годы существует поддержка microSD. Что это означает для конечного потребителя? Очень много приложений. Так много, что многие из них останутся на годы в памяти телефона, будучи запущенными один или два раза. Не поможет тут ни пуш от создателя программы в попытке вернуть пользователя (пушей уже так много, что паттерн по умолчанию — отключать их), ни яркая иконка, ни виджет или стикер, который вы добавите в приложение.
Братская могила приложений — это то, куда сваливается всё и у всех — за исключением каких-то 10−20 приложений, которые вы используете как основные сценарии в повседневной жизни. Возможно ли вернуться из этой точки невозврата? Наверное, да, и есть методы — но тут мы это не обсудим. Проблема большого количества приложений настолько актуальна, что её решают сами производители ОС для устройств: кто-то более успешно — как Windows Phone со своей плиткой в зависимости от актуальности данных в приложении, кто-то менее — как в Android и iOS.
Но железный факт — визуально найти на телефоне что-то глазами после полугода использования, а ещё и с папками, виджетами или живыми обоями — это просто непосильная задача.
Окей Google, что же я хотел?
Все операционные системы пока сошлись в одном — эти 10−20 приложений, которые входят в зону внимания пользователя, и те, которые вы помните — очень удобно ищутся быстрым поиском. Все производители дали возможность свайпа для поиска с одного жеста — и это действительно удобно, если пользователь знает, что он ищет.
Некоторые производители пошли дальше — помимо результатов поиска они пытаются подсвечивать релевантные данные по запросу, но в моей практике там часто находится мусор от разработчиков, которые очень хотели бы попасть в выдачу хоть как-нибудь по запросу, а потому полезность функции спорная.
Если я не ошибаюсь, iOS с девятой версии пытается посоветовать вам, какое бы приложение запустить — прямо рядом с быстрым поиском. Скорее всего, так же делает и Android — это хорошая попытка и движение в сторону решения проблемы загруженности устройства для пользователя, но работает эта функция в реалиях технологических возможностей. Это значит, что работает она так себе, и алгоритм цепляется за паттерны поведения, которыми вы руководствуетесь в данный момент, взяв телефон. Никакой фантастики, в общем, будете каждый день в 8:00 начинать утро с Instagram — в рекомендациях каждое утро будет Instagram.
Про Telegram тут даже добавить особо нечего, там единственный способ что-то найти — это поиск, особенно когда вы подписались на 20 каналов, 40 чатов, везде отключены уведомления, а лента продолжает скакать по последнему комментарию (кстати, на «Лепре» такая сортировка лет десять уже, она правда удобная, но имеет лимит количества пользователей в ленте).
О, а что если рендерить приложения на клиенте?
На последней конференции Google I/O в 2016 году нам всем показали прототип экосистемы Google Instant Apps — это, в том числе, одна из попыток решить проблему выше, но немного с другой стороны и уже хожеными тропками.
Если коротко, то сценарий там мало чем отличается от веб-приложений — после перехода из поисковой выдачи телефон рендерит на клиенте не веб-страницу, а кусок приложения. Приложение при этом может получить доступ ко всем вещам, которые ему могут быть нужны: датчикам, памяти, камере, контактам
Это, конечно, любопытная технология и довольно логичная в рамках ОС, но чем тогда это отличается от чат-ботов? Там ведь тоже приложение или функция возникают на клиенте в момент запроса к сервису. И в чём тогда глобальная разница между веб-приложением, приложением для смартфона и чат-ботом? А ни в чём. Самое время вернуться к Telegram.
Операционная система Telegram
Предположим, что Павел Дуров сошел с ума и решил, что время для его ОС пришло, несмотря на то, что это дорого и никому не нужно. Но очень ему захотелось свой Telegram Home. И вот вам в руки попало такое устройство, выпущенное каким-то HTC, уже подвязанное к вашему аккаунту где угодно.
Какие задачи вы можете решать? Как вы их решаете? Я буду описывать без фанатизма, общими красками, чтобы просто донести суть.
Фото и видео
Давайте попробуем представить, какие функции вы решили бы приложением камеры : по умолчанию все фото и видео — таймлайн сверху вниз. Все автоматически созданные облаком видео-стори приходят как входящие. Вы можете редактировать каждое фото ровно так же, как вы уже можете это делать во всех ОС, открыв фото. Можете отправить геометку и получить все ваши фото оттуда. Вы можете отправить серверу контакт или фото и получить все фото с ним. Шеринг — изи катка — примерно как уже работает в Telegram.
Все публикации и уведомления идут в одной ленте и хронологически. Ваши записи — это исходящие сообщения. Уведомления и все прочие — входящие. Зайдя в публикацию, вы видите иерархию входящих-исходящих комментариев как обычный чат. В общем, весь мир — таймлайн и сверху вниз. Концепция же понятна?
Heartstone
С этим пришлось выдумать костыль. Предположим, что все полноэкранные приложения, будь это игры и видео или какие-то тяжелые редакторы, очень требовательны к ресурсам, а ещё для них очень важно никогда не терять текущую сессию работы с приложением. Поэтому вы всегда видите превью последней сессии, а информация о том, что же добавилось в новой версии приложения, приходит как нормальное входящее сообщение.
То есть, нажав на последнюю сессию видео или игры, вы её открываете на том же месте и получаете все ровно так же как на любом другом устройстве на всех девайсах сразу.
Звонок
Здесь всё предельно просто: отправили на сервер новый телефон или фото визитки или просто фото номера как исходящее и получили вопрос «Звоним или добавляем в контакты?». Начали вводить текст — получили предложение имени для контакта. Таймлайн входящих и исходящих звонков ровно такой же, как и везде. Можно ещё популярные контакты сразу показать, но это так, опция. После установки связи видна клавиатура, стандартная и привычная всем.
Новости или RSS
Это даже расписывать не буду. Это просто работает уже сейчас и с этим Telegram отлично справляется (вроде @feedsRSSBot). Шеринг сообщений, просмотр ссылок во внутреннем браузере — всё работает прекрасно.
«Яндекс.Навигатор»
Тоже максимально упростим: отправили голосом адрес — маршрут построен. Отправили улицу — вопрос, чего вам там нужно. Начали вводить адрес — получили автоматическую рекомендацию. Информация о пробках и проблемах на дороге — входящие сообщения. Режим навигации — полноэкранное приложение, так как всё-таки важно не отвлекаться, безопасность же, все дела. То есть важно сразу пользователю предложить вариант, который он сможет выбрать, тапнув на него — «поехали» можно сказать и голосом, этого будет достаточно для пользователя.
Я думаю, дальше уже даже без скриншотов можно — и музыка, и банк-клиент — что угодно вписывается в стандартный и привычный UX мессенджера между пользователем и функцией. Я долго пытался представить приложение, которое не удалось бы перепроектировать под такую механику, и пока всё ещё его не нашёл.
Навесить быстрых и легких UX-сценариев, да еще и при на 100% рабочем NLP в выдуманной ОС — это не слишком-то сложная задача. Само собой, что-то можно было бы сделать лучше, что-то — выкинуть, что-то я забыл, но это выходит за рамки этой статьи на тему того, как же мы будем потреблять функции приложений через какое-то время.
Так вот, вернемся к этому скриншоту, на который мы уже смотрели выше:
Это всё тот же лаунчер — он может быть плиточным, горизонтальным, вертикальным. Он может быть каким угодно, но он абсолютно не нужен, если всё, что я описал выше, работает и понимает пользователя.
А теперь мы просто отключаем выбор приложения и оставляем одно поле ввода и череду входящих-исходящих сообщений с функцией быстрого поиска:
Страшновато стало, правда? Теперь все функции, которые я расписал выше в примерах, можно использовать сразу, не открывая приложения. Более того, его не нужно скачивать, так как типичный магазин приложений в такой концепции заменяется на «привелегию получить запрос пользователя». ОС сама уточнит (если ей это необходимо), что вам нужно — на основе типа данных, которые вы ей посылаете, и с учетом аудио-видео-гео-сенсоров устройства.
Это ещё и при том, что, скорее всего, такой UX позволит слушать пользователя постоянно, но реагировать только в те моменты, когда это действительно нужно. И эта концепция не исключает возможности оставить какие-то приложения в более или менее классическом виде — на случай, если вы ретроград.
Получается, что концепция App Driven Messaging OS — это и есть настоящие чат-боты (которых сейчас почти нет на рынке), а приложения — это часть процесса общения между пользователем и функцией. Это может быть веб-приложение, игра, но всё это вписывается в форму чата. И очень плотно пересекается с темой умных помощников в стиле Siri и Google Now — так как задачу распознавания потребностей пользователя ОС будут брать на себя, а вам всего лишь нужно будет адаптироваться под требования платформы.
Вы хотите пиццу — вы просите (устно, буквально) пиццу и подтверждаете заказ. Хотите посчитать курс валют — и просто это делаете (как делает Google Now уже сейчас). Чатитесь с другом — и во время общения вам предлагают воспользоваться какими-то функциями уже сейчас (inline bots).
Так что же это, приложения исчезнут и станут чат-ботами?
Да хрен там. Нас ждёт мир параллельной архитектуры, где есть умный ассистент и его гибкие возможности обработки запросов без скачивания приложения. Мир, где будут классические iOS- и Android-приложения, адаптированные под чатоподобную архитектуру (два примера), и мир «классических», постепенно устаревающих приложений.
В общем, нас ждёт, как всегда, всё и сразу. И параллельно. Рынок движется в сторону NLP — что совершенно точно, настоящие чат-боты лишат нас огромного количества лишних кнопок. Такой подход в разработке в идеале избавил бы нас «однодневных» приложений — созданных под конкретное событие или случай, вроде Google I/O.
А пока нам приходится называть чат-ботами костыли, которые пытаются быть умнее, чем приложения, но у них это не выходит, однако их делают и делают. Если вы один из таких разработчиков — посмотрите лучше в сторону приложений, скорее всего, ваш бот будет актуален через какое-то время, но при интеграции с Siri или Google Now, так как задача распознавания текста или речи пользователя — это не ваша задача, это задача операционной системы.
Появление ADM OS не означает, что UI-дизайнерам будет меньше работы, это значит, что её будет больше — им придётся учитывать human touch в общении с пользователями. Это будет проектирование не только про глубину тапа до достижения функции и юзабилити дизайна, но и реакции приложения на запрос пользователя — на то, каким тоном отвечает на вопрос ваш чат-бот.
Иными словами, чат-боты, приложения, веб-приложения — всё это лишь функции умного ассистента, которого мы (люди) вот-вот достроим. И если вам режет глаз сочетание «Операционная система Telegram», то это была абстракция, от которой уже можно отказаться, давайте её называть «Операционная система Siri» и «Операционная система Google Now», «ОС Жимолость».
А если вам вдруг понравилось то, что вы прочитали, то вот мой Telegram-канал — о технологиях, об алгоритмах, о всяком.
Графический движок angle telegram что означает
#graphics #gpu #skia #angle-graphics
Вопрос:
ANGLE это кроссплатформенный уровень абстракции графического движка, разработанный Google. Команда ANGLE описала его как портативный OpenGL. API в основном предназначен для обеспечения высокопроизводительной совместимости OpenGL с компьютерами Windows и веб-браузерами, такими как Chromium/Google Chrome, путем перевода вызовов OpenGL в Direct3D, который имеет гораздо лучшую поддержку драйверов.
Skia Graphics Engine это графическая библиотека, написанная на C , которая абстрагируется от специфичного для платформы графического API.
Оба они являются уровнем абстракции, разработанным Google для поддержки OpenGL, и оба они используются в Google Chrome.
В чем именно разница между тем и другим?
Ответ №1:
Сначала немного контекста.
OpenGL-это API для программирования видеокарт. Вызовы API для OpenGL преобразуются в команды для видеокарты на компьютере драйвером поставщика графического процессора (обычно Nvidia, AMD или Intel).
(другие API для программирования графических процессоров-Direct3D в Windows, Metal в macOS, Vulkan и т. Д.)
Эти API-интерфейсы являются несколько «низкоуровневыми» в том смысле, что они дают вызовы для указания графическому процессору, что делать на уровне необработанной «геометрии»/»пикселей»; в этих API-интерфейсах нет ничего похожего на «нарисуйте прямоугольник здесь» или «нарисуйте это изображение там».
Веб-браузеры, такие как Chrome, предоставляют API WebGL для страниц HTML5. WebGL-это в основном API OpenGL ES 2.0.
ANGLE-это библиотека, которая преобразует API OpenGL ES 2.0 в один из API GPU: вы выполняете вызовы OpenGL ES 2, а ANGLE преобразуется в эквивалентные вызовы в настольном OpenGL, или в Direct3D в Windows, или в Metal на macOS.
Это дает вам последовательную реализацию OpenGL ES 2.0, которую Chrome хочет использовать в Интернете. (Это очень полезно, потому что реализации Windows OpenGL отличаются от поставщика к поставщику, и macOS давно перестала обновлять свою реализацию OpenGL в версии 4.1).
Skia-это API более высокого уровня, который позволяет вам «нарисовать прямоугольник здесь» и «нарисовать это изображение там» и многое другое (рисовать текст; рисовать контуры; рисовать кривые и т. Д.). Это обычный API высокого уровня, который вы получите на языках более высокого уровня и в API веб-холста.
Для реализации этих вызовов Skia преобразует команды рисования в API более низкого уровня, такие как GL, Metal и т. Д. Одним из API-интерфейсов, на которые может ориентироваться Skia, является ANGLE, чтобы чертежи Skia получали согласованный вывод на разных платформах.
Особенности Android 10, которые вам понравятся: игры будут лучше на более слабом оборудовании
Одним из самых крутых изменений под Android 10 является реализация ANGLE , движка практически нативного графического слоя. Это одна из тех вещей, которые вы никогда не увидите или не узнаете, если она работает должным образом, но позволит вашему телефону запускать игры, используя встроенные аппаратные API-интерфейсы графического процессора, даже если он создан для более мощного набора графических инструкций. Сложно обернуть голову, если вы не аппаратный гайка, поэтому мы собираемся объяснить это простым английским языком.
ANGLE — это проект Chrome, предназначенный для выполнения одной задачи — позволить пользователям на любой платформе запускать контент WebGL и OpenGL ES на своих собственных API. Это достигается путем перевода вызовов API OpenGL ES 2.0 и 3.0 на настольные компьютеры OpenGL, OpenGL ES, Direct3D 9 и Direct3D 11. Все эти API-интерфейсы (интерфейс программирования приложений) позволяют разработчику встраивать 2D и 3D графику в приложение, но не из них совместимы друг с другом. До сих пор.
Действительно интересная часть — это то, что будет дальше для ANGLE, где Android вступает в игру. В настоящее время в проекте реализован перевод на Vulkan, а после него добавлена поддержка вычислительного шейдера из ES 3.1. Телефон в ваших руках, независимо от модели, имеет встроенную поддержку Vulkan и может запускать 2D и 3D игры, написанные с его помощью, с аппаратным ускорением. Игры, для которых требуется OpenGL ES любой версии, также могут запускаться на вашем телефоне, но если графический процессор вашего телефона не поддерживает его изначально, вы получаете программное ускорение, что в большинстве случаев означает медленную и / или некорректную графику.
ANGLE может позволить вам запускать крутые игры на дешевом телефоне. Это все, что вам действительно нужно знать.
Android 10 позволяет разработчикам и производителям оборудования принять решение использовать ANGLE для перевода инструкций GPU из одной системы API в другую. Это означает, что разработчик игры может решить встроить поддержку ANGLE в игру, а производитель телефона может решить использовать ANGLE, чтобы перевести его в инструкции для графического процессора, используемого в его чипсете. Так как поддержка ANGLE и Vulkan все еще находится в стадии разработки, это все пока не решено и, вероятно, останется таким же с полной версией Android 10. Но в конце концов, она станет «просто еще одной функцией Android» и все будет работать без участие любого разработчика или производителя.
Если вы используете Android 10 на своем телефоне, вы можете попробовать его прямо сейчас. Поддержка ANGLE включена для каждого приложения, если вы измените настройку, чтобы вы могли видеть, где ей нужно больше времени в духовке. Вы найдете флаг в настройках разработчика, и вы можете попробовать его отдельно для каждого приложения. Совет: не включайте его для всех одновременно, если только вы не хотите, чтобы ваш телефон действительно работал. Попытка использовать его для одного или двух приложений ничего не повредит, и, поскольку Android 10 доступен только для телефонов с сильным оборудованием, вы, вероятно, ничего не заметите.
Это много, чтобы усвоить, если вы не в такой вещи, поэтому давайте создадим потенциальный пример из реального мира. Вы решили сэкономить несколько долларов и купить бюджетный телефон, в котором нет сильного процессора и графического процессора. Он не поддерживает последнюю версию OpenGL ES, инструмента, который разработчики используют для создания 3D-игр. По-настоящему крутая новая игра выходит в Play Store, и вы устанавливаете ее, и она работает довольно хорошо. Все счастливы; вы, потому что вы играете в новую классную игру, а разработчики — потому что вы ее установили и она вам нравится
За кулисами разработчик этой игры решил встроить в игру поддержку ANGLE. просто так получилось, что компания, которая сделала бюджетный телефон, который вы купили, также включила поддержку ANGLE, когда создавала для него Android. Новая игра была разработана с использованием API OpenGL ES 3.0, потому что она имеет инструменты, которые делают игру великолепно выглядящей, и разработчик может сделать это легко. Ваш телефон не поддерживает OpenGL ES 3.0, но поддерживает Vulkan 2.0. ANGLE перевел те вызовы OpenGL API в API Vulkan, которые аппаратное обеспечение вашего телефона понимает и может обрабатывать без каких-либо проблем. Вуаля, веселье для всех.
Поддержка ANGLE находится в зачаточном состоянии в 10, но это здорово видеть там.
Безусловно, любому такому большому проекту потребуется некоторое время, прежде чем он заработает так, как его разработчики планируют. ANGLE выйдет с Android 10, но нам понадобится несколько версий обновлений, чтобы он приблизился к идеальному. Но понимание того, как программное обеспечение можно использовать для создания впечатляющего опыта на недорогом оборудовании, является одной из главных причин, почему я люблю Android — не все хотят тратить 1000 долларов на телефон, но все хотят хорошего опыта. Google пытается предоставить именно это, и это тот тип инноваций, который позволяет этому случиться.