Из раннего ролика

Это материал из более раннего видео — интерфейсы и функции ИИ-сервисов с тех пор могли измениться. Сама идея и подход остаются актуальными.

Трансляция:

🔍 Что такое демонстрация экрана в Gemini?

Это режим, в котором ты:

  • включаешь трансляцию своего экрана в окне браузера,
  • показываешь интерфейс приложения, сайта или документа,
  • получаешь живые подсказки, объяснения и помощь от ИИ в реальном времени.

🔧 Режим работает на базе Astra Project — инициативы Google по созданию активного, внимательного ИИ, который видит, слышит и понимает среду.


💼 Примеры использования

🎨 Дизайн и анимация

Показываешь интерфейс Figma или After Effects и просишь:

Подскажи, как упростить цветовую палитру и добавить динамику анимации

ИИ видит твой экран и предлагает конкретные действия: изменить слои, структуру, шрифты.

🧾 Работа с Obsidian

Показываешь свою структуру заметок:

Как мне визуально упростить эту карту? Что можно автоматизировать?

Gemini анализирует блоки, предлагает плагин или команду Templater.

🧑‍💼 Работа с документами

Показываешь Google Документ:

Что непонятно в этом разделе? Как упростить объяснение для школьников?

ИИ переформулирует, выносит тезисы, предлагает примеры.


🔐 Приватность и безопасность

  • Экран транслируется только в рамках твоей сессии
  • Не сохраняется Google (если ты не дал отдельное разрешение)
  • Можно приостановить или остановить трансляцию в любой момент

🤖 Интеграция с голосом и жестами (Astra)

В рамках Astra Project Google тестирует: *Astra еще не вышла в общий доступ.

  • Понимание интонации и речи в реальном времени
  • Реакции на жесты, мышку, перемещения
  • Ответы даже до того, как ты завершил вопрос (интуитивная помощь)

Это делает взаимодействие с ИИ максимально близким к реальному наставнику.


⚠️ Минусы и ограничения

  • Пока работает не во всех странах и не на всех устройствах
  • Иногда не понимает контекст, если слишком много движущихся элементов
  • Нельзя включить камеру (только экран)

Идем дальше?