92 Commits

This Branch

This Branch

All Branches

Author	SHA1	Message	Date
subochev	17385d1784	stt(phone): Qwen3-ASR-0.6B int8 вместо whisper-small (константа STT_BACKEND, hotwords тулсет/тулы/умеешь) — откат в одну строку (opencode по ТЗ)	2026-08-25 19:57:33 +03:00
subochev	98ac84ffe8	stt(phone): сегментация буфера на фразы перед whisper (лимит ≤30с) — длинные сессии распознаются целиком, фразы склеиваются пробелом (opencode по ТЗ)	2026-08-25 18:09:56 +03:00
subochev	ac56e70283	stt(phone): VAD удалён (резал рваный микрофон очков) — полный буфер + trimEdges + хвост 120с + авто-финиш по тишине 30с (opencode по ТЗ)	2026-08-25 03:45:42 +03:00
subochev	4e60e11d24	stt: дамп закрывает цикл в finally (нет Stream Closed при стопе)	2026-08-25 03:13:27 +03:00
subochev	b0baa19e7d	stt: полный поток без VAD (резал речь на рваном ARGT78) — whisper распознаёт сырой поток (проверено: 1-10 идеально), усиление ×3, сырой дамп	2026-08-25 03:12:04 +03:00
subochev	d34d15ecef	stt(dump): сырой WAV всего потока микрофона (до усиления/VAD) — что реально слышат очки	2026-08-25 03:00:47 +03:00
subochev	19fe1b34bc	stt(mic): возврат на 16 кГц (48 кГц молчит на ARGT78); VAD на сыром + gain ×5 остаются	2026-08-25 02:59:00 +03:00
subochev	1009713a28	stt(mic): 48 кГц как pair-view + VAD на сыром сигнале + усиление ×5 без клиппа + FIR-даунсэмпл 48→16	2026-08-25 02:55:42 +03:00
subochev	0f235da0ed	Высота — только для видео: ассистент/коннект-экран следуют масштабу, но всегда у верха	2026-08-25 02:43:45 +03:00
subochev	74701a2108	Панель статуса сдвигается к носу вместе с контейнером (panelOffsetX): центр панели = центр контейнера	2026-08-25 02:39:43 +03:00
subochev	4f4a551c91	Панель времени/заряда: масштабируется как контент, но прибита к низу экрана	2026-08-25 02:35:24 +03:00
subochev	80236902ba	Панель времени/заряда: шрифт фиксированный (scale=1f) — не сжимается вместе с масштабом контента	2026-08-25 02:31:28 +03:00
subochev	d113ffd744	Панель времени/заряда: оверлей-слой поверх контента, у низа экрана — стабильно при любом масштабе	2026-08-25 02:28:00 +03:00
subochev	8958370507	Панель времени/заряда — вне контейнера, всегда у верха экрана (не повисает между верхом и видео при vertical=0)	2026-08-25 02:24:57 +03:00
subochev	883fd8e5e4	Высота: видео в контейнере прижимается к верху/низу по vertical (Row-центрирование съедало вертикаль)	2026-08-25 02:15:48 +03:00
subochev	6d22f56bd8	Регулятор «Высота» экрана очков (0..1, с учётом масштаба): SetVertical по протоколу, offset Y в кино/коннект/оверлее, слайдер на пульте	2026-08-25 02:11:01 +03:00
subochev	b17b5bf424	stt(glasses): VAD на очках (WebRTC, схема pair-view) — речевые сегменты с пре-роллом, межфразовая тишина не шлётся	2026-08-25 01:51:57 +03:00
subochev	d78ed4429e	stt(mic): микрофон на 48 кГц (нативная частота) + даунсемплинг 48→16 — рваность ARGT78 давала ровные провалы 100 мс	2026-08-25 01:39:12 +03:00
subochev	032424f513	Mercury: enable heartbeat on connect (keeps link alive), autolock endpoint	2026-08-25 01:15:00 +03:00
subochev	4556d3b6e4	Mercury: verify handshake echo, autolock endpoint, ringInfo-safe status	2026-08-25 00:54:31 +03:00
subochev	b40e44c653	DebugHttpServer: Mercury BLE-эндпоинты (/mercury/status|connect|disconnect|screen/off|screen/on)	2026-08-24 23:24:07 +03:00
subochev	d674b31a81	Внедрение rayneo-mercury: зависимость + MercuryPanel (BLE-тест: погасить/включить экран)	2026-08-24 23:19:37 +03:00
subochev	c222a4ac76	stt(phone): полный текст по клику — whisper на всём буфере, VAD только для промежуточных фраз	2026-08-24 22:11:08 +03:00
subochev	e21c27b0ee	stt(dump): WAV-заголовок — размеры little-endian (плееры открывают дампы)	2026-08-24 21:36:53 +03:00
subochev	0d79b5aa33	stt(mic): усиление микрофона очков ×10 — VAD/Whisper видят речь (пустая фраза)	2026-08-24 20:57:06 +03:00
subochev	40edd88c1d	stt(mic): вынести кадровую арифметику в micChunkBytes + регрессионные тесты MicChunkTest ... - CHUNK_BYTES=3200, micChunkBytes(buf, frames): кадры read() -> байты (*2) - 4 теста: полный чанк 3200 Б без копирования, короткий read, документация старого бага (copyOf(кадры) = полка), inFrameCount=1600	2026-08-24 12:23:33 +03:00
subochev	fc84ba16b6	stt(mic): request frames in frames (inFrameCount), not bytes — each chunk now carries full 100 ms	2026-08-24 11:10:05 +03:00
subochev	c940a7e0eb	stt(mic): AudioRecord.read возвращает КАДРЫ, а не байты — не терять вторую половину каждого 100-мс чанка (впечатление 'пропускает через один')	2026-08-24 11:08:27 +03:00
subochev	22eb83fd17	stt: debug-дампы аудио-пути (очки: сырой микрофон в WAV; телефон: принятые PCM) по старту от stt_dump.marker	2026-08-24 05:58:59 +03:00
subochev	c1c169036a	stt: VAD-интерфейс (Sherpa боевая / Silero тестовая), PhraseRecognizer (Whisper), чистый full-text-тест на реальном Silero VAD	2026-08-24 05:43:29 +03:00
subochev	7557d7229f	Очки: отмена слушания двойным тапом — SttCancel reason=cancel	2026-08-24 03:01:55 +03:00
subochev	504e66f0c6	Очки: красный индикатор записи микрофона в режиме «слушаю»	2026-08-23 21:58:36 +03:00
subochev	e24caaa684	Очки: разграничение SttCancel (user/timeout) — выход из режима при тишине 30с, микрофон закрывается при потере фокуса	2026-08-23 21:17:43 +03:00
subochev	eaca47c443	Очки: единый скролл диалога на оба глаза + мгновенная пауза звука телефона при вызове ассистента	2026-08-23 21:08:40 +03:00
subochev	706cc10d1e	Очки: история диалога в свайпе + распознавание в LLM только по клику (касяки 1-3)	2026-08-23 20:15:21 +03:00
subochev	51049d56a8	Чат: автоименование сессии из первого сообщения ... - Assistant.processInSession: безымянная сессия получает имя из первого сообщения (обреза 30 симв.), «беседка» — пустое - ChatScreen: периодическая перезагрузка подхватывает и список сессий — шапка обновляет название без ручного переключения	2026-08-23 17:40:12 +03:00
subochev	ce2d9c5448	Чат: клавиатура не вырезает верх окна (adjustResize + imePadding) ... - MainActivity: windowSoftInputMode=adjustResize — окно сжимается, а не панорамируется вверх при появлении IME - ChatScreen: Modifier.imePadding() — контент честно ужимается под высоту клавиатуры	2026-08-23 17:30:40 +03:00
subochev	d585ddf576	Локальная LLM: конфиг автора + uses-native-library в <application> ... - AndroidManifest: три uses-native-library (libOpenCL/libvndksupport/libcdsprpc) ВНУТРИ <application> — aapt2 8.9.2 отбрасывает тег на уровне <manifest> - LocalLlm: enableSpeculativeDecoding=true, GPU/GPU/CPU бэкенды (как у автора) - DebugHttpServer: HTTP-отладка ассистента без UI - Log/PhoneApp: мелкие правки Подтверждено: движок поднимается, локальный чат отвечает на HONOR AXGL024B05001337	2026-08-23 17:25:55 +03:00
subochev	75496dd35d	Фикс локальной LLM: таймаут 300с для LOCAL (инициализация движка ~17с + генерация), CPU-бэкенд без спекуляции (MTP виснет на CPU, GPU-делегат падает), диагностика chat() ... Проверено на железе (HONOR FCP-N49): Gemma 4 E2B отвечает «Здравствуйте! Чем я могу вам помочь с вашими очками Viewmate?» (15 чанков, 61 символ, ~19с генерации).	2026-08-23 04:38:02 +03:00
subochev	7527cf8848	LLM: интерфейс + две реализации (Qwen удалённо / Gemma 4 E2B локально) + переключатель ... - LlmClient интерфейс; RemoteLlmClient (OkHttp, llm.binom.pw) и LocalLlmClient (LiteRT-LM, Gemma 4 E2B) - LocalLlm: Gemma4E2B (SHA-256, GPU/CPU-бэкенды), buildLocalLlmPrompt (SYSTEM→systemInstruction, TOOL→user), GemmaModelDownloader (стриминг, прогресс, фолбэк источников), спекулятивное декодирование - LlmPrefs (персистентность выбора), PhoneApp: фабрика по llmChoice, пересоздание ассистента, скачивание/отмена - UI: GlassesInfoScreen — выбор сервер/локальная + прогресс; ChatScreen — индикатор активной модели - Тесты: +12 (LlmLocalTest) — phone 154 зелёных	2026-08-23 02:52:22 +03:00
subochev	2d6ca1e097	План: локальная модель на телефоне (Gemma 4 E2B, LiteRT LM) — в очереди, ждёт отмашки ... - Источник: vayun-mathur/Modern-Apps openassistant (клон ~/WORK/modern-apps/) - Интерфейс LLM + 2 реализации: Qwen3.8 (сеть) и Gemma E2B (локально, оффлайн) - Разбор скорости: GPU-бэкенд + MTP-спекулятивный декодинг, 20-35 ток/с на 8 Gen 3 - Реализация НЕ начата — по правилу пользователя «без отмашки не начинай»	2026-08-23 02:00:21 +03:00
subochev	f75e672819	Очки: жесты и режимы общения с ассистентом (по docs/gestures-and-modes.md) ... - AssistantMode: NONE/LISTENING/THINKING/ANSWER + чистая gestureDecision (матрица жестов) - Клик в «ответ виден» = новая фраза; DoubleClick = выход (кино на паузе); свайпы = скролл - Плавный скролл ответа: SlideContinuous delta → answerScrollDelta → scrollOffset (зажим 0..max) - Индикатор «думаю...» (thinking, сброс на ShowText) - AssistantOverlay: затемнение 72%, по глазам, скролл-аккумулятор - Тесты: 22 (AssistantGesturesTest) — glasses 91 зелёных	2026-08-23 01:55:24 +03:00
subochev	f36d04adc1	Доки: жесты и режимы общения с ассистентом (design) + TASK	2026-08-23 01:08:38 +03:00
subochev	28d0f9b68d	Агент: медиа-тулсет (search/info/play) на Jellyfin + скилл media ... - MEDIA_TOOLSET + MediaToolExecutor: search (поиск с лимитом), info (детали), play (проверки+запуск) - JellyfinMediaSource: обёртка JellyfinClient (search/item) с защитой userId - agentPlayMedia: проверки (очки на связи, видео скачано на очки, звук на телефоне) → watch с позицией - PhoneActions.watch(startPositionMs), JellyfinItem.ProductionYear - скилл app-phone/skills/media.md (frontmatter: name/description) - MediaToolsTest: 22 кейса — всего 142 теста зелёные	2026-08-22 21:42:53 +03:00
subochev	c5cbc893ac	Агент: механика скиллов и тулсетов (ядро 5 тул, подмена, невидимые enable/disable) ... По ТЗ TASK-agent-tools.md: - Skills/SkillRepository/SkillRegistry: frontmatter-скиллы из files/skills, индекс для промпта, ленивое read_skill - Toolsets/ToolsetRegistry: активность на сессию в хиппе, таймаут 10 мин (инжект часов), префиксная маршрутизация, идемпотентные enable/disable - AgentToolkit: сборка промпта (3 состояния), диспач, бесшовная подмена вызова на активацию, валидация аргументов - Assistant: цикл тулов с невидимыми вызовами (MAX_LLM_CALLS=8, MAX_TOOL_CALLS=3) - Тесты: 18 новых (AgentToolkitTest 17 + SkillsTest 6 + ToolsetRegistryTest 9) — всего 120, зелёные	2026-08-22 21:13:29 +03:00
subochev	22369670cb	ТЗ: агент — скиллы + тулсеты (TASK-agent-tools.md) ... Архитектура (договорено 2026-08-22): - скиллы (знания) ≠ тулсеты (руки) - ядро 5 тул: время, show_text, read_skill, enable/disable_toolset - префиксы тул по набору (media_*) - активность на сессию, в хиппе, таймаут 10 мин - enable/disable невидимы (не в истории), скилл исчезает при активном наборе - бесшовная подмена вызова на активацию - история не вычищается	2026-08-22 20:15:48 +03:00
subochev	bbf7a020d4	Ассистент Порфирий: тула времени, сессии, чат-UI, голосовой цикл; BT-транспорт очки↔телефон ... - BT (RFCOMM SPP 00001105) вместо WiFi: BtGlassesTransport/BtServerTransport, реконнект 3с - PlaybackService (foreground, WAKE_LOCK) против морозов HONOR - Ассистент: AgentTools (TimeTool ISO 8601), TOOL_CALL-протокол, сессии SQLite (UUID) - Чат-UI: создание/сброс/переключение сессий, автообновление ленты 2с - LlmClient на прямом OkHttp (Koog давал пустой content на длинных историях) - Голосовой цикл: тройной тап на очках → STT → активная сессия → ShowText - Тесты: AgentToolsTest (3), GlassesServerTest переписан (6) — зелёные	2026-08-22 16:31:04 +03:00
subochev	adfe376dd4	CI: системный JDK 17 на раннере вместо setup-java (adoptium виснет) 1	2026-08-21 19:45:43 +03:00
subochev	20654e916e	CI: Java 17 (jvmToolchain в lib-core)	2026-08-21 19:31:37 +03:00
subochev	ee9700c558	CICD: сборка APK на release → F-Droid; versionCode из тега; фикс скролла каталога и масштаба	2026-08-21 19:27:02 +03:00