Russian Qt Forum

Доброго времени суток!
Понадобилось делать скриншоты с экрана смартфона с целью анализировать их на компьютере.
Не проблема: с помощью QProcess и кода получаю скриншот, всё ОК.
Но вот беда - на 1 снимок уходит больше 2 секунд. А хотелось бы хотя бы 4 кадра в секунду.
Как это можно сделать?
Телефон не рутованный, ставить какие-то дополнительные программы на него не хотелось бы.

можно запустить несколько процессов параллельно

Даже если это и получится (я проверю, конечно), то рассинхронизация в те же 2+ секунд никуда не денется. Самый первый то кадр всё равно придёт через 2+ секунд...
Хитрее надо как то.

а если прямо из консоли выполнять эту команду, то нет задержки?

Есть, конечно. 2 секунды - достаточный срок, чтобы видеть даже "на глаз".

значит, дело не в QProcess :)

если делать screencap в сыром виде и не передавать по adb линку, то будет быстрее
если это медленно - надо искать замену screencap

Вы про "создать скриншот внутри телефона и наружу передать файл"? Я так делал - выгода разве что в экономии около 0.5 секунд, убыток - в том, что можно довольно быстро затереть флешку телефона. Screencap то выдаёт картинку в бинарном виде, которую можно на компьютере просто создавать в /dev/shm
А какая может быть замена screencap?

1. можно хранить последние 100 от screencap (срипт должен чистить). а забирать потом
2. альтернативой может быть или имеющиеся скриншоттеры из gplay или свой написать )
2.1 даже используя быстрый скриншотер может быть затык в передачи png-файла по adb или wifi

1) Хранить X скриншотов и забирать их потом - всё равно будет задержка получения первого скришнота.
2) Написать свой - может быть вполне вариант, только я вряд ли без рута смогу получить доступ к фреймбуферу
3) Так затык и есть. В передаче хоть сырых данных, хоть в виде png

Или всё таки можно до фреймбуфера без рута добраться?
P.S. Есть ещё один вариант, конечно - использовать внешнюю web-камеру

вроде есть скришотеры без рута на gplay, но проверять не буду и не смогу т.к. рут у меня есть

Та даже если и есть - что с того? Ставить что-то дополнительное на смартфон я не хочу, о чём и говорил в начале темы. Вопрос о фреймбуфере был чисто любопытным.
Пока что, вариант съёма скриншотов без установки дополнительных программ и без тормозов остаётся только web-камера.
Но, есть надежда, что кто-то что-то подскажет...

а в чем состоит глобальная задача? может можно придумать другой подход?

Задача - простая. Имитировать человека, не прибегая ко всяким дополнительным программам на устройстве.
Попробую обьяснить. Лет 5 назад была подобная задача, правда на компьютере (for fun) - есть некое графическое приложение (сама ОС в данном случае не важна). Нужно в определенный момент времени кликать в определенной области экрана. Для чего - не так важно.
В результате получился небольшой компьютер с камерой, смотрящей на экран другого компьютера. Было реализовано распознавание целей с помощью OpenCV. Сам "клик" реализовывался с помошью "ардуинки" (то, что было на тот момент), которая "притворялась" мышью. Управление оной осуществлялась через UART. Естественно, добавлялись разные случайные задержки и случайно "сбивались" координаты клика. Само графическое приложение, естественно, ничего подозрительного не заметило.
Теперь захотелось что-то подобное сделать на андроиде, только без камеры...

почему запрет установить стороннею быструю программу скриншотера (или написать свою) так принципиален ?

Потому что медленно это. Они ведь все рассчитаны на однократный снимок, причём с управлением от пальца. Если писать свою - тоже быстрее не выйдет, чем то, что я описывал в первом посте.
Подумалось за передачу потокового видео от смартфона на комп, но тут пока я не знаю, можно ли это и как сделать...

1. А надо ли передавать снимки на комп, может сделать обработку и клики сразу на андроиде ?
2. Как клики  планировалось делаться от внешнего компа ?

стримить экран на комп должно быть реально (во всяком случае, для макос есть не одно приложение захвата экрана иос, не считая стандартного макосного QuickTime).

другим вариантом будет написание «демона» для андроида, который будет симулировать нажатия — должно быть реально, ведь исходники андроида открыты.

Что-то я сомневаюсь, что андроид вот так вот просто даст управлять одним приложением из другого.

Через adb. Клик то как раз сделать вообще не проблема, проблема получить быстрый снимок.

Да, посмотрел. Для андроида тоже есть. На гитхабе. В исходниках.
Но, хотелось бы вообще без установок сторонних приложений на смартфон.

не управлять, а делать скриншоты


без рута, имхо, ничего хорошего не выйдет - input keyevent медленный
https://stackoverflow.com/questions/12079591/android-sendevent-is-really-slow-how-to-speed-it-up

Медленно это. Очень.

Так я не на пианино собираюсь на андроиде тапать. :)

если скриншот 2-3 раза в секунду это медленно, то почему не беспокоит медленность sendenevt ?
я то подумал бота надо написать или кликкер )

я бы свою консольную попробовал писать программу, а устанавливать ее и не надо, только adb push

может еще немного о сути задачи инфы ?
вдруг есть иное решение

1 раз в 2 секунды. Т.е. 2000 msec, а надо хотя бы 250 msec.

иос не требует установки сторонних приложений для захвата видео с экрана :) просто подключаешь иос устройство к компу и захватывай. Может для андроида тоже так можно?

на устройстве:
date; c=0; while [ $c -lt 100 ]; do c=$(( $c + 1 )); f=img_$c.raw; echo $f; screencap > $f; done; date
100 скриншотов за 30 сек, без передачи

если нужно быстрее - надо смотреть код screencap - где он там затыкается, возможно лишние проверки или ожидания

Сырые данные ещё надо преобразовать. RAW ведь не PNG, правда?
Да и какое мне дело до самого устройства? Мне нужно минимум 4 кадра в секуду на компьютере. Без использования какого либо ПО на самом устройстве.
Максимум - это включение режима разработчика.
Хотя, такое чувство, что мне всё это будет проще сделать на малинке или апельсинке...

т.е. снимать на web камеру, подключенную к внешнему компу, далее анализ и клик через sendenevt ?
наверно это и вариант если на андроид ничего ставить невозможно

Да. Я выше писал, что я такое уже делал. Правда для обычного компа.
В случае с андроидом проблема только в необходимости слесарных/столярных работ. В случае с обычным мониторе я просто ставил камеру перед монитором. А тут нужен будет держатель как для камеры, так и для смартфона.