Адрес для входа в РФ: exler.wiki
Подделывает ли смартфон Samsung Луну?
09.03.2023 10:00
18588
Комментарии (88)
Одна из "фишек" нового Samsung Galaxy S23 Ultra - получение очень реалистичных фото Луны, сделанных с большим гибридным приближением. И в связи с этим снова начались разговоры о том, что здесь имеет место определенное "читерство", то есть, мол, смартфон, определив Луну в кадре, просто вклеивает туда изображение земного спутника, полученное на профессиональную технику.
Подобные разговоры ходили и по поводу Huawei P30 Pro (вот мои фото Луны на этот смартфон), и по поводу предыдущих моделей Samsung, и по поводу Xiaomi Mi 11 Ultra, и все эти разговоры, конечно же, не имели под собой никаких оснований, потому что Луна из разных уголков Земли смотрится по-разному, подделку заметить очень легко, а реальных доказательств этому утверждению не было приведено ни разу.
Мое фото Луны на Mi 11 Ultra
Были предположения о том, что смартфоны, мол, хранят разные изображения Луны и выбирают нужное в зависимости от географических координат. И эти предположения также звучали дико - как они себе это вообще представляют? Смартфон хранит миллионы изображений Луны в зависимости от географических координат, также он хранит изображения различных фаз Луны для этих координат? Смешно. А всякие помехи, а облака?
Еще одно предположение касалось того, что производители смартфонов используют ИИ, чтобы сделать реальные фотографии Луны более интересными, то есть типа как дорисовывают детали на фотографии земного спутника.
В издании Input в свое время даже проводили специальные исследования по поводу того, добавляет ли смартфон Galaxy S21 Ultra что-нибудь к реальному изображению. И они использовали различные ухищрения, для того чтобы обмануть программное обеспечение смартфона и заставить его пририсовывать детали к, например, фото зубчика чеснока, снятого со 100-кратным увеличением на черном фоне, который выглядел как Луна. Также они пробовали фотографировать фотографию Луны и проверить, будет ли смартфон что-нибудь дорисовывать.
Нет, S21 Ultra не поддавался ни на какие ухищрения! Единственное, что они выяснили, так это то, что смартфон может подтягивать контраст и насыщенность фотографии, но он это делает со всеми снимками, не только с фото Луны.
Вот как раз наглядное сравнение из этого исследования: Луна, снятая на Galaxy S21 Ultra и та же Луна, снятая на Sony A7R III с телевиком 600 мм.
Из сравнения хорошо видно, что ничего не дорисовано, но контраст и насыщенность смартфон заметно подтянул (кстати, еще интересно было бы посмотреть, что там получается в RAW).
Так что все эти подозрения - беспочвенны. Смартфон действительно снимает реальную Луну.
P.S. Ну и я еще снова поэкспериментирую с Луной со смартфоном S23 Ultra. Сейчас вроде как раз полнолуние.
Войдите, чтобы оставить комментарий.
Современные технологии суперразрешения (при помощи нейросетей) делают нечто среднее между показыванием изображения как есть и вклеиванием заготовки Луны. Вполне вероятно, что они используются и, в таком случае, может иметь место определённое "читерство", если опция неотключаемая.
Cобственноручно снял вчера около 11 вечера на S22ultra.
Не догадался снять поведение самого телефона надругой аппарат.
Поведение такое себе, практически полностью отметает версии "вот такие у нас крутые камеры".
1. Срабатывает только на 100х увеличении и на еденичку меньше (а то!)
2. Луна должна попасть в центр экрана. (При большом увеличении SGS рисует дополнительный визор, который помагает коректировать положение смартфона). Если Луна не в центре это просто большой яркий шарик.
3. Как только объект попадает в фокус, он с задержкой в пол секунды или даже меньше, "магически" првращается в глобус Луны и далее остается таковым, даже если телефон слегка гуляет.
4. Если повернуть телефон, так что объект выйдет из кадра, магия исчезает и надо начинать все сначала.
5. Никакие объекты не мешают опознанию и "фокусировке". В кадре вполне себе реальная ветка дерева именно такая как она есть в жизни.
6. Сам объект плавает, в комментарии - еще один кадр. То же место, то же время, вот только Луна почему-то "пергаментная"
Мое заключение (Не гинеколог, но посмотреть могу):
- очень маленькая нейросеть узкого преминения. Вполне может жить прямо в самом чипе камеры, опазновать Луну по набору параметров (размер относительно кадра, яркость относительно фона, градации светимости, предположительная фаза луны в зависимости от даты/времени/часового пояса, показание акселометров).
- Картинка не то чтобы заменяется, а скорее творчески вытягивается/докрашивается.
Круто чо.
Не догадался снять поведение самого телефона надругой аппарат.
Поведение такое себе, практически полностью отметает версии "вот такие у нас крутые камеры".
1. Срабатывает только на 100х увеличении и на еденичку меньше (а то!)
2. Луна должна попасть в центр экрана. (При большом увеличении SGS рисует дополнительный визор, который помагает коректировать положение смартфона). Если Луна не в центре это просто большой яркий шарик.
3. Как только объект попадает в фокус, он с задержкой в пол секунды или даже меньше, "магически" првращается в глобус Луны и далее остается таковым, даже если телефон слегка гуляет.
4. Если повернуть телефон, так что объект выйдет из кадра, магия исчезает и надо начинать все сначала.
5. Никакие объекты не мешают опознанию и "фокусировке". В кадре вполне себе реальная ветка дерева именно такая как она есть в жизни.
6. Сам объект плавает, в комментарии - еще один кадр. То же место, то же время, вот только Луна почему-то "пергаментная"
Мое заключение (Не гинеколог, но посмотреть могу):
- очень маленькая нейросеть узкого преминения. Вполне может жить прямо в самом чипе камеры, опазновать Луну по набору параметров (размер относительно кадра, яркость относительно фона, градации светимости, предположительная фаза луны в зависимости от даты/времени/часового пояса, показание акселометров).
- Картинка не то чтобы заменяется, а скорее творчески вытягивается/докрашивается.
Круто чо.
предположительная фаза луны в зависимости от даты/времени/часового пояса, показание акселометров).
Интересно, фазу сдвинет или честно нарисует?
Но это нужно заранее включить режим полёта, перевести часы и календарь и, для верности, перезагрузиться.
Фазу луны проще "снять" с формы светящегося предмета. Дата время тут скорее для корректировки тех самых семи градусов сдвига Луны, да и она может быть совсем не обязательна, слишком уж не заметна разница.
Тю, Луна...а звёзды?
Canon PowerShot A450, выставил выдержку, автоматический спуск, положил на землю.
Canon PowerShot A450, выставил выдержку, автоматический спуск, положил на землю.
С какого расстояния снимали?
Ага, щаззз...
Alpha Centauri and its surroundings captured by the Digitized Sky Survey 2 telescope in the Atacama Desert, Chile. Credit: ESO/Digitized Sky Survey 2 Acknowledgement: Davide De Martin
www.google.com
Alpha Centauri and its surroundings captured by the Digitized Sky Survey 2 telescope in the Atacama Desert, Chile. Credit: ESO/Digitized Sky Survey 2 Acknowledgement: Davide De Martin
www.google.com
Телескопом Digitized Sky Survey 2 в пустыне Атакама, Чили.
Приколист...
Приколист...
С какого расстояния снимали?
Ага, щаззз...Alpha Centauri and its surroundings captured by the Digitized Sky Survey 2 telescope in the Atacama Desert, Chile. Credit: ESO/Digitized Sky Survey 2 Acknowledgement: Davide De Martin
Смартфон не хранит миллионы изображений луны и прочее.
1) Но там есть нейросеть, которая улучшает качество изображения. Эта нейросеть тренировалась на миллионах изображений, среди них было очень много изображений луны. А во время тренировки изображения подвергаются аугментации - вырезаются кусочки, к кусочкам применяются поворот, масштабирование и пр. Это еще больше увеличивает разнообразие изображений с которыми сталкивалась нейросеть. Таким образом нейросеть ну очень много изображений луны видела определенно точно, учитывая популярность этого объекта для фотографии.
2) Скорее всего там сверточная нейросеть (может конечно и более новая на визуальных трансформерах, но принцип там похожий). Сверточные сети по сути сравнивают в разных масштабах паттерны и находят характерные особенности. Таким образом там содержатся в свертках и кусочки луны, и формы носа и пр. и пр.
3) Обмануть нейросеть чесноком не получится - это может быть похоже только для человека, для нейросети это два совершенно разных объекта.
На этом же признаки работают сети увеличения разрешения, раскрашивания - они запоминают информацию о том, как устроен мир, распознают паттерн на реальном изображении и изменяют изображения привнося знания реального мира.
А вот если в обучающую выборку добавить непоравданно большое количество изображений луны, то луну она будет фотографировать очень хорошо.
1) Но там есть нейросеть, которая улучшает качество изображения. Эта нейросеть тренировалась на миллионах изображений, среди них было очень много изображений луны. А во время тренировки изображения подвергаются аугментации - вырезаются кусочки, к кусочкам применяются поворот, масштабирование и пр. Это еще больше увеличивает разнообразие изображений с которыми сталкивалась нейросеть. Таким образом нейросеть ну очень много изображений луны видела определенно точно, учитывая популярность этого объекта для фотографии.
2) Скорее всего там сверточная нейросеть (может конечно и более новая на визуальных трансформерах, но принцип там похожий). Сверточные сети по сути сравнивают в разных масштабах паттерны и находят характерные особенности. Таким образом там содержатся в свертках и кусочки луны, и формы носа и пр. и пр.
3) Обмануть нейросеть чесноком не получится - это может быть похоже только для человека, для нейросети это два совершенно разных объекта.
На этом же признаки работают сети увеличения разрешения, раскрашивания - они запоминают информацию о том, как устроен мир, распознают паттерн на реальном изображении и изменяют изображения привнося знания реального мира.
А вот если в обучающую выборку добавить непоравданно большое количество изображений луны, то луну она будет фотографировать очень хорошо.
фотографировать
Да Луна сама-то апще голограмма, чего уж спорить о самсунге! )
Вот и Юрий Лоза говорит то же самое! 😂
Луна всегда повернута к Земле одной стороной потому нужна только одна подробная фотка полной Луны, а там с учетом координат и времени высчитывается фаза и убирается лишнее. AI вносит вносит поправки на цвет, свет, дымку, облачность и демонстрируется приличное фото. ИМХО вполне такое может быть . Фотка заходящего Солнца в Таиланде вчера. S21 Ultra
Луна всегда повернута к Земле одной стороной
Я думал тоже луна получится. Ан нет...
А что все так любят фотографировать Луну? Зачем только из-за нее так заморачиваться?
И все фото в полнолуние, а там и не такое причудится 😁
Дифракционный предел для объектива 5 мм около полминуты дуги т е вся Луна по диаметру около 60 пикселей. Если разрешение явно больше, стоит задуматься
Доверять экспертности автора по имени Raymond Wong, неспособного просто сделать фото Луны отличным оборудованием, я бы не стал.
Интересно это будет тогда, когда фотография будет сделана телефоном "с рук" безо всякой фиксации аппарата.
В идеале, утром, с похмелья. )))
В идеале, утром, с похмелья. )))
Снято с рук безо всякой фиксации аппарата. Mi 11 Ultra. Но вечером и трезвым.
Но вечером и трезвым.
Снято с рук безо всякой фиксации аппарата. Mi 11 Ultra. Но вечером и трезвым.
Похоже, народ взволновался вовсе не какими-то там смартфонами с ИИ, а дрянной фоткой с телевика на сони.
Это, очевидно, чтоб лишний раз наглядно продемонстрировать, на сколько же прекрасно снимают современные телефоны по сравнению с бесполезными вымирающими фотоаппаратами.
на сколько
Да пофиг на Луну, пусть научатся женские лица подставлять 😄 Технология описана у Н. Носова в "Незнайке на воздушном шаре".
Мне кажется, наиболее универсальным решением было бы все-таки натренировать модель ML на работу с изображениями а-ля "Луна в кадре". В этом случае и никаких изображений Луны в чистом виде хранить не надо, и решение будет работать с приемлемым результатом в других похожих случаях.
Ну как бы да, телефон финальное изображение же не показывается при съемке. А при сохранении уже нейронка может дорисовать узнаваемые объекты.
Я проверял как-то этот расхожий баян, отключил в телефоне инет и GPS, снимал с опоры в ясную ночь и параллельно смотрел в телескоп с 60-кратным увеличением - никакой вклейки замечено не было.
И с тех пор верите, что у вас в телефоне эквивалент 60и кратного телескопа?
Ну,.. Отлично. Теперь попробуйте фотку, ну, к примеру, Сатурна телефончиком сделать, чтобы так же, как в телескопе получилось...
Ну,.. Отлично. Теперь попробуйте фотку, ну, к примеру, Сатурна телефончиком сделать, чтобы так же, как в телескопе получилось...
SONY A7RIII + 100-400GM + 1.4X Teleconverter, 560 mm, 1/320 sec, f/8, ISO 100
Дело не в телефоне, а кривых руках "Sony A7R III с телевиком 600 мм".
Дело не в телефоне, а кривых руках "Sony A7R III с телевиком 600 мм".
Дело не в телефоне, а кривых руках
Вот да, я тоже офигел от этого фото. У меня на Canon 200D с максимально бюджетным зумом на 250 мм получилось как-то так в свое время.
Смартфон хранит миллионы изображений Луны в зависимости от географических координат, также он хранит изображения различных фаз Луны для этих координат? Смешно. А всякие помехи, а облака?
Откуда они известны? Я снимал на huawei P30 pro в авиарежиме, со всеми выключенными внешними передатчиками. Из разных точек. Ничего не меняется вообще, луна такая же четкая и глазами видна ровно также.
Откуда они известны? Я снимал на huawei P30 pro в авиарежиме, со всеми выключенными внешними передатчиками. Из разных точек. Ничего не меняется вообще, луна такая же четкая и глазами видна ровно также.
Я на всякий случай подчеркну, что не утверждаю, что телефон делает именно так. Просто я не вижу больших проблем действительно так сделать. Учитывая, что при демонстрации супер-мега-зумов нам всегда показывают луну, самый простой объект для электронной ретуши, как минимум, сомнения обоснованы.
Дата и время известны всегда
и вот уже телефону "известны"
Включите авиарежим, выключите GPS, и вот уже телефону "известны" исключительно та дата и время, которые вы ему вручную установите.
Хм, как бы поступил я на месте разработчиков? 😄
Но не знаю насколько параноидальны разработчики 😄
Тогда уж проще GPS не выключать,
На самом деле, конечно же, нет необходимости в такой паранойе и очевидное решение - не вклеивать Луну из огромной базы данных, а накладывать на снятый нерезкий блин нейронный фильтр-улучшайзер. Решение и по памяти небольшое и не требует танцев с бубном вокруг часов-координат-наклонов.
не вклеивать Луну из огромной базы данных
достаточно видимой стороны в более-менее среднем разрешении. Всё.
а накладывать на снятый нерезкий блин нейронный фильтр-улучшайзер
Нейронный фильтр-улучшайзер построит вам в лучшем случае "какую-то поверхность, напоминающую лунную".
это генеративная сеть
"улучшить блин до Луны" существенно проще.
Причем с учетом количества людей, которые специально будут его искать, найдется максимум через неделю.
Причем с учетом количества людей, которые специально будут его искать, найдется максимум через неделю.
Процедурная генерация - oldest trick in the book.
а они уже ищут?
А почему из разных уголков Земли вдруг Луна выглядит по-разному? Плоская Земля и плоская Луна - как-будто с одного ковра фотографируешь другой ковер. Не вижу причин, по которой компании не смогли бы вмонтировать статичное круглое изображение в ИИ.
Странное исследование, на мой взгляд. Камера не приняла зубчик чеснка за Луну как доказательство, что телефон не дорисовывает картинку - серьезно? Чего все так зациклились именно на Луне? Нарисуйсте случайные патерны на куске фанеры, сфоткайте его с такого расстояния, при котором картинка займет столько же пикселей как Луна и посмотрите, что там получится на выходе. Вангую, что совсем не то, что с Луной.
А почему нельзя такую луну нарисовать-то? Телефон зная гепопозицию, дату и др. данные места съемки может сгенерировать подходящее изображение луны.
А почему нельзя такую луну нарисовать-то? Телефон зная гепопозицию, дату и др. данные места съемки может сгенерировать подходящее изображение луны.
А если там фонарь примерно в месте предполагаемого расположения луны?
Провода, мошек и облака, закрывающие луну, он тоже из данных места съемки возьмет?
Вычтет провода и облака из луны, как фильтр наложения в фотошопе. Позицию луны можно сверять по гироскопам, компасу и GPS чтобы понять что камера у вас направлена на луну. Ну и камера всё таки что-то узнаваемое должны передать. При сложности определения можно не накладывать луну, а снимать как есть.
Это в теории, естественно. )
Это в теории, естественно. )
Вычтет провода и облака из луны, как фильтр наложения в фотошопе. Позицию луны можно сверять по гироскопам, компасу и GPS чтобы понять что камера у вас направлена
Луна из разных уголков Земли смотрится по-разному
Луна из разных уголков Земли смотрится по-разному
P.S. Здесь нужно принять во внимание, что база в виде диаметра Земли значительно больше, и здесь уже соотношение не 1/100, а ближе к 4/100, что уже достаточно много. Поэтому, лучше все-таки посчитать.
По большому счету ничего не мешает запихнуть в память не плоскую фотографию, а проекцию на шар и крутить её до совпадения с реальностью (или просто просчитать - как луна будет выглядеть из данных координат в данное время суток и повернуть её на нужный угол).
двумя фотографиями Луны, сделанных одновременно из двух диаметрально противоположных точек Земли.
Мне почему-то кажется, что Земля будет закрывать Луну в одной из точек.
Конечно, так можно еще и либрацию Луны учитывать, вообще никаких проблем.
А Луна видна одновременно из двух диаметрально противоположных точек Земли?
Кстати, я таки посмотрел суточную либрацию, и если сравнивать взгляд двух диаметрально противоположных наблюдателей, то это соответствует повороту Луны на величину около 1 градуса. С одной стороны, хоть такое смещение и весьма мало, но в камеру смартфона все-таки будет заметно. С другой стороны, из-за нехватки разрешающей способности камеры, края лунного диска будут оставаться кашей из размазанных пикселей, и повороты будут в большей степени похожи на смещение плоской картинки из стороны в сторону, как если бы Луна была плоской с разретушированными краями.
Ну и в конечном итоге, величина суточной либрации оказывается в 7 раз меньше, чем месячные по широте и долготе. Так что мы в любом случае можем говорить о том, что исходное утверждение про "смотрится по-разному" было неверным.
Ну и в конечном итоге, величина суточной либрации оказывается в 7 раз меньше, чем месячные по широте и долготе. Так что мы в любом случае можем говорить о том, что исходное утверждение про "смотрится по-разному" было неверным.
и та же Луна, снятая на Sony A7R III с телевиком 600 мм.
Я вот баловался с 200мм когда-то на APS-C cо штатива - и то резче вышло (это уже пережатый фэйсбуком вариант)
Тоже показалось странным. Видимо с рук и еще это кроп с большего кадра. Видимо чтобы телефон был на уровне с DSLR в ревью.
Для примера нормальный DSLR прикрепляю
NIKON Z 7 + 600mm f/4 + 1.4x TC @ 850mm, ISO 64, 1/125, f/6.3
Для примера нормальный DSLR прикрепляю
NIKON Z 7 + 600mm f/4 + 1.4x TC @ 850mm, ISO 64, 1/125, f/6.3
Терминатор получился шикарно!
День выбрал здорово
День выбрал здорово
Я тоже снимал Луну на Соню кроп 6500 с обьекивом 300 мм. И получалось лучше.
Какой еще Терминатор? О чем вы? 😄
Резкость мимо или облачность там была. Я на 300 / 350 мм "сруки" Луны тоже без проблем делал и на кроп и на ФФ сони, она же яркая + стаб. А вот резкость да... надо внимательно следить, куда попадает.
У меня вот есть пример аж 2006 года. На древнюю мыльницу (Canon PowerShot A620), прислоненную к китайской подзорной трубе за три копейки.
и по поводу Huawei Mi 11 Ultra
А может Луны вообще не существует?
Половины так точно.
Половины так точно.
Луна обыкновенно делается в Гамбурге, и прескверно делается.
А может Луны вообще не существует?
Теги
Информация
Что ещё почитать
