Старая пословица гласит, что если всё, чем мы обладаем, это молот, то каждая проблема воспринимается как гвоздь, пишет в своей статье Mikael Stern на сайте www.geospatialworld.net. Поэтому, чем больше проблемы, тем большим должен быть молот ...
Европейские спутники Sentinel предоставляют ежедневно более 10 ТB бесплатных снимков. В течение последних нескольких лет появлялась информация о действительно потрясающих новых подходах к обработке данных в таких масштабах. Они варьировались от большего объёма памяти и быстродействия процессоров до более толстого оптоволокна и массового использования «облака». Звучит, как Большие данные нуждаются в Большом молоте, ... верно?
Итак, вот одна мысль.
Лишь небольшая часть данных коммерческих спутников когда-либо была востребована. Не позволительно обрабатывать все данные одинаково. Разве есть уверенность, что молот подходит для работы? Передача данных, их обработка и хранение требуют расходов, особенно, если передаются, обрабатываются и хранятся все данные. Обработка обычно означает сохранение одних и тех же данных вновь и вновь в нескольких версиях. Это отлично, если вы продаете все хранящиеся данные.
Но, допустим, у вас подготовлены для продажи все эти продукты. Насколько велика вероятность того, что вы имеете именно то, в чём действительно нуждается конкретный потребитель? Тот самый случай: «один размер не подходит никому». Спутники Sentinel отличны во многих отношениях, но их стандартные продукты не совсем подходят для всех, если взяты прямо из хранилища. Почему отсутствует гибкость?
Есть перспективные решения, которые можно было бы осторожно назвать «более умными» подходами. Методы «точно в срок» или «бережливость» существуют уже давно и они могут оказывать положительное влияние на итоговый результат, как с точки зрения инвестирования, так и эксплуатационных расходов:
- перемещать только те данные, которые действительно необходимо перемещать;
- не обрабатывать данные до тех пор, пока в этом нет необходимости;
- обрабатывать только необходимые данные.
Автор статьи сомневается, что кто-то считает это противоречивыми идеями. Так почему мы застряли в старой парадигме «всё перемещать / обрабатывать / хранить»? В конце концов, это дошло до нас с первых дней спутниковой визуализации, когда технология не давала нам никакой альтернативы. Сегодня есть другие варианты. И, конечно, теперь все говорят о переработке «на лету», но, как правило, это находится в самом конце цепи, только после того, как значительные деньги уже переданы нашим трем старым друзьям — транспортировке, обработке и хранению всех данных.
Полагаю, отмечает далее Mikael Stern, что корень проблемы заключается в неправильном понимании того, что гибкость является дорогостоящей. То есть, гибкость в выборе, обработке и обслуживании только данных, необходимых для удовлетворения конкретных потребностей клиента. Сегодня весь процесс можно построить именно таким образом, начиная с наземной станции (или даже самого спутника), вплоть до пользователя. И придание гибкости не должно стоить дорого. В течение всего срока эксплуатации группировки она будет выплачивать дивиденды за счет экономии затрат на передачу, обработку и хранение данных. Поэтому можно сказать, что «более разумные» подходы выгодны, и, возможно, это даже более существенно для нормальных компаний, занимающихся спутниковыми снимками. Сфокусируйтесь на быстром доступе и обработке данных, необходимых для создания именно того продукта, который нужен клиенту, — без финансовых затрат и усилий на всё остальное.
Инновационные способы поддержания контроля над капитальными вложениями и операционными расходами повышают конкурентоспособность. Все должны согласиться с тем, что молоты не имеют большого преимущества. Технологии существуют, но для начала нам нужно изменить нашу точку зрения. Как только мы отпустим молот, вся цепочка данных окажется тощей и неустойчивой. Мы не должны пытаться предоставить все данные для всех (или, действительно, большую часть из них никому), — вместо этого мы предоставим правильные данные нужным людям, когда им это необходимо.