Архив меток: big data

Технические революции и геофизика

06.12.2016 Amazon открывает в США магазин без продавцов, касс и очередей
https://ria.ru/world/20161206/1482909611.html
23.03.2017 Как в США умирают торговые центры с приходом онлайн-ритейлеров
https://ria.ru/world/20161206/1482909611.html
31.07.2017 Эффект Amazon: традиционный ритейл уходит с рынка
http://www.vestifinance.ru/articles/88963

09.08.2017 «Яндекс» и Сбербанк будут торговать вместе.
Они создадут СП на базе «Яндекс.Маркета»
https://www.kommersant.ru/doc/3379277

13.07.2017 Яндекс и Uber приняли решение объединить свои бизнесы по онлайн-заказу поездок и создать для этого новую компанию. Она будет работать в России, а также в Азербайджане, Армении, Беларуси, Грузии и Казахстане.
https://yandex.ru/blog/company/130717

— — — —
На технологическом форуме Газпром нефти 26-27 июля 2017
С удивлением узнал, что широко простирает Яндекс руки свои в дела человеческие Яндекс добралася уже до геофизики
https://yandexterra.ru

Первый доклад на форуме был
Технологии Prime. На какие вопросы может ответить лучевое моделирование
Яндекс Терра (ООО «Сейсмотек»)

Пятый доклад на форуме был
Технологии Prime. Дополнительные возможности параметризации сейсмических волновых полей при построении глубинно-скоростных моделей сред на примере обработки синтетических данных
Яндекс Терра (ООО «Сейсмотек»)

Добрался весьма традиционно, объединившись с уже существующей компанией.

Действуют «новички» не оглядываясь на стереотипы, присущие конкретной отрасли.

На первый доклад выпустили ведущего программиста.
И он зажёг! Действовал по-суворовски: «удивить-победить»
Поразил числом кластеров, числом операций в секунду и прочими большими числами, которые может упомянуть программист для убедительности.
Делал лучевое моделирование для сейсморазведки, 48-слойная модель и почти полный учет неоднородностей верхней части разреза. Мимоходом обмолвился только что вся стройная картина прямой задачи начинает разваливаться некоторых особенностях задания данных. И модель надо понимать однородная.
Все вопросы были к частностям, никто не оспаривал такой подход.

На пятый доклад выпустили ведущего геофизика, хотя надо было бы наоборот: сначала геофизика, а потом программиста.
Понятное дело, геофизик не зажёг.
Потому как не зажгли сейсморазведочные доклады 2-4, которые мужественно боролись с вечной проблемой ВЧР разными способами.
От блеска первого доклада в пятом докладе не осталось ничего, еще один новый эмпирико-практический подход ВЧР, о 48 слоях и полном учете неоднородностей естественно речи не было.
На вопрос по первому докладу откуда же берутся данные для 48 слоев ответил, что из каротажа.
Хотя в реальной практике сейсморазведка выдает дай бог восемь структурных карт.

Но несмотря на это мелкое геофизическое брюзжание Яндекс гордо идет вперед: Биг Дата и гигантские вычислительные кластеры — это модный тренд.
А вливание 40-50 млрд. рублей от Сбербанка вполне может помочь в конкурентной борьбе с традиционной геофизикой, хотя бы путем демпинга.
Тем более, что старые «традиционные» нефтегеофизики начинают делиться на независимые полевые ООО и камеральные ООО.
Единственным спасением «традиционной» геофизики может быть только малый объем геофизического рынка и его «старость», когда основные игроки уже сформировались, и специфика геофизики, когда не все данные формализованы.

Но если гнаться за дешевизной, то Яндекс при определенных усилиях сможет проглотить и этот рынок. Но это не сейчас, сейчас идет освоение массовых и простых ниш: заказ такси и торговля. Геофизика пока очень сложна и очень малоформализована в отличие от других областей. Но лет через 10-15, когда торговля и сопутствующие операции будут полностью переварены Яндексом, дойдет черед до геофизики.

Реклама

Оцифровщик картинок и графиков

В свежем arXiv — статья о полезной программке.
WebPlotDigitizer, a polyvalent and free software to extract spectra from old astronomical publications: application to ultraviolet spectropolarimetry
F. Marin, A. Rohatgi, S. Charlot
Comments: 5 pages, 3 figures. To appear in the Proceedings of the French Society of Astronomy & Astrophysics (SF2A)
Cite as: arXiv:1708.02025 [astro-ph.IM]

Задача съемки данных с оупбликованных графиков, спектров и пр. (особенно старых, когда уже не найти авторов или им уж ене найти данных) в моей практике часто встречается.

Сайт проекта
http://arohatgi.info/WebPlotDigitizer/

традиционно используемый Dexter вшитый в NASA ADS
http://dc.zah.uni-heidelberg.de/sdexter

http://moisav.livejournal.com/385246.html

Демографические и другие тренды

Роман Смирнов
https://aftershock.news/?q=blog/14395
Биотехнологии
https://aftershock.news/?q=node/546340
https://aftershock.news/?q=node/548527

Рейтинги банков
http://www.banki.ru/banks/ratings/

Открытые данные Сбербанка
http://www.sberbank.com/ru/opendata

World Trade Statistical Review 2016
https://www.wto.org/english/res_e/statis_e/wts2016_e/wts2016_e.pdf

Long-term macroeconomic forecasts Key trends to 2050
http://espas.eu/orbis/sites/default/files/generated/document/en/Long-termMacroeconomicForecasts_KeyTrends.pdf

Global trends Paradox of progress (Director of National Intelligence)
https://www.dni.gov/files/documents/nic/GT-Full-Report.pdf

The Economic Power of Cities Compared to Nations
https://www.citylab.com/life/2017/03/the-economic-power-of-global-cities-compared-to-nations/519294/

The Global Talent Index
http://www.globaltalentindex.com/Resources/gti-map.aspx
Global Talent Competitiveness Index
https://www.insead.edu/global-indices/gtci

https://yadi.sk/d/UHn1TNsZ3LeMXU

carboncapturereport.org

Обнаружил на днях интересный проект Иллинойского университета — carboncapturereport.org, система мониторит в автоматическом режиме новости, твиты , высказывания «персон» по темам:
Climate Change, Carbon Capture, Carbon Credits, Alternative Energy, Biofuels, Geothermal, Hydroelectric, Natural Gas, Nuclear, Solar, Wind, Coal, Oil. Механически оценивая «окраску» сообщений по тексту, формирует ежедневный отчет, присваивает каждому источнику индекс… . Если по щелкать по данным, в принципе видно, что рано или поздно даже мышь не проскочит, так для себя все сгрузил подумать.
https://aftershock.news/?q=node/460089

Реально биг дата https://romansmirnov.org/?mode=blog_view&id=255