Два новых выпуска Azure Analytics GA, один предварительный просмотр и большой толчок к SQL DW

Эндрю Бруст для Big on Data | 7 февраля 2019 — 16:00 по Гринвичу (08:00 по тихоокеанскому времени) | Тема: Аналитика больших данных

Сегодня Microsoft делает множество объявлений с данными Azure как на уровне озера данных, так и на уровне хранилища данных.

Во-первых, Microsoft Azure Data Explorer (ADX) выпускает продукт для общего доступа (GA). ADX, о котором я писал только на прошлой неделе, представляет собой платформу хранения, обработки запросов и визуализации больших данных со специальным умением для анализа временных рядов.

Магазин (озеро данных) открыт для бизнеса

Затем, хранилище Azure Data Lake Storage (ADLS) Gen2 сегодня попадает и в GA. В отличие от начальной версии ADLS, выпуск Gen2 работает как расширенный набор хранилища BLOB-объектов Azure, но на его основе размещается истинная иерархическая файловая система, а также возможность обрабатывать произвольно большие файлы. Иерархические файловые системы имеют первоклассную поддержку структур папок. Это важно в приложениях больших данных, где данные часто разделяются на группы файлов последовательностей, разделенных по папкам, что требует операций на уровне папок, которые могут обрабатывать все файлы в папке как одну единицу данных.

Читайте так же

Выпуск Sony Xperia XZ4 Этот телефон — самая ... Ожидается, что XPERIA XZ4 будет представлен, когда Sony выйдет на сцену на Mobile World Congress (MWC) на следующей неделе, но, как представляется, перед демонстрацией японская фирма дразнила главную функцию флагмана. Xperia XZ4. предполагаемое имя, данное преемнику Xperia XZ3, и, по слухам, оно внесет ряд существенных изменений для поклонников An...
Как скачать фильмы с Netflix для просмотра в автон... Вам предстоит долгая поездка на самолете? Вот как скачать фильмы с Netflix Netflix отлично подходит для тех случаев, когда вы хотите провести ночь на диване, используя устойчивое соединение Wi-Fi от вашего потрясающего нового маршрутизатора, но что произойдет, когда вы столкнетесь с самой длинной в мире поездкой на самолете? Ответ прост: загрузите...
Galaxy Watch Active, Galaxy Fit Когда, где, как сд... Вот как убедиться, что у вас на запястье есть последние умные часы от Samsung в день запуска. Samsung не только анонсировал новые смартфоны в среду, компания также представила трио новых носимых устройств. Galaxy Fit и Galaxy Watch Active. для вашего запястья, а Galaxy Buds. для ваших ушей. Galaxy Watch Active от Samsung имеет внешний вид и фун...
Samsung может потерять предварительные заказы Gala... Google облегчает создание приложений Android на Chromebook Google добавляет режим покадровой съемки на каждую камеру Pixel Конец Works With Nest может стать проблемой для умных домов Рекламные ссылки На короткое время будущее Samsung Galaxy Fold выглядело радужно: так много людей сделали предварительный заказ на складной смартфон стоимостью 1 9...

Стандартные системы хранения облачных объектов хранят все файлы в контейнере корневого уровня и создают «иллюзию» папок, внедряя имена каталогов в метаданные файлов. Доступность ADLS Gen2 по существу даст Microsoft двухуровневое решение для хранения данных, чтобы противостоять Amazon S3. Хотя универсальная история Amazon обладает преимуществом простоты, ADLS предоставляет Microsoft отличное решение для больших данных, основанное на технологии хранения объектов, а не отдельный продукт.

В этом первом выпуске файловым системам ADLS Gen2 будет не хватать обратной совместимости с API хранилища BLOB-объектов, но это будет добавлено позже. Плюс, есть много прямой поддержки Gen2, вне ворот. Например, Apache Hadoop 3.2, выпущенный в прошлом месяце, предлагает прямую поддержку ADLS Gen2. Различные поставщики экосистемы больших данных, в том числе Cloudera, Dremio и Arcadia Data, также приняли на себя обязательства по ADLS. А в мире Microsoft многочисленные облачные службы данных, включая блоки данных Azure, HDInsight, Power BI и фабрику данных Azure, также поддерживают ADLS Gen2 напрямую.

Давайте наглядно

Говоря о фабрике данных Azure (ADF), эта служба теперь предлагает средство визуального потока данных в общедоступном предварительном просмотре. Хотя в течение некоторого времени ADF предоставлял визуальный конструктор для управляемых им оркестровок, фактическая работа по проектированию данных должна была выполняться во внешних сценариях, которые ADF мог выполнять. Визуальные потоки данных позволят выполнять работу по проектированию данных в визуальном конструкторе, который будет генерировать код за кулисами.

Визуальные потоки данных ADF не следует путать с функцией потоков данных в Power BI, публичный предварительный просмотр которой был объявлен три месяца назад. Потоки данных Power BI представляют собой облачную реализацию технологии Power Query, которая также позволяет выполнять визуальные инженерные работы (под названием «подготовка данных») и которая также генерирует код (на языке Microsoft, который называется M ) сделать это. Название столкновения вызывает сожаление, но, надеюсь, Microsoft исправит его.

Что бы это ни стоило, потоки данных Power BI используют хранилище ADLS Gen2 за кулисами.

Доставка со склада

Читайте так же

Как скачать фильмы с Netflix для просмотра в автон... Вам предстоит долгая поездка на самолете? Вот как скачать фильмы с Netflix Netflix отлично подходит для тех случаев, когда вы хотите провести ночь на диване, используя устойчивое соединение Wi-Fi от вашего потрясающего нового маршрутизатора, но что произойдет, когда вы столкнетесь с самой длинной в мире поездкой на самолете? Ответ прост: загрузите...
Предварительный заказ Huawei P30 будет включать в ... Huawei анонсирует P30 и P30 Pro 26 марта, но очень мало что остается для воображения после того, как страницы предварительного заказа для обоих устройств появились на официальных французских и голландских сайтах Huawei. Страницы предварительного заказа не только подтверждают, что P30 Pro будет поставляться с четырехместной камерой Leica и 10-кратн...
Аварийный выпуск TP-Link от Amazon, включающий в с... Вы можете купить игровой роутер TP-Link Archer C5400 за 168 среди многих других сделок. Если вам нужен новый маршрутизатор или вы хотите сделать свой дом более интеллектуальным, сегодня хороший день, чтобы отправиться в Amazon. Интернет-магазин распродает огромные однодневные распродажи продуктов TP-Link. Удалите ссылки, не относящиеся к продуктам...
Выпуск iPhone 5G может быть перенесен на 2021 год... В новой записке инвестора от Тимоти Аркури (получен через CNBC), аналитик UBS пишет, что проблемы с поставками могут вынудить Apple отложить свой iPhone, совместимый с 5G, до 2021 года. Поскольку Apple все еще запутывается в судебной тяжбе с Qualcomm, Arcuri заявляет, что Intel, возможно, не сможет поставлять модемы 5G в масштабе, необходимом Apple...

Сравнение цены и производительности SQL DW, Redshift и BigQuery на основе тестов Gigaom.

Кредит: Microsoft и Gigaom

Молодое поколение

В настоящее время Microsoft запустила итерации «Gen2» хранилища и хранилища данных озера данных и итерацию «Factory v2» для Data Factory. А с учетом того, что Power BI обновляется каждый месяц, этот продукт, вероятно, сейчас стоит на уровне Gen42.

Microsoft использует олл-ин в облаке, облако олл-ин в отношении данных, и облако уже взросло. Результат? Стремясь завоевать Enterprise, крупные поставщики общедоступных облачных услуг обновляют свои услуги передачи данных, чтобы достичь, а затем превзойти паритет с лучшими локальными предложениями. Это касается не только базовых услуг баз данных, но и хранилищ данных, BI, проектирования данных и анализа больших данных. Сегодняшний день знаменует собой начало следующей большой главы Microsoft в этой эпической истории.

Раскрытие информации: я сам выполняю аналитическую работу для Gigaom, ориентированную на данные и аналитику, но я не был вовлечен в работу по тестированию SQL DW.

Читайте так же

Galaxy Watch Active, Galaxy Fit Когда, где, как сд... Вот как убедиться, что у вас на запястье есть последние умные часы от Samsung в день запуска. Samsung не только анонсировал новые смартфоны в среду, компания также представила трио новых носимых устройств. Galaxy Fit и Galaxy Watch Active. для вашего запястья, а Galaxy Buds. для ваших ушей. Galaxy Watch Active от Samsung имеет внешний вид и фун...
Выпуск Sony Xperia XZ4 Этот телефон — самая ... Ожидается, что XPERIA XZ4 будет представлен, когда Sony выйдет на сцену на Mobile World Congress (MWC) на следующей неделе, но, как представляется, перед демонстрацией японская фирма дразнила главную функцию флагмана. Xperia XZ4. предполагаемое имя, данное преемнику Xperia XZ3, и, по слухам, оно внесет ряд существенных изменений для поклонников An...
Предварительный обзор Sony Xperia XZ2 и XZ2 Compac... MWC 2018 в самом разгаре! Одними из самых любопытных устройств барселонской выставки стали Xperia XZ2 и Xperia XZ2 Compact, ставшие самым масштабным обновлением серии за многие годы. В новом сезоне японская компания обновила дизайн, применив концепцию Ambient Flow с изогнутой задней панелью «лодочкой», научила смартфоны снимать видео в формате 4К H...
Аварийный выпуск TP-Link от Amazon, включающий в с... Вы можете купить игровой роутер TP-Link Archer C5400 за 168 среди многих других сделок. Если вам нужен новый маршрутизатор или вы хотите сделать свой дом более интеллектуальным, сегодня хороший день, чтобы отправиться в Amazon. Интернет-магазин распродает огромные однодневные распродажи продуктов TP-Link. Удалите ссылки, не относящиеся к продуктам...