Два новых выпуска Azure Analytics GA, один предварительный просмотр и большой толчок к SQL DW

Эндрю Бруст для Big on Data | 7 февраля 2019 — 16:00 по Гринвичу (08:00 по тихоокеанскому времени) | Тема: Аналитика больших данных

Сегодня Microsoft делает множество объявлений с данными Azure как на уровне озера данных, так и на уровне хранилища данных.

Во-первых, Microsoft Azure Data Explorer (ADX) выпускает продукт для общего доступа (GA). ADX, о котором я писал только на прошлой неделе, представляет собой платформу хранения, обработки запросов и визуализации больших данных со специальным умением для анализа временных рядов.

Магазин (озеро данных) открыт для бизнеса

Читайте так же
Предварительный заказ Huawei P30 будет включать в ... Huawei анонсирует P30 и P30 Pro 26 марта, но очень мало что остается для воображения после того, как страницы предварительного заказа для обоих устройств появились на официальных французских и голландских сайтах Huawei. Страницы предварительного заказа не только подтверждают, что P30 Pro будет поставляться с четырехместной камерой Leica и 10-кратн...
Выпуск Galaxy Note 10 на этой неделе — пять ... Galaxy Note 10 выйдет на этой неделе. Пять вещей, которые Samsung должен исправить на своем новом флагмане Новая Galaxy Note 10 от SAMSUNG, наконец, будет представлена ​​позже на этой неделе, но вот пять вещей, которые корейская фирма должна исправить, чтобы сделать этот смартфон идеальным. Samsung Galaxy Note 10 релиз (Изображение: PH) Осталось...

Затем, хранилище Azure Data Lake Storage (ADLS) Gen2 сегодня попадает и в GA. В отличие от начальной версии ADLS, выпуск Gen2 работает как расширенный набор хранилища BLOB-объектов Azure, но на его основе размещается истинная иерархическая файловая система, а также возможность обрабатывать произвольно большие файлы. Иерархические файловые системы имеют первоклассную поддержку структур папок. Это важно в приложениях больших данных, где данные часто разделяются на группы файлов последовательностей, разделенных по папкам, что требует операций на уровне папок, которые могут обрабатывать все файлы в папке как одну единицу данных.

Стандартные системы хранения облачных объектов хранят все файлы в контейнере корневого уровня и создают «иллюзию» папок, внедряя имена каталогов в метаданные файлов. Доступность ADLS Gen2 по существу даст Microsoft двухуровневое решение для хранения данных, чтобы противостоять Amazon S3. Хотя универсальная история Amazon обладает преимуществом простоты, ADLS предоставляет Microsoft отличное решение для больших данных, основанное на технологии хранения объектов, а не отдельный продукт.

В этом первом выпуске файловым системам ADLS Gen2 будет не хватать обратной совместимости с API хранилища BLOB-объектов, но это будет добавлено позже. Плюс, есть много прямой поддержки Gen2, вне ворот. Например, Apache Hadoop 3.2, выпущенный в прошлом месяце, предлагает прямую поддержку ADLS Gen2. Различные поставщики экосистемы больших данных, в том числе Cloudera, Dremio и Arcadia Data, также приняли на себя обязательства по ADLS. А в мире Microsoft многочисленные облачные службы данных, включая блоки данных Azure, HDInsight, Power BI и фабрику данных Azure, также поддерживают ADLS Gen2 напрямую.

Давайте наглядно

Читайте так же
Выпуск Sony Xperia XZ4 Этот телефон — самая ... Ожидается, что XPERIA XZ4 будет представлен, когда Sony выйдет на сцену на Mobile World Congress (MWC) на следующей неделе, но, как представляется, перед демонстрацией японская фирма дразнила главную функцию флагмана. Xperia XZ4. предполагаемое имя, данное преемнику Xperia XZ3, и, по слухам, оно внесет ряд существенных изменений для поклонников An...
Предварительный обзор Sony Xperia XZ2 и XZ2 Compac... MWC 2018 в самом разгаре! Одними из самых любопытных устройств барселонской выставки стали Xperia XZ2 и Xperia XZ2 Compact, ставшие самым масштабным обновлением серии за многие годы. В новом сезоне японская компания обновила дизайн, применив концепцию Ambient Flow с изогнутой задней панелью «лодочкой», научила смартфоны снимать видео в формате 4К H...

Говоря о фабрике данных Azure (ADF), эта служба теперь предлагает средство визуального потока данных в общедоступном предварительном просмотре. Хотя в течение некоторого времени ADF предоставлял визуальный конструктор для управляемых им оркестровок, фактическая работа по проектированию данных должна была выполняться во внешних сценариях, которые ADF мог выполнять. Визуальные потоки данных позволят выполнять работу по проектированию данных в визуальном конструкторе, который будет генерировать код за кулисами.

Визуальные потоки данных ADF не следует путать с функцией потоков данных в Power BI, публичный предварительный просмотр которой был объявлен три месяца назад. Потоки данных Power BI представляют собой облачную реализацию технологии Power Query, которая также позволяет выполнять визуальные инженерные работы (под названием «подготовка данных») и которая также генерирует код (на языке Microsoft, который называется M ) сделать это. Название столкновения вызывает сожаление, но, надеюсь, Microsoft исправит его.

Что бы это ни стоило, потоки данных Power BI используют хранилище ADLS Gen2 за кулисами.

Доставка со склада

Сравнение цены и производительности SQL DW, Redshift и BigQuery на основе тестов Gigaom.

Читайте так же
Предварительный обзор Sony Xperia XZ2 и XZ2 Compac... MWC 2018 в самом разгаре! Одними из самых любопытных устройств барселонской выставки стали Xperia XZ2 и Xperia XZ2 Compact, ставшие самым масштабным обновлением серии за многие годы. В новом сезоне японская компания обновила дизайн, применив концепцию Ambient Flow с изогнутой задней панелью «лодочкой», научила смартфоны снимать видео в формате 4К H...
Предварительные заказы на Huawei Y9 Prime 2019 нач... Начало предварительных заказов на Huawei Y9 Prime 2019 в Индии: цена, характеристики, преимущества предварительного заказа, Все клиенты, которые делают предварительный заказ, получают бесплатные наушники Huawei Sport BT и аккумулятор Power Bank емкостью 15 600 мАч по цене рупий. 4598. Huawei Y9 Prime 2019 поставляется с тройной настройкой задней...

Кредит: Microsoft и Gigaom

Молодое поколение

В настоящее время Microsoft запустила итерации «Gen2» хранилища и хранилища данных озера данных и итерацию «Factory v2» для Data Factory. А с учетом того, что Power BI обновляется каждый месяц, этот продукт, вероятно, сейчас стоит на уровне Gen42.

Microsoft использует олл-ин в облаке, облако олл-ин в отношении данных, и облако уже взросло. Результат? Стремясь завоевать Enterprise, крупные поставщики общедоступных облачных услуг обновляют свои услуги передачи данных, чтобы достичь, а затем превзойти паритет с лучшими локальными предложениями. Это касается не только базовых услуг баз данных, но и хранилищ данных, BI, проектирования данных и анализа больших данных. Сегодняшний день знаменует собой начало следующей большой главы Microsoft в этой эпической истории.

Раскрытие информации: я сам выполняю аналитическую работу для Gigaom, ориентированную на данные и аналитику, но я не был вовлечен в работу по тестированию SQL DW.

Читайте так же
Microsoft использует Dynamics 365 для управления в... Вот как Microsoft использует собственную службу поддержки клиентов Dynamics 365 для управления публикацией не только Windows 10, но и предыдущих обновлений клиента и сервера Windows через Центр обновления Windows. Мэри Джо Фоули для всех о Microsoft | 19 августа 2019.- 15:21 GMT (08:21 PDT) | Тема: Windows Windows 10 Сотрудникам Microsoft часто...
Galaxy Watch Active, Galaxy Fit Когда, где, как сд... Вот как убедиться, что у вас на запястье есть последние умные часы от Samsung в день запуска. Samsung не только анонсировал новые смартфоны в среду, компания также представила трио новых носимых устройств. Galaxy Fit и Galaxy Watch Active. для вашего запястья, а Galaxy Buds. для ваших ушей. Galaxy Watch Active от Samsung имеет внешний вид и фун...