Публикации по тематике bigquery

Публикации по теме 'bigquery'

Google BigQuery теперь подключен к Earth Engine

Как теперь вы можете запрашивать спутниковые изображения и наборы геопространственных данных с помощью SQL Google только что объявил, что теперь вы можете легко экспортировать данные из Earth Engine в BigQuery с помощью их нового коннектора[1]. Google Earth Engine сочетает в себе многопетабайтный каталог спутниковых изображений и наборов геопространственных данных с возможностями анализа планетарного масштаба. Вы можете использовать его, например, для обнаружения изменений,..

Когда появятся баги? Моделирование машинного обучения в BigQuery для прогнозирования следующей вспышки ошибок

Во-первых, с Новым годом 🎉 Поскольку лето в Австралии набирает обороты, мы начали 2020 год с небольшого веселья, пытаясь ответить на вопрос, который все думают в Австралии в это время года (особенно моя жена и дети!), а именно — когда будут баги?! Это предсказывает вспышки тараканов и комаров (также известных как москиты). Проект по прогнозированию ошибок фактически собрался еще в октябре. У нас было достаточно времени для исследования, итерации и тестирования, прежде чем летний сезон —..

Руководство по массивам и структурам в BigQuery

Научитесь работать с записями и повторяющимися полями Меня всегда раздражал SQL, потому что я не мог хранить списки удобным способом. К счастью, современные хранилища данных, такие как BigQuery, позволяют нам использовать массивы и структуры. Давайте посмотрим, как это работает, и научимся хранить и запрашивать вложенные данные! Создание массивов и структур Массивы Допустим, вы заказали несколько товаров в местном супермаркете. Вы можете сохранить свой заказ в таблице orders..

Памятка по машинному обучению BigQuery

Как инженер машинного обучения, работающий как с учеными, так и с аналитиками данных, я некоторое время боролся за минимизацию времени на тестирование и развертывание модели машинного обучения, сохраняя при этом производительность, необходимую для бизнеса. BigQuery ML занимает промежуточное положение, избегая экспорта данных, одновременно способствуя масштабируемости инфраструктуры и совместному использованию кода. Ниже приведена шпаргалка по командам SQL, которую я написал для..

Google запускает новые функции операторов JSON и Quantitive Like для BigQuery

Как Google помогает упростить работу с полу- и неструктурированными данными Две большие новости от BigQuery! Google только что объявил о новых функциях SQL, таких как количественный оператор LIKE и новая функция JSON. Давайте посмотрим на них! Начнем с количественного оператора LIKE , который в настоящее время находится на стадии предварительной версии. Количественный LIKE оператор С помощью количественного оператора LIKE вы можете проверить значение поиска на..

Google сделал WITH RECURSIVE общедоступным в BigQuery

WITH RECURSIVE и другие новые функции в Google BigQuery Google сделал функцию WITH RECURSIVE общедоступной. До этого он довольно долго был в предварительном просмотре. Это предложение позволяет включать в запрос одно или несколько рекурсивных общих табличных выражений (CTE) [1].

Как выполнять поиск по тексту и кластеризацию документов в BigQuery

Используйте встраивание документов в BigQuery для задач схожести документов и кластеризации BigQuery предлагает возможность загружать SavedModel TensorFlow и выполнять прогнозы. Эта возможность - отличный способ добавить текстовое подобие и кластеризацию поверх вашего хранилища данных. Затем скопируйте и вставьте запросы из моей записной книжки в GitHub . Вы можете опробовать запросы в консоли BigQuery или в блокноте AI Platform Jupyter. Данные отчетов о шторме В качестве..