Вопросы по теме 'bigtable'
Каков ваш подход к оптимизации больших таблиц (+1 миллион строк) на SQL Server?
Я импортирую данные бразильского фондового рынка в базу данных SQL Server. Прямо сейчас у меня есть таблица с информацией о ценах на три вида активов: акции, опционы и форварды. Я все еще в данных за 2006 год, а в таблице более полумиллиона записей....
20581 просмотров
schedule
05.04.2023
Модель данных Cassandra/BigTable — какой лучший подход для построения индексов?
Я занимаюсь переходом с MySQL на Cassandra для PenWag.com. В Cassandra я храню пользователей, отключенных от GUID, но пользователи входят в систему со своей электронной почтой, а не с GUID (очевидно). GUID как ключ для пользователей имеет для меня...
762 просмотров
schedule
16.09.2022
Google BigTable и бесплатная индексация текста
Основным примером статьи BigTable является хранение веб-контента в большой таблице. Есть ли статья, в которой обсуждается, как Google индексирует свободный текст? Было бы правильно использовать BigTable под капотом? Любая информация о схеме...
629 просмотров
schedule
21.05.2023
Индексы для моделей данных Google App Engine
У нас есть данные о погоде за многие годы, на основе которых нам нужно создать приложение для создания отчетов. Данные о погоде имеют много полей разных типов, например. город, штат, страна, почтовый индекс, широта, долгота, температура...
262 просмотров
schedule
03.01.2024
Некоторые опасения по поводу размещения платежного/транзакционного приложения в GAE
Я пытаюсь создать веб-приложение, похожее на корзину для покупок, на GAE. До сих пор я еще ничего не развертывал на GAE и просто продолжаю делать POC локально... затем я прочитал это:
http://borglin.net/gwt-project/?page_id=688
Меня удивило,...
109 просмотров
schedule
09.05.2023
Список уникальных значений свойства в Google App Engine
В настоящее время я переписываю приложение Python GAE на Java и сомневаюсь в дизайне своей сущности. У меня есть такие сущности, чтобы я мог запрашивать хранилище данных и легко получать уникальный список дизайнеров:
конструктор классов
Имя:...
210 просмотров
schedule
13.07.2022
Формат схемы улья?
Кто-нибудь знает, где искать пример схемы улья?
Допустим, вы хотите определить таблицу с 500 столбцами, и вы поместили эти 500 столбцов в электронную таблицу Excel, как вы можете заставить Hive читать эту схему из электронной таблицы Excel и...
147 просмотров
schedule
08.09.2023
как работает случайная запись hbase
Я новичок в Hbase. Hbase хорош для случайных обновлений (помещения или удаления) в таблицу, но я не могу понять, как это делает hbase. Поскольку hbase использует HDFS для своего хранилища, и невозможно ничего обновить в HDFS. Hbase использует...
1937 просмотров
schedule
28.09.2022
Как крайний срок 60-х применяется к извлечению appengine .run и .fetch?
В документации appengine указано, что крайний срок по умолчанию для .run() и .fetch() составляет 60 секунд. Я хотел бы точно понять, как применяется этот крайний срок, особенно в контексте задачи или задания cron, где общий процесс может выполняться...
68 просмотров
schedule
09.01.2023
Как подключить google bigtable вне облачной платформы google
У меня создан кластер Google Bigtable. Я пытаюсь подключиться, следуя этому руководству . Я пытался загрузить их cli и построить его, но когда я пытаюсь выполнить любую команду, он терпит неудачу. Также я попытался построить свой более простой...
1747 просмотров
schedule
04.05.2022
Failed to listTables: Missing authentication for Google BigTable?
Мне не удалось найти в Интернете много информации об этой проблеме, но ...
Я настраиваю новый кластер BigTable в облачных сервисах Googles. Я прошел через весь процесс, который вы выполняете с большинством API Google (создание учетной записи...
667 просмотров
schedule
30.05.2023
Не удается подключиться к Bigtable из приложения Spring Boot
У меня есть отдельное приложение, которое отлично работает с Bigtable при создании такого соединения:
Connection connection = BigtableConfiguration.connect(PROJECT_ID, INSTANCE_ID)
и используя следующие зависимости:
<dependency>...
929 просмотров
schedule
26.04.2024
Bigquery не удается загрузить данные Неверный формат значения даты или метки времени
1.Error while uploading CSV , where Data format is '0000-00-00' && timestamp has '0000-00-00 00:00:00' value.
2.The Datatype is DATE, TIMESTAMP as Follows.
Я пропустил какой-либо флажок игнорирования. Пытался игнорировать все...
2601 просмотров
schedule
21.02.2023
checkAndPut всегда завершается успешно
Я держу счетчик в большой таблице и хочу поместить некоторые данные, когда счетчик достигает X. В настоящее время я делаю это следующим образом:
Put put = new Put(EXAMPLE_ROW_KEY);
put.addColumn(EXAMPLE_COLUMN_FAMILY, NEW_QUALIFIER, NEW_VALUE);...
358 просмотров
schedule
31.01.2023
Избегайте точек доступа в BigTable или HBase с помощью ключей SHA1
Я использую Google BigTable для хранения данных журнала событий в соответствии со следующими ограничениями:
Каждый ключ должен содержать имя пользователя и метку времени, что позволяет непрерывно читать данные временного ряда для каждого...
440 просмотров
schedule
30.09.2022
BigTable в AppEngineStandard
Клиентская библиотека Google Bigtable Python несовместима со стандартной средой хостинга App Engine.
Кто-нибудь знает, есть ли способ подключиться к Bigtable из APP ENGINE STANDARD или мне следует использовать гибкий?
Спасибо, что ответили...
36 просмотров
schedule
29.12.2022
BigQuery — дизайн таблицы измерений для DataWarehouse?
Я заметил, что BigQuery хорош для хранения исторических данных, но не так эффективен при обновлении отдельных записей.
Насколько эффективно для исторических данных поддерживать таблицу измерений в BigQuery в «парадигме измерений и фактов»? Я хочу...
971 просмотров
schedule
02.12.2022
Как установить дату вставки в будущем в Google Cloud Bigtable? Попытка рассчитать это с помощью TTL
У меня есть таблица только с одним семейством столбцов, этот столбец имеет TTL 172800 СЕКУНД (2 ДНЯ), мне нужно удалить некоторые данные до крайнего срока. Если я хочу, чтобы значение истекло через 5 минут, я вычисляю время истечения и устанавливаю...
387 просмотров
schedule
12.06.2022
Как Nosql, например bigtable, хранит данные изображений?
В документе Bigtable он представлен распределенной системой хранения структурированных данных.
Меня смущают термины "структурированные данные". Я знаю, что структурированные данные настолько формальны, что данные легко классифицировать и искать....
295 просмотров
schedule
07.04.2022
Использование версий столбцов для временных рядов
В официальной документации есть текст, для которого Я не могу полностью понять причину:
При работе с временными рядами не используйте транзакционное поведение строк. Изменения данных в существующей строке следует сохранять как новую,...
170 просмотров
schedule
29.10.2022
