Вопросы по теме 'google-cloud-bigtable'

Как подключить google bigtable вне облачной платформы google
У меня создан кластер Google Bigtable. Я пытаюсь подключиться, следуя этому руководству . Я пытался загрузить их cli и построить его, но когда я пытаюсь выполнить любую команду, он терпит неудачу. Также я попытался построить свой более простой...
1747 просмотров
schedule 04.05.2022

Ошибка импорта большой таблицы
Я сгенерировал файл последовательности с помощью куста и попытался импортировать его в bigtable, мое задание импорта завершается с ошибкой, указанной ниже. 2015-06-21 00:05:42,584 INFO [AsyncDispatcher event handler]...
328 просмотров
schedule 28.03.2023

Использование Google Dataproc для импорта данных CSV в Bigtable
Я пытаюсь использовать экземпляр кластера Dataproc для импорта больших файлов CSV в HDFS, а затем экспортировать их в SequenceFile , а затем, наконец, импортировать последнюю версию в Bigtable, как описано здесь:...
1563 просмотров

Failed to listTables: Missing authentication for Google BigTable?
Мне не удалось найти в Интернете много информации об этой проблеме, но ... Я настраиваю новый кластер BigTable в облачных сервисах Googles. Я прошел через весь процесс, который вы выполняете с большинством API Google (создание учетной записи...
667 просмотров

Монотонно увеличивающиеся ключи в Google Cloud Bigtable явно задокументированы как проблемные, но как сравнивать монотонно уменьшающиеся ключи?
Опасности использования монотонно увеличивающегося ключа (например, традиционной временной метки) являются довольно четко изложено в документации . Что менее ясно на момент написания этой статьи, так это вероятное влияние использования монотонно...
345 просмотров
schedule 15.05.2022

Google Cloud Bigtable: запрос частичных ключей
Итак, если у меня в Bigtable есть следующие данные: DEL_6878 ..... DEL_6879 ..... BOM_5876 ..... SFO_8686 ..... SFO_8687 ..... Как мне запросить, скажем, записи SFO *? Прочитал документацию; Я знаю, как получить одну строку; что-то похожее...
2410 просмотров
schedule 21.07.2023

Эмулятор Google Cloud Bigtable, похоже, отказывается от семейств столбцов
Я пытаюсь создать таблицу с одним семейством столбцов (нацеленный на эмулятор Google Cloud Bigtable с использованием клиентской библиотеки Java 0.9.1). private void setupTable() throws IOException { TableName name =...
226 просмотров
schedule 13.10.2022

Объединяйте таблицы в Cloud Bigtable и BigQuery
можно ли объединить 2 таблицы в Cloud Bigtable и BigQuery? Я много искал в Google, но не смог найти ничего, связанного с этим. Любая помощь будет оценена по достоинству.
501 просмотров

Как читать и записывать данные в Google Cloud Bigtable в приложении PySpark?
Я использую Spark в кластере Google Cloud Dataproc и хочу получить доступ к Bigtable в задании PySpark. Есть ли у нас какой-либо соединитель Bigtable для Spark, например соединитель Google BigQuery? Как мы можем получить доступ к Bigtable из...
2786 просмотров

Управление Google Cloud Bigtable из SQLAlchemy
Кажется, что SQL Alchemy может подключаться к таблице MySQL, запущенной в Google Cloud SQL. Однако я потратил время на поиски оболочки для базы данных NoSQL Google Cloud Bigtable и не смог найти ничего достаточно зрелого. Просто интересно, как...
395 просмотров
schedule 30.03.2023

Невозможно подключиться к экземпляру Google Cloud Bigtable
Я пытаюсь подключиться к экземпляру Google Cloud Bigtable с помощью API HBase. Я использую Java 1.8. Я выполнил следующие инструкции: https://cloud.google.com/bigtable/docs/samples-java-hello https://cloud.google.com/bigtable/docs/using-maven...
1027 просмотров

Не удается подключиться к Bigtable из приложения Spring Boot
У меня есть отдельное приложение, которое отлично работает с Bigtable при создании такого соединения: Connection connection = BigtableConfiguration.connect(PROJECT_ID, INSTANCE_ID) и используя следующие зависимости: <dependency>...
929 просмотров

Облачное хранилище данных PHP и облачный поток данных
Я разработал для хранения необработанных данных с устройств IoT в облачном хранилище данных через GAE Flex (PHP). Я также хочу перенести эти данные в BigQuery через Cloud DataFlow. Однако я не могу найти стандартные или официальные документы,...
236 просмотров

checkAndPut всегда завершается успешно
Я держу счетчик в большой таблице и хочу поместить некоторые данные, когда счетчик достигает X. В настоящее время я делаю это следующим образом: Put put = new Put(EXAMPLE_ROW_KEY); put.addColumn(EXAMPLE_COLUMN_FAMILY, NEW_QUALIFIER, NEW_VALUE);...
358 просмотров

Cloud Shell, я должен устанавливать CBT каждый раз, когда я открываю облачную оболочку на следующий день
Чтобы использовать любой компонент GCloud, я установил Cloud Shell только один раз, и я мог использовать его каждый раз, когда открываю облачную оболочку. Но что касается компонента CBT для BigTable, я не знаю, что происходит, когда каждый раз, когда...
227 просмотров

Повторное использование соединения Bigtable с AbstractCloudBigtableTableDoFn
У меня есть DoFn , который расширяет AbstractCloudBigtableTableDoFn<> , чтобы отправлять частые запросы Buffered Mutation в Bigtable. Когда я запускаю задание в облаке, я вижу повторяющиеся записи журнала на этом этапе конвейера потока...
414 просмотров

Как подключиться к эмулятору Bigtable из клиента node.js?
Есть ли способ подключиться к эмулятору Bigtable, работающему на локальном хосте, с помощью клиента node.js? Я получу это, если попытаюсь это сделать Handshake failed with fatal error SSL_ERROR_SS Есть ли аналогичная конфигурация, такая как...
532 просмотров
schedule 06.08.2023

Коннектор HBase-Spark: подключение к HBase установлено для каждого сканирования?
Я использую коннектор Cloudera HBase-Spark для интенсивного сканирования HBase или BigTable. Он работает нормально, но, глядя на подробные журналы Spark, похоже, что код пытается восстановить соединение с HBase при каждом вызове для обработки...
1453 просмотров

Подключитесь из приложения Java к Google Cloud Bigtable, работающему в Docker
Я хочу подключиться к Google Cloud Bigtable, работающему в Docker: docker run --rm -it -p 8086:8086 -v ~/.config/:/root/.config \ bigtruedata/gcloud-bigtable-emulator Запускается без проблем: [bigtable] Cloud Bigtable emulator running on...
574 просмотров
schedule 27.04.2023

BigQuery — дизайн таблицы измерений для DataWarehouse?
Я заметил, что BigQuery хорош для хранения исторических данных, но не так эффективен при обновлении отдельных записей. Насколько эффективно для исторических данных поддерживать таблицу измерений в BigQuery в «парадигме измерений и фактов»? Я хочу...
971 просмотров