Вопросы по теме 'amazon-redshift'
Команда для преобразования CSV в \"
Из внешнего источника я получаю огромные CSV-файлы (около 16 ГБ), в которых поля могут быть заключены в двойные кавычки ("). Поля разделены точкой с запятой (;). Когда поле содержит двойную кавычку в содержимом, оно экранируется как две двойные...
1624 просмотров
schedule
12.11.2022
Загрузка журналов apache в amazon redshift
Я пытаюсь загрузить журналы в стиле apache в кластер amazon redshift, используя их команду COPY ( http://docs.aws.amazon.com/redshift/latest/dg/r_COPY.html ), но есть некоторые проблемы с разбором даты. Мои даты выглядят так:...
1538 просмотров
schedule
14.10.2022
подключение сервера amazon redshift с сервера таблицы
Я установил сервер Tableau на свой компьютер. Я пытаюсь подключить сервер Amazon Redshift к серверу таблицы напрямую, как подключить redshift к рабочему столу таблицы. Я не нашел никаких вариантов для него. Является ли это возможным? и я использую...
2127 просмотров
schedule
18.10.2022
как лучше всего перенести большие данные с vertica на redshift?
Мы разместили vertica на AWS, и общий размер базы данных составляет 500 ГБ. Итак, каков самый быстрый способ перенести данные из vertica в redshift?
Один из подходов: 1. экспортировать данные vertica в S3 2. загрузить данные из S3 в Redshift....
1128 просмотров
schedule
30.05.2023
Как указать несколько столбцов ключа сортировки?
Этот вопрос здесь указывает, что вы можете иметь множественную сортировку ключевые столбцы. Однако я не могу понять правильный синтаксис. Это отлично работает для одного столбца:
create table elt.tmptmp (
val1 smallint sortkey,
val2...
2123 просмотров
schedule
05.06.2023
Использование Redshfit в качестве репозитория пакетных заданий Spring и альтернатив SEQUENCE в Redshfit
Одним из требований в моем проекте является размещение схемы весеннего пакета в базе данных amazon redshift. Я планирую начать со схемы-postgresql.sql в качестве базовой строки, поскольку redshift основан на postgres.
Глядя на исходный код...
765 просмотров
schedule
02.01.2023
MongoDB к красному смещению
У нас есть несколько коллекций в mongodb, которые мы хотим перевести на красное смещение (на ежедневной автоматической инкрементной основе). Как мы можем сделать это? Должны ли мы экспортировать монго в csv?
7173 просмотров
schedule
05.09.2022
как отозвать привилегию CREATE для общедоступной схемы у конкретного пользователя?
В настоящее время я пытаюсь создать нового пользователя только для чтения в Amazon Redshift.
Версия Redshift, которую я использую:
PostgreSQL 8.0.2 on i686-pc-linux-gnu, compiled by GCC gcc (GCC) 3.4.2 20041017
(Red Hat 3.4.2-6.fc3),...
1383 просмотров
schedule
17.07.2022
Разделитель команды Redshift COPY не найден
Я пытаюсь загрузить некоторые текстовые файлы в Redshift. Они разделены табуляцией, за исключением последнего значения строки. Это вызывает ошибку "разделитель не найден". Я вижу только способ установить разделитель полей в операторе COPY, а не...
44404 просмотров
schedule
13.08.2022
redshift array_to_string не работает с объединением
Я пытаюсь запустить array_to_string с объединением в красном смещении, но продолжаю получать следующее сообщение об ошибке:
ERROR: Specified types or functions (one per INFO message) not supported on Redshift tables. [SQL State=0A000]
Сам...
2376 просмотров
schedule
24.06.2023
Преобразованный вывод REGEXP_SUBSTR не приводится как целое число
Я попытался извлечь все цифры из строки из 20 символов, используя функцию REGEXP_SUBSTR Sql, как показано ниже.
select
REGEXP_SUBSTR(substring(mycolumn,1,20), '^[0-9]', 1)
|| REGEXP_SUBSTR(substring(mycolumn,1,20), '^[0-9]', 2)
||...
1023 просмотров
schedule
28.12.2022
postgresql — просмотр привилегий схемы
Есть ли запрос, который я могу запустить, чтобы показать назначенные в настоящее время привилегии в определенной схеме?
то есть привилегии, которые были назначены так:
GRANT USAGE ON SCHEMA dbo TO MyUser
я пытался
SELECT *
FROM...
68444 просмотров
schedule
17.06.2022
Redshift - добавляя столбец, нужно ли нам изменять наши предыдущие CSV, чтобы включить его?
В настоящее время у меня есть таблица красных смещений в нашей базе данных с 10 столбцами, и я хочу добавить еще одну. Для этого сделать таблицу изменений - тривиальная задача.
Мой вопрос - когда я это сделаю, все мои старые CSV-файлы не будут...
320 просмотров
schedule
07.09.2022
Добавочная загрузка в amazon redshift из локальной базы данных mysql - процесс автоматизации
Мы начинаем использовать Amazon Redshift для отчетности. Мы можем загружать все наши данные в Redshift через S3, а также вручную обновлять данные для ежедневной инкрементной нагрузки. Теперь мы находимся в процессе автоматизации всего процесса,...
460 просмотров
schedule
12.06.2023
параллельная запись amazon redshift приводит к вставленным записям, вызывая дублирование
Я пытался решить проблему, когда два одновременных обновления одной и той же таблицы вызывают создание / вставку дополнительных записей. Никогда не испытывал этого ни в какой другой реляционной базе данных, и я тоже. Поэтому я считаю, что это...
1754 просмотров
schedule
23.04.2022
Удалите все дубликаты из базы данных Redshift
У меня очень большая база данных Redshift. Записи не имеют уникальных ключей или идентификаторов. Я хотел бы удалить все дубликаты с помощью максимально эффективного запроса.
В других вопросах stackoverflow о типичных базах данных sql...
14669 просмотров
schedule
28.01.2023
Условно удалить временную таблицу в Redshift
Мы используем http://aws.amazon.com/redshift/ , и я создаю / удаляю временные таблицы в отчетах. Иногда мы сталкиваемся со случаями, когда кто-то создал временную таблицу и не смог ее удалить.
В других базах данных, например PostgreSQL, на...
4065 просмотров
schedule
15.05.2022
Подключение к AWS Redshift через R — Mac OSX
Я пытаюсь использовать пакет RPostgresSQL для подключения к Amazon Redshift через R и напрямую запрашивать базы данных. Я сталкиваюсь с этой проблемой:
> drv <- dbDriver("PostgresSQL")
Error in do.call(as.character(drvName), list(...)) :...
1023 просмотров
schedule
31.10.2022
Вставить все данные из уже отсортированной таблицы в другую
У меня есть две таблицы в кластере Amazon Redshift, обе из которых используют отметку времени в качестве ключа сортировки. Первая таблица отсортирована и содержит только данные с момента времени 1 до момента времени 2. Вторая таблица является только...
2553 просмотров
schedule
02.08.2022
Список столбцов в таблице
Этот запрос работает так, как ожидалось:
select nspname, relname, max(attnum) as num_cols
from pg_attribute a, pg_namespace n, pg_class c
where n.oid = c.relnamespace and a.attrelid = c.oid
and c.relname not like '%pkey'
and n.nspname not like...
223 просмотров
schedule
16.07.2023
