Вопросы по теме 'bulkloader'

Предупреждение о массовой загрузке движка приложения Нет нисходящего индекса для __key__, выполняется последовательная загрузка
Я использую следующее для загрузки всех экземпляров одного из моих видов: appcfg.py download_data --config_file=bulkloader.yaml --kind=ModelName --filename=ModelName.csv --url=http://appid.appspot.com/remote_api Если вид имеет больше...
954 просмотров
schedule 15.12.2022

Массовая загрузка журнала из GAE
Я хочу загрузить все свои журналы в файл с помощью «appcfg.py». Я не использую app.yaml, но написал очень простой: "application: myAppId version: 1 runtime: java" Я использую эту команду: python appcfg.py --append request_logs...
1039 просмотров

Пакетный загрузчик App Engine
Я пытаюсь использовать Bulkloader движка приложений Google, но, к сожалению, не могу понять, что делать, из документации. Он говорит, что добавьте эту часть в app.yaml встроенные: - remote_api: on хорошо, я добавил. Затем говорит, что я должен...
1632 просмотров
schedule 01.06.2022

Как настроить bulkloader.yaml для загрузки данных из csv в хранилище данных
Я пытаюсь загрузить CSV-файл в хранилище данных с помощью appcfg.py. Команда, которую я использую, такова: appcfg.py upload_data --application=s~hay-fe --kind=CasillaFinal --filename=CasillaFinal.csv --url=http://hay-fe.appspot.com/remote_api...
412 просмотров
schedule 06.02.2024

Как загрузить дату с помощью массового загрузчика?
У меня есть следующий код в bulkloader.yaml : - property: dismissal_date external_name: dismissal_date import_transform: "lambda x: None if x is None or x=='' else datetime.datetime.strptime(x, '%d.%m.%Y').date()" models.py :...
131 просмотров
schedule 09.04.2022

Импорт dict в App Engine ndb.JsonProperty с помощью bulkloader
Я использую массовый загрузчик для загрузки данных в хранилище данных App Engine. Кажется, я не могу сохранить словарь в JsonProperty, и я получаю следующую ошибку: BadValueError: Неподдерживаемый тип для свойства near_countries: ‹type...
1321 просмотров

hadoop java.net.URISyntaxException: относительный путь в абсолютном URI: rsrc:hbase-common-0.98.1-hadoop2.jar
У меня есть задание уменьшения карты, которое подключается к HBASE, и я не могу понять, где я сталкиваюсь с этой ошибкой: Exception in thread "main" java.lang.reflect.InvocationTargetException at...
27065 просмотров
schedule 07.02.2023

PySpark: можно ли использовать saveAsNewAPIHadoopDataset() для массовой загрузки в HBase?
В настоящее время мы импортируем данные в таблицы HBase через RDD Spark (pyspark) с помощью saveAsNewAPIHadoopDataset(). Использует ли эта функция функцию массовой загрузки HBase через mapreduce? Другими словами, будет ли...
1801 просмотров
schedule 03.05.2024

Cassandra json2sstable и sstableloader сообщают о положительных результатах, но никаких изменений данных не происходит
Я новичок в Cassandra - в течение месяца, после долгого опыта работы с SQL Server. Мне поручили заглушить немного Python, чтобы автоматизировать массовую загрузку sstables. Введите sstableloader. Все, что я установил до сих пор, предназначено для...
268 просмотров
schedule 08.06.2022