Вопросы по теме 'google-cloud-dataflow'
Как я могу объединить две Pcollections (различных размеров / данных) с общим ключом (Street) через боковой ввод?
У меня есть две коллекции PCollections: одна извлекает информацию из Pub / Sub, а другая извлекает данные из файла CSV. После нескольких различных преобразований в каждом конвейере я хотел бы объединить эти два на общем ключе, который они оба имеют,...
1192 просмотров
schedule
15.12.2023
Как установить кодировщик для конвейера потока данных Google в Python?
Я создаю пользовательское задание Dataflow на Python для загрузки данных из PubSub в BigQuery. В таблице много вложенных полей.
Где я могу установить Coder в этом конвейере?
avail_schema = parse_table_schema_from_json(bg_out_schema)
coder =...
311 просмотров
schedule
06.11.2023