Вопросы по теме 'google-cloud-dataflow'

Как я могу объединить две Pcollections (различных размеров / данных) с общим ключом (Street) через боковой ввод?
У меня есть две коллекции PCollections: одна извлекает информацию из Pub / Sub, а другая извлекает данные из файла CSV. После нескольких различных преобразований в каждом конвейере я хотел бы объединить эти два на общем ключе, который они оба имеют,...
1192 просмотров

Как установить кодировщик для конвейера потока данных Google в Python?
Я создаю пользовательское задание Dataflow на Python для загрузки данных из PubSub в BigQuery. В таблице много вложенных полей. Где я могу установить Coder в этом конвейере? avail_schema = parse_table_schema_from_json(bg_out_schema) coder =...
311 просмотров