Overview I/O connectors enable reading from and writing to external data sources. Beam provides 51+ Java I/O connectors and several Python connectors.
| Cloud Storage | google-cloud-platform (BigQuery, Bigtable, Spanner, Pub/Sub, GCS), amazon-web-services2, azure, azure-cosmos | | Databases | jdbc, mongodb, cassandra, hbase, redis, neo4j, clickhouse, influxdb, singlestore, elasticsearch | | Messaging | kafka, pulsar, rabbitmq, amqp, jms, mqtt, solace |
| File Formats | parquet, csv, json, xml, thrift, iceberg | | Other | snowflake, splunk, cdap, debezium, hadoop-format, kudu, solr, tika |
Leitet die Entwicklung und Verwendung von I/O-Anschlüssen in Apache Beam an. Verwenden Sie diese Option, wenn Sie mit E/A-Konnektoren arbeiten, neue Konnektoren erstellen oder Probleme mit Datenquellen/-senken beheben. Quelle: apache/beam.