MongoDB
 sql >> Teknologi Basis Data >  >> NoSQL >> MongoDB

Konektor Sumber Mongodb Kafka Resmi Terdistribusi dengan Banyak tugas Tidak berfungsi

Tampaknya ini adalah perilaku Konektor Sumber MongoDB Kafka Resmi. Ini adalah jawaban yang saya dapatkan di forum lain dari Ross Lawley (pengembang MongoDB):

Sebelum 1.2.0 hanya satu tugas yang didukung oleh konektor wastafel. Konektor Sumber masih hanya mendukung satu tugas, ini karena menggunakan kursor Ubah Aliran tunggal. Ini cukup untuk melihat dan memublikasikan perubahan di seluruh klaster, di seluruh basis data, atau di bawah satu koleksi.

Saya mengangkat tiket ini:https://jira.mongodb.org/browse/KAFKA-121 Mendapat tanggapan berikut:Konektor sumber hanya akan menghasilkan satu tugas. Ini dirancang karena konektor sumber didukung oleh aliran perubahan. Ubah aliran secara internal menggunakan data yang sama seperti yang digunakan oleh mesin replikasi dan karenanya harus dapat diskalakan seperti halnya database. Tidak ada rencana untuk mengizinkan banyak kursor, namun, jika Anda merasa ini tidak memenuhi persyaratan Anda, maka Anda dapat konfigurasikan beberapa konektor dan masing-masing akan memiliki kursor perubahan alirannya sendiri.




  1. Redis
  2.   
  3. MongoDB
  4.   
  5. Memcached
  6.   
  7. HBase
  8.   
  9. CouchDB
  1. MongoDB - perilaku aneh indeks menurun

  2. kesalahan dalam monogdb errmsg :WiredTigerIndex::insert:key terlalu besar untuk diindeks, gagal

  3. luwak .save() tidak berfungsi

  4. Spring dan MongoDB:SAXParseException saat membaca Definisi Kacang

  5. Kunci Komposit MongoDB:InvalidOperationException:{document}.Identitas tidak didukung