Replymessage unavailable
سلام وقت شما بخیر
بله شدنی هست هیچ مشکلی هم پیش نمیاد
منتهی یسری قوانین رو رعایت کنید
اولا دیتا هارو به صورت بخش بخش بیارید (یه container بذارید و var بهش پاس بدید مثلا دسته های ۵۰ میلیونی بهش پاس بدید)
اینطوری اگر جایی مثلا کانکشن شما ارور خورد ، کلا پکیج شما rollback نمیشه
دوما بر اساس کانفیگ cpu تون تا جایی ک میشه داخل buffer رکورد جا بدید تا تو هر بافر حجم بیشتری از رکورد هارو پوشش بده
سوما از bulk insert یا fast load استفاده کنید
چهارما میتونید اگر کامپوننت هایی که فلوتون رو به چندتا thread پخش میکنن استفاده کنید تا همزمان تعداد هم چند تا thread باهم کار کنن هم تعداد زیادی رکورد بیارن
پنجما تا جایی ک میشه از booking transformation ها (مثل sort) استفاده نکنید.