running background query lambat

[odong nando]

hai rekan sekalian,

mohon arahannya atas permasalahan yang saya hadapi saat ini mengenai lambatnya running background query.

saya mulai merasakan kendala ini dari bulan desember th 2023, saya ga tau jg kenapa.

saya punya  file excel A, yang menjalankan power query yang bertugas mengumpulkan data yang saya olah berdasarkan tahun untuk di load di file A tersebut, dimana file A ini mengambil data dari sebuah folder yang setiap bulannya folder tersebut ditambah filenya 1 file +- 100k row, saya sudah menjalankannya selama 2th, sehingga jumlah row data sudah lebih dari 2,4jt row. apakah ini berpengaruh pada running background query file A saya itu..? sebab selisihnya  lumayan banget klo sebelumnya itu (sebelum des23) paling lama 10 detik, sekarang bisa hampir 1 menit, kadang2 lebih.

mohon arahan dan masukan atau advice nya dari rekan rekan sekalian atas kasus saya ini, saya menggunakan win11, excel 2021, i7 ram 16.

terimakasih 

odong nando

[Mr. Kid]

Secara umum, semakin banyak file yang dibaca, akan semakin banyak proses yang dilakukan. Jadi, proses baca akan jadi lebih lama.

Tapi, untuk proses baca saja, waktu proses tidak akan meningkat drastis jika hanya bertambah 1.

Waktu proses komputasi (misal extract data yang ada dalam setiap file), juga akan bertambah lama, dan hal ini bisa meningkat secara drastis jika ada proses yang kurang efisien.

Jika perbaikan proses komputasi sudah dilakukan menjadi lebih efisien dan waktu proses tetap meningkat drastis setiap ada penambahan 1 file, 

maka hasil dari sebuah proses tadi bisa disimpan ke worksheet, sehingga tidak perlu lagi memproses data yang sudah tersimpan tersebut.

Regards,

Kid

--
You received this message because you are subscribed to the Google Groups "milis Belajar-Excel" group.
To unsubscribe from this group and stop receiving emails from it, send an email to milis-belajar-e...@googlegroups.com.
To view this discussion on the web visit https://groups.google.com/d/msgid/milis-belajar-excel/1882557248.2940836.1710484377349%40mail.yahoo.com.

[odong nando]

terimakasih atas balasannya bozkid...

sy masih bingung maksud dari "...disimpan ke worksheet"

saya ini bekerja di bidang akuntansi bozkid, intinya sy memanfaatkan power query untuk merangkum detil jurnal (sy buat perbulan/file), pada sebuah folder, dari sebuah folder tersebut saya memanfaatkan file A menggunakan powerquery utk mengambil data, merangkum serta mengelompokan (grouping) berdasarkan kode jurnalnya dari file2 yang ada dalam sebuah folder tersebut berdasarkan tahun yang saya pilih. jika tahun berjalan, dan data bulan yang baru baru saya masukan, berarti saya tinggal merefresh PQ saya.

klo ada masukan dan saran dari bozkid dan rekan2 sekalian, sedikitnya pasti sangat bermanfaat kepada saya...

terimakasih,

odong nando

To view this discussion on the web visit https://groups.google.com/d/msgid/milis-belajar-excel/CAOiZkPsiZ5YqGV3u%2BdYYQSY4120qQzKwfReq0-WWutrCV9N8BQ%40mail.gmail.com.

[Mr. Kid]

Jadi, kasusnya :

1. tiap bulan ada N files diletakkan di folder X

2. tiap bulan, dibaca oleh PQ di file A, dirangkum dan diolah, menjadi suatu tabel rangkuman dari N files bulan tertentu tadi.

Hasil nomor 2 ini, ditampilkan di sebuah worksheet, misal sheet Data tabel hasil query nomor 2.

dan nanti dibuat PQ yang membaca hasil tabel disheet Data tadi, lalu digabung dengan data bulan baru, dan ditampilkan tetap di sheet Data tabel yang sama tadi.

Misal file A ini adalah file TahunBerjalan2023, maka nanti akan ada file tahun berjalan lainnya. 

Dengan file lain misal FileTahunan, ambil dari semua file tahun berjalan untuk jadi laporan data series.

Kira-kira begitu.

Regards,

Kid

To view this discussion on the web visit https://groups.google.com/d/msgid/milis-belajar-excel/660153479.3359795.1710675843122%40mail.yahoo.com.

[Mr. Kid]

Step by stepney bisa dilihat disini.

Regards,

Kid

[odong nando]

siap bozkid...
klo liat sekilas enak banget nih, tp perlu saya pelajari dulu, baru sekali liat jd blm mudeng banget.

oiya boz kid, itu klo saya perhatiin kan file lama harus di delet dulu dari folder, baru bisa di masukin file baru, klo file lama nya ga di delet dari folder itu bolehkah, sama yang ada pembaruan data, file yang ada ga di delet, setelah beberapa kali masukin file ke folder, ternyata ada file yang saya mau edit, bisakah ...?

mohon arahannya...

terimakasih,

odong nando

https://groups.google.com/d/msgid/milis-belajar-excel/CAOiZkPs-LftW6fA91izJup%3Df4p7bJc2L6G%3DbBswqLP%3D7YoH84g%40mail.gmail.com

.

[Mr. Kid]

Untuk desain prosesnya yang wajar, memang file lama itu gak perlu di-delete dari folder.

Yang di-video itu pakai desain yang wajar kok.

Hanya saja, saat menjelaskannya ke pengguna MS Office adalah menggunakan kebiasaan yang umumnya dilakukan user ms office, 

yaitu file lama dihapus/dipindah ke folder lain atau external disk, baru copy paste file baru. 

Oleh sebab itu, maka jadilah ada penampakan proses menghapus file di-video tersebut.

Regards,

Kid

To view this discussion on the web visit https://groups.google.com/d/msgid/milis-belajar-excel/56591197.3592672.1710751987064%40mail.yahoo.com.

[odong nando]

baik bozkid, terimakasih atas arahannya...

To view this discussion on the web visit https://groups.google.com/d/msgid/milis-belajar-excel/CAOiZkPuu65GdhE5ftbM%3DT9-OvtHeY4So%3D291Ek-C7CY0sN-yGw%40mail.gmail.com.