Google 雲端硬碟這樣搬會不會比較快? - 免空

Noah avatar
By Noah
at 2022-03-28T22:44

Table of Contents

今天白天總共移動(fclone move)了40多萬個檔案 大小77TB

除了一開始的沒有開啟垃圾桶 死了將近300個檔案外(17132->16852)

後面一個檔案都沒漏

結論就是 fclone的設定檔一定要開啟垃圾桶阿

use_trash = true

因為fclone move在搬檔過程中會發瘋似的把你的檔案刪掉

真的就是出現delete的訊息

2022-03-28 03:54:36 INFO : 網版再造明清201901修訂版_checkedOK/網版再造明清
201901修訂版583種卷冊頁及圖書信息unicode-utf8b5/583種圖書信息/ZHSY100568風箏誤
傳奇 +(清)李漁撰+清翼聖堂刻笠翁傳奇十種本.txt: Deleted

沒有垃圾桶的話 你真的只能眼睜睜看著檔案消失了

我使用的參數是
--drive-server-side-across-configs --stats=1s
--stats-one-line -vP --checkers=256 --transfers=256
--drive-pacer-min-sleep=1ms

檔案搬完後 可能要等半小時 期間不斷用ncdu觀察目的地檔案到齊了沒有
(一開始可能會缺很多檔案 但檔案會慢慢的補齊)
(在搬動之前先用ncdu掃描來源資料夾 且掃描結果的視窗不要關閉)

同時也要去把TD對應的垃圾桶的檔案 全選->還原
(垃圾桶內的檔案也是會慢慢冒出來 不要急)

後面還有5百萬個檔案要搬 繼續再接再厲~~

對了 我是用主帳號去搬 因為sa帳號似乎沒有權限去移動檔案到TD 會跳錯誤訊息

你的750gb*20天 頂多15TB 應該算小case了...

※ 引述《LonyIce (耀西)》之銘言:
: 我 Google 雲端硬碟搬家,教育逃到企業
: 因為攝影、錄影工作,檔案大又多
: 大家不推薦內建的搬家是因為容易漏檔案
: 所以都推薦 rclone
: 但我的檔案多,每天傳輸流量也有 750 gb 的上限,這樣想想可能要花上 20 天以上。
: 那如果我用內建的搬家先搬(不用管流量問題),然後再用 rclone 檢查檔案是否遺失,這
: 樣搬家時間是不是有機會壓縮到 10 天以內呢?
: 這樣的方法是否可行?還是會有什麼問題呢?謝謝各位。

--
Tags: 免空

All Comments

Megan avatar
By Megan
at 2022-03-30T11:09
看不太懂你用的那些功能QQ 只覺得一天能搬77TB 好厲害,
不過還是感謝你的回覆…
Mary avatar
By Mary
at 2022-03-31T23:34
漏檔可能是有名稱相同的檔案,才會出現檔案被刪除的情況,
跑之前可以先dedupe一次再觀察看看
然後用SA是沒辦法跑server side move的,就算給了權限也只
會變一般的move(跑流量)
Anonymous avatar
By Anonymous
at 2022-04-02T11:59
確定不是重複檔名的問題 所有來源檔案當初從別人那邊復
Oscar avatar
By Oscar
at 2022-04-04T00:24
複製過來時都有執行過很多次dedupe了 當時是為了確保複
Daph Bay avatar
By Daph Bay
at 2022-04-05T12:50
製時一個檔案都沒有漏 當初的最大的手筆是百萬檔案沒漏
印象中分了3次複製
Oscar avatar
By Oscar
at 2022-04-07T01:15
請問有沒有fclone move完整的指令?
Emma avatar
By Emma
at 2022-04-08T13:40
我資質駑頓,77T我要搬好久...
Wallis avatar
By Wallis
at 2022-04-10T02:05
好文推
Sandy avatar
By Sandy
at 2022-04-09T03:34
漂亮,謝謝你喔!!

Google Drive 與 OneDrive 的一些問題

Hedwig avatar
By Hedwig
at 2022-03-28T21:43
Google Drive 本機版更新後,有一點很讓人詬病, 就是無法選擇雲端硬碟中的某個資料夾同步,一次就是要同步整個雲端硬碟。 有一個偷吃步的方式是選擇一個本地的資料夾,同步到雲端硬碟裡的「我的電腦」, 但這會產生一個問題,就是電腦一多時,不管是自己的電腦或它人的電腦, 都會佔用不同的空間,而且這些資料是 ...

Google 雲端硬碟這樣搬會不會比較快?

Dora avatar
By Dora
at 2022-03-27T10:29
我 Google 雲端硬碟搬家,教育逃到企業 因為攝影、錄影工作,檔案大又多 大家不推薦內建的搬家是因為容易漏檔案 所以都推薦 rclone 但我的檔案多,每天傳輸流量也有 750 gb 的上限,這樣想想可能要花上 20 天以上。 那如果我用內建的搬家先搬(不用管流量問題),然後再用 rclone 檢查 ...

蝦皮上賣的google無限空間

Elizabeth avatar
By Elizabeth
at 2022-03-25T21:26
最近也收到學校通知要停止服務了, 在蝦皮上看到有在賣無限空間, 一種是原本帳號升級可以分享什麼的, 但沒相簿, 一種是給你一個新帳號無限空間也有相簿, 看了好幾家價錢差不多, 問賣家也會拍胸脯跟你保證有問題都可以退費, 但是介紹有的簡體字, 有的出貨地在中國, 感覺就怪怪的。 請問有人買過這樣的帳號 用到現 ...

請推薦類似 pcloud 的雲端空間

Caroline avatar
By Caroline
at 2022-03-25T13:46
目前已經買斷了 pcloud 的 4TB,使用了快兩年也沒什麼不滿意的 速度以我的使用來說算還 OK,也可以直接在本機掛載成可直接存取的網路硬碟 但還是想多找一個地方多做一個備份比較保險,避免一家公司的服務突然關閉或被攻擊就 完蛋了 因為個人還是比較偏好雲端所以買硬碟或買 NAS 這事就先 pass 吧 ...

請問google one 10TB以上的購買方式?

Margaret avatar
By Margaret
at 2022-03-24T23:55
去年學校來信 說到今年7月1號要停用教育帳號 所以這幾個月都在備份Google雲端硬碟 想說進度來得及 但沒想到今天學校傳來簡訊 說只到3月31號 就要把帳號砍掉(我是校友) 這才發現 原來學校之前有寄過一次信 但那封信和之前的信合在一起 所以沒有看到時間提前 現在只剩下7天 已經不可能備份完畢QQ ...