Skip to content

Zeroplex 生活隨筆

軟體開發、伺服器和生活瑣事

小 縮小字型大小。 中 重設字型大小。 大 放大字型大小。

作者: 日落

Meilisearch 建立索引遇到的瓶頸

Posted on 2024 年 2 月 12 日2024 年 2 月 13 日 By 日落 在〈Meilisearch 建立索引遇到的瓶頸〉中尚無留言

Meilisearch 是一個以 Rust 開發的全文搜尋引擎 (full-text search engine),主打簡單好用、搜尋和回應速度都很快,另外預設就支援多國語言,不需要特別調整設定或安裝擴充套件即可使用。

覺得有趣,去年拿來當作 site project 的一部分研究。當索引檔大小漸漸增加,也開始發現一些問題。

觀察了一下運作的狀況:

  • 索引大小約 1 GB 時,使用 1 thread + 1 GB RAM,新增資料約 3 秒
  • 索引大小在 5 GB 時,使用 4 thread + 2 GB RAM,新增資料至少 15 秒起跳

在索引檔大小增加以後,增加 threading 和 RAM 對執行效率並沒有顯著的效果,瓶頸看起來是卡在 disk I/O。

手上 VPS 觀察到的 I/O 最大約 200 MB/s,應該就是極限了:

dstat 觀察到最大的 disk I/O 約 200 MB/s
dstat 觀察到最大的 disk I/O 約 200 MB/s

Meilisearch 並不是不能用,這邊還是簡單列幾個優缺點。

優點:

  • 就一個執行檔而已,不用下參數就可以正常運作
  • 走 RESTful API,curl 就可以操作。因為簡單,所以幾乎這種程式語言已都有 API 可用。
  • document based data,不需要事先定義 field / column (我覺得這也可以算是一個缺點)
  • 隨時調整 searchable / sortable / displayable doument field
  • 內建 dump & snapshot

缺點:

  • 覺得算是一個迭代速度蠻快的專案,所以文件沒有很完整 (或說明不好找)
  • 透過 master key 和 API key 來限制使用、操作,略顯不足
  • 部份覺得蠻重要的功能尚在開發中,例如透過 rank 來排序之類的
  • 查詢功能、查詢結果列表有一些限制,但可以透過其他功能來避免 (known limitations)

Meilisearch 的社群蠻活躍的,歡迎大家參與討論 -> Meilisearch Roadmap

Tags:資訊學習

自訂等待的動畫示意符號

Posted on 2024 年 2 月 8 日2024 年 2 月 8 日 By 日落 在〈自訂等待的動畫示意符號〉中尚無留言

這邊用 PHP 實作,可以自己改成其他程式語言。

主要是使用 \r 來回到行首,然後使用新的文字蓋過原有的文字,就可以出現簡單的圖形變換效果:

$symbol = ['\\', '|', '/', '-'];

$count = 0;
echo "\n";
while(1) {
    echo "\rpending ..." . $symbol[$count % 4] ;

    $count++;
    sleep(1);
}

不知道有沒有什麼其他符號看起來比較清楚的? O_Oa

Tags:程式設計, 資訊學習

清除 redis 中所有含有 prefix 的 keys

Posted on 2024 年 2 月 4 日2024 年 2 月 4 日 By 日落 在〈清除 redis 中所有含有 prefix 的 keys〉中尚無留言

這個需要透過 redis-cli 工具來協助。

列出所有的 keys:

redis-cli KEYS '*'

列出含有特定 prefix 的 keys

redis-cli KEYS 'zeroplex_*'

透過 xargs 將 key name 轉送給 redis-cli DEL

redis-cli KEYS 'zeroplex_*' | xargs redis-cli DEL
Tags:Redis

大量修改 Windows 檔案、資料夾權限

Posted on 2024 年 2 月 3 日 By 日落 在〈大量修改 Windows 檔案、資料夾權限〉中尚無留言

手殘,不小心把目錄的 ower 刪除,導致自己沒辦法存取檔案。只能從「安全行」=>「進階」把「擁有者」加回來,但實在太慢了。

看到一個工具:TakeOwnershipPro,可以快速的修改資料夾、檔案的擁有者:

透過 TakeOwnershipPro 取得資料夾、檔案權限

沒有什麼特殊的設定,按下「Take Ownership」以後,就會將項目的擁有者改為現在登入的使用者。

Tags:Windows

手動下載 Windows 更新檔

Posted on 2024 年 1 月 27 日2024 年 1 月 27 日 By 日落 在〈手動下載 Windows 更新檔〉中尚無留言

最近 Windows Update 會遇到更新檔無法下載的問題,但似乎還是可以手動從微軟官方網站自行下載更新檔來安裝。注意網址,避免連到惡意網站。

https://www.catalog.update.microsoft.com/

打開後長這個樣子:

Windows 更新檔下載網站

搜尋「windows 10」會列出相關的更新檔:

與 windows 10 有關的更新檔
Tags:Microsoft, Windows

文章分頁

上一頁 1 ... 4 5 6 ... 317 下一頁

其他

關於我  (About me)

小額贊助

  文章 RSS Feed

  留言 RSS Feed

Apache AWS Bash C/C++ Docker FreeBSD GCP Git Google Java JavaScript Laravel Linux Microsoft MSSQL MySQL Nginx PHP PHPUnit PostgreSQL Python Qt Ubuntu Unix Vim Web Windows WordPress XD 作業系統 分享 好站推薦 專題 攝影 新奇搞笑 新聞 旅遊 生活雜記 程式設計 網路架站 網頁設計 資訊學習 資訊安全 遊戲 音樂


創用 CC 授權條款
本著作係採用創用 CC 姓名標示-相同方式分享 4.0 國際 授權條款授權.