想要「自己嘅本地 bot 團隊」:試睇 OpenMausBot(殼、龍蝦、Hermes、oMLX)

OpenMausBot 係 Grok Bot 形狀嘅開源本地殼;同龍蝦 OpenClaw、Hermes 差喺邊,以及點樣用 oMLX 接 Apple Silicon 本地模型。

用 Grok Bot 久咗,會習慣一件事:側欄一排 bot,每個有自己性格、自己電腦、自己連住嘅 App,對話像同人傾偈多過同「一個大模型」問答。

問題係——成件事綁住雲端同訂閱。數據、電腦、模型選擇,多數都唔喺你手上。

最近見到開源項目 OpenMausBot(openmausbot.com),定位係:開源、本地優先、形狀接近 Grok Bot 嘅「殼」。唔係 xAI/Meta/OpenAI/Manus 官方產品;獨立項目,Apache 2.0(enterprise 目錄另有授權)。

先釐清香港/華文圈常見叫法,唔好撈亂:

  • 「龍蝦」= OpenClaw(本機 Gateway 一類)
  • Hermes= Nous Research 嘅 Hermes Agent(常同龍蝦被拿嚟比,但係另一個項目)
  • OpenMausBot= 第三條路:Grok Bot 形狀嘅多 bot 聊天殼

遇到嘅問題

  1. 一個助理一個大盒——想分角色就要喺同一個對話轉上下文,或者開多個訂閱。
  2. 數據唔喺本地——想自建/私密啲,官方產品往往唔俾揀。
  3. 模型鎖死——自己已經有 Claude/Codex/Grok CLI,唔想再開新帳。
  4. 開源圈子名目多——龍蝦、Hermes、各種「本地 agent」聽落都似,但其實唔係同一個形狀。

OpenMausBot 想答嘅,係呢個形狀:聊天 App 入面一隊 agent——但跑喺你部機。

解法:把「殼」同「腦」分開

粗略架構(讀 README 整理):

  • 桌面殼(Electron):側欄 bot、model picker、Computer 面板、approval 卡。
  • 本機 harness(127.0.0.1):管 agent 進程;對話/金鑰/事件在 ~/.openmausbot。
  • Brain(預設):你機上已登入嘅 claude/codex/grok CLI;亦可自訂 ACP/OpenAI-compatible endpoint。
  • Hands:雲端 Linux desktop、Local VM、或(明確同意後)本機;App 經 Composio。
  • 審批:Shell/改檔等變 Allow/Deny。

一句:殼負責名簿同審批;腦可以係雲 CLI,亦可以係本機 MLX。

呢個「殼」同龍蝦、Hermes 差喺邊

OpenMausBot(殼)龍蝦 OpenClawHermes Agent
形態多 bot 聊天 App(像 Grok Bot)本機 Gateway:訊息平台+工具一條龍單一會成長嘅 agent
強項側欄一隊同事、每 bot 電腦/App、approval多渠道(Telegram 等)、主動排程「做事」學習迴圈、自產 skill、跨對話記憶
你感覺係「開一間小型 bot 公司」「24 小時貼身閘道秘書」「愈用愈懂你、會自己寫 SOP 嘅助理」
模型以已有 agent CLI 為主;可接本地 OpenAI 相容各種 provider/本地 endpointOpenRouter/自建/內建 Local Models 等

社群常見互補講法(唔係官方結論):龍蝦偏渠道同執行;Hermes 偏記憶同技能累積;OpenMausBot 偏 Grok Bot 開源殼+本機多 bot UI。選邊個,先問自己要「一隊聯絡人」、要「閘道秘書」,定要「會自己煉 skill 嘅單人助理」。

對關閉式產品(Grok Bot/Muse/dots/Cue):OpenMausBot 強調名簿形狀類似、跑你部機、資料本地、開源——細節見項目官網比較文;本文唔做完整評測。

可以加入 oMLX(本地 MLX)

OpenMausBot 唔會直接讀 .mlx 權重檔;要經 OpenAI 相容 HTTP,把 MLX 推理當「腦」接上「殼」。

實務兩條常見路(Apple Silicon):

  1. oMLX——專為 MLX 嘅多模型 server(預設約 http://127.0.0.1:8000/v1)。OpenMausBot 嘅 local-inject 名單有 omlx;server 開住之後,model picker 可出現 omlx::模型名 一類選項。
  2. mlx_lm.server 或其他 MLX 包裝成 /v1/chat/completions 嘅服務 → 喺設定/~/.openmausbot/config.json 加 openai-compat instance,指去 http://127.0.0.1:埠/v1。

極短流程:

# 例:開 oMLX(實際參數跟你本機安裝)
omlx serve --model-dir ~/models

# 確認模型列表
curl http://127.0.0.1:8000/v1/models

然後開 OpenMausBot → 揀 Local/oMLX,或加 OpenAI-compatible engine。

能力要分兩檔講清楚:

  • 純本地 chat 驅動:多半得串流傾偈,無工具/無電腦/無審批鏈——適合私密問答、離線草稿。
  • 要有手(改檔、Shell、Computer):通常仍要經 識 tool 嘅 agent CLI 指去本地 endpoint,或用支援 tools 嘅 openai-compat 路徑,而且模型本身要識 tool calling。唔係「接咗 oMLX=自動變齊 Grok Bot 全套手腳」。

Mac Studio/本機跑 Qwen 等 MLX 模型嘅人:可以把 oMLX 當推理廠,OpenMausBot 當 多 bot 殼同審批台——同「學校本地 AI」嗰套「模型在校內、介面另計」係同一邏輯。

邊啲人值得試

  • 已經用 Claude Code/Codex/Grok CLI,想唔開新帳就有側欄多 bot。
  • 想要 Grok Bot 形狀,但又要 local-first。
  • 有 Apple Silicon,想 oMLX/mlx-lm 餵本地腦入呢個殼。
  • 肯接受早期產品:Ubuntu 仍 beta;hosted/手機連線仲喺建。

若你要嘅係 LINE/Telegram 閘道、或「愈用愈識自己寫 skill」,優先睇龍蝦/Hermes,唔好逼 OpenMausBot 頂晒。

點樣開始(極短)

  1. Releases 拎 macOS/Windows/Ubuntu 安裝包。
  2. 裝好至少一個 agent CLI 並登入;或者先開 oMLX/mlx-lm 再接本地 model。
  3. 需要 Gmail/Slack 等先設 Composio(可選);雲電腦要 Boat(可選、可能收費)。

誠實底線

  • 唔係官方 Grok Bot 開源版。
  • 同任何加密貨幣無關;冒名 token 唔代表項目。
  • 本機控制有平台限制(例如 Wayland host control)。
  • 金鑰/config.json 係本機保安責任——開源換嚟控制權,唔係零風險。
  • 「有殼」≠「本地模型自動有齊工具」;oMLX 接法要分清 chat-only vs tool 路徑。

收束

OpenMausBot 係 Grok Bot 形狀嘅開源殼:名簿、審批、本機資料。龍蝦同 Hermes 解決嘅係另一類問題(閘道秘書/會成長嘅單人 agent)。有 MLX 嘅 Mac,可以用 oMLX 做腦、呢個殼做隊——先問清楚自己要邊種形狀,再決定裝邊個。

倉庫:https://github.com/milind-soni/OpenMausBot

下載/介紹:https://www.openmausbot.com

TSS/ITC 流失嚴重:唔係純 IT 問題,而係學校行政同體制問題

何文田五旬節中學 IT 機房失竊案同 PHP2Shell 連夜升級,提醒大家:TSS/ITC 人才流失嚴重,主因唔係技術,而係學校行政同體制長期唔對位。

2026 年 11 月初,何文田五旬節中學 IT 機房失竊案上咗報——約 58 部 iPad、4 部手提電腦、相機同鏡頭,總值約港幣 28.6 萬;警方正追緝一名離職前曾保管機房鎖匙嘅前職員(詳情以公開報道為準,例如 星島頭條)。

呢篇唔係要評論個別案件對錯——調查交畀警方。我想講嘅係:呢類新聞點解會令學界同學校 IT 同事咁有感?因為佢再次提醒大家——學校 IT 崗位掌握嘅唔止「修電腦」,而係鎖匙、權限、帳號同個人資料;而撐住呢條命脈嘅,好多時係 TSS/ITC。

更重要嘅一句:人才嚴重流失,主因唔係「技術唔夠」,而係學校行政同體制長期唔對位。

由一宗公開新聞諗起:鎖匙、交接、信任

公開報道大致寫到:設備存放喺上鎖 IT 機房;離職交接/盤點時先發現大批器材唔見;警方關注曾持有機房鎖匙嘅前職員。

對學校嚟講,呢度有幾個制度問題值得反思(同案件有無成立無關):

  1. 誰持有機房鎖匙?有幾把?有冇雙人保管/紀錄?
  2. 離職 offboarding:帳號、VPN、Wi‑Fi admin、CCTV、雲端、機房實體鎖——有冇即日收回同盤點清單?
  3. 資產盤點週期:新買一批 iPad 之後,係咪要等「換人」先發現問題?

換言之:新聞表面上係「失竊」,實質係提醒——學校 IT 權限同實體通道,係行政風險,唔係技術科奇聞。

TSS/ITC 其實企喺邊?

好多中小學嘅 TSS(Technical Support Services)/ITC(Information Technology Coordinator),喺老師同事眼中就係「會搞電腦嗰個」;但實際職責往往遠超印象:

1. 掌管學校大量 IT 密碼同權限

伺服器、防火牆、Google/Microsoft 管理後台、Wi‑Fi controller、門禁、列印系統、網上報名、成績/行政系統……好多時密碼同最高權限,最後都集中喺幾個人手。呢唔係「威」,而係高度信任同高度風險。

2. 接觸大量個人資料

學生、家長、教職員嘅聯絡、學籍、特殊需要相關紀錄、相片、校內通訊……IT 同事日常維護系統,自然會接觸敏感資料。行政若只當「雜務技術」,就會低估 私隱同資安責任。

3. 永遠 OT,站在最前線

考試週、開課日、網上報名高峰、投影機壞、教師機藍屏、家長日直播、突發網絡斷線——前線永遠係 TSS/ITC。正常工時唔夠用,OT 變成「默認設定」。

4. 行政往往唔著緊

最傷人唔係忙,而係忙完之後:

  • 資安/交接/資產管理被當「可有可無」
  • 出事先問「點解 IT 唔早講」
  • 平日加資源、加人手、加職級就「再傾」

風險由前線托住,決策同待遇卻長期落後。

5. 學界尊重多年,一個薪級都沒有

TSS/ITC 喺學界其實長期被視為「冇佢唔得」嘅崗位;但體制上,好多學校仍然:

  • 冇清晰職級/薪級路徑
  • 合約短、職責闊、晉升模糊
  • 同實際責任唔對稱

尊重如果只停留喺口頭「辛苦晒」,留唔住人。

6. 把守學校命脈,應該受尊重先留得住人才

冇穩定網絡、冇可用教室裝置、冇安全帳號權限,現代學校幾乎停擺。TSS/ITC 處理嘅,係學校最關鍵嘅一條命脈。要留人才,最少要:尊重責任、承認風險、提供合理待遇同事業階梯。

另一面前線:PHP2Shell 漏洞,連夜升學校 server

如果上面講嘅係「權限同體制」;另一面就係大家熟悉嘅——緊急漏洞 overnight 升級。

2026 年 10 月下旬,PHP 核心披露嚴重安全問題(業界統稱 php2shell,相關 CVE 包括 CVE-2026-109618、CVE-2026-109619)。簡單講(唔講 exploit 細節):

  • 影響範圍闊:好多用 PHP 處理網頁請求嘅環境(包括常見嘅 PHP-FPM、mod_php、php-cgi 等)
  • 風險級別高:未認證遠端執行風險,官方同多個機構都呼籲立即更新至已修補版本
  • 學校網站、校內系統、舊伺服器如果仍跑舊 PHP,就係「等緊出事」

對學校 TSS/ITC 嚟講,真實畫面往往係:

  • 白天照常支援課堂同考試
  • 晚上/通宵做 連夜升學校 server:備份、測相容、打 patch、重啟服務、睇 log、確認網站同內聯網返正常
  • 第二朝家長/老師問「點解昨晚系統慢」,又要解釋又要善後

呢種前線壓力,唔係「熱愛 IT」就可以長期硬撐。如果行政只當「應該會搞掂」,就係把人命同系統風險外包畀前線加班。

(安全提醒:學校應跟官方/供應商指引更新 PHP 同相關套件;本文只講風險同前線工作性質,唔提供任何攻擊步驟。)

所以,問題核心係咩?

有人會問:「TSS/ITC 係咪唔安全?」——如果只問技術,當然要做權限最小化、雙人保管、定期盤點、離職即收權。呢啲都要做。

但若只停喺技術 checklist,就會錯過真正令職位流失嚴重嘅原因:

表面睇法實際結構問題
「IT 出事/IT 唔夠力」行政低估權限同資安責任
「加班係奉獻」冇人手、冇職級、OT 無底
「尊重技術人員」一個薪級都沒有、事業階梯模糊
「有漏洞就 upgrade」連夜升級變成常態,體制唔補資源

結論好清楚:呢個職位流失嚴重,唔係因為「IT 問題太難」,而係學校行政同體制長期唔肯承認——呢個崗位既危險又關鍵,應該用制度同待遇留人。

小結

何文田五旬節中學失竊案,係一宗公開新聞,提醒大家學校 IT 鎖匙同交接有幾重要。 PHP2Shell 之類緊急漏洞,提醒大家前線要連夜守 server。

兩者加埋,指向同一件事:

TSS/ITC 唔安全嘅感覺,好多時唔係來自技術本身,而係行政同體制冇把責任、風險、待遇對齊——結果人才流失嚴重。

要學校 IT 穩陣,先要尊重把守命脈嘅人;有尊重、有薪級、有制度,先留得住人。

— Rockfu/富哥

奇怪的 macOS 鍵盤:轉細鍵盤後 i j k l 唔使?原來係 Mouse Keys

由全尺寸鍵盤轉細鍵盤後 i、j、k、l 打唔出?多數唔關硬件,而係 Accessibility 入面 Mouse Keys 開住。教學說明點關。

由 full-size 鍵盤換到細鍵盤(冇獨立數字鍵區嗰種)之後,忽然發現 i、j、k、l 打唔出字——估到同數字鍵/鍵盤對應有關,但一開始完全諗唔到係系統 Accessibility 設定。最後搵到 Mouse Keys,仲係第一次認真睇到呢個掣。

呢篇用教學說明方式,記低症狀、原因同關閉步驟(macOS Sequoia/較新 System Settings 路徑),方便自己同同事以後少踩一次坑。

發生咩事

典型流程好似咁:

  1. 平時用有數字鍵區(numeric keypad)嘅全尺寸鍵盤
  2. 換成 MacBook 內置鍵盤、Magic Keyboard(精簡版)或者其他冇獨立數字鍵區嘅細鍵盤
  3. 打字時發現 I / J / K / L 唔似正常字母鍵——有時完全「冇反應」打唔出字,有時游標/指標怪怪地郁
  4. 直覺會以為係鍵盤損壞、藍牙斷線、或者輸入法/佈局搞錯

其實好多時唔關硬件事,而係 Mouse Keys(滑鼠鍵) 開咗。

Mouse Keys 係咩?

Mouse Keys 係 macOS 輔助使用(Accessibility) 功能:用鍵盤(或數字鍵區)去控制螢幕上嘅指標,代替或者輔助滑鼠/觸控板。

根據 Apple 官方說明,當 Mouse Keys 開住時:

  • 你唔可以用嗰啲對應鍵去打文字(官方寫明:When Mouse Keys is on, you can’t use the keyboard or numeric keypad to enter text)
  • 有獨立數字鍵區時,常用 7/8/9/4/6/1/2/3 移動指標,5 當 click
  • 就算冇數字鍵區,系統仍然可以用主鍵盤上一組鍵控制指標,當中包括:
用途主鍵盤(無 numpad)
移動指標7、8、9、U、O、J、K、L
單擊I
按住滑鼠掣M
釋放.(句號)

所以你見到 i、j、k、l「壞咗」,好大機會就係:呢幾個鍵已經被 Mouse Keys 「徵用」去做滑鼠動作,唔再當字母輸入。

換細鍵盤嗰刻特別易「中招」感覺:因為冇獨立數字鍵區,症狀直接落喺日常打字最常用嘅 IJKL 一帶,以為鍵盤壞咗;其實可能係舊機/舊設定留低 Mouse Keys,或者某次誤開咗 Option 五下切換。

最常見解法:關閉 Mouse Keys

路徑(現行 System Settings 用語,Sequoia 等版本):

  1. 開 蘋果選單()→ 系統設定(System Settings)
  2. 側欄揀 輔助使用(Accessibility)
  3. 入 指標控制(Pointer Control)(可能要向下碌)
  4. 將 Mouse Keys(滑鼠鍵) 關掉

官方相關頁:If a numeric keypad doesn’t work on Mac、Change Pointer Control settings。

關完之後,試下再打 i j k l——多數即刻恢復正常。

點樣快速檢查/切換

除咗入系統設定,仲可以:

  • 按 Option(⌥)– Command(⌘)– F5(或者 Touch ID/電源掣連按三下,視乎機型同設定)開 輔助使用快速鍵(Accessibility Shortcuts),睇吓 Mouse Keys 有冇剔住;有就取消。
  • 喺 Pointer Control → Mouse Keys 嘅選項入面,有個常見掣:「按 Option 鍵五次以開啟或關閉 Mouse Keys」。若開住,好易無意中連按 Option 就開咗 Mouse Keys。唔需要呢個快捷,建議一併關掉,減少再中招。

症狀 checklist(幾乎可以當診斷):

  • 數字鍵區唔打到數字、反而郁指標
  • 或者 7 8 9 U O J K L I M 打唔出字/指標亂郁
  • 換鍵盤前後行為突變,但其他字母正常

幾時先至要開 Mouse Keys?

呢個功能本身唔係 bug,而係畀有需要嘅人用:

  • 暫時唔方便用滑鼠/觸控板
  • 想用鍵盤精確移動指標做輔助操作
  • 教學、示範、無滑鼠環境下控制介面

平時打字為主、又唔靠鍵盤當滑鼠,就 保持關閉 最穩陣。開住又唔知,就會變成「奇怪的鍵盤」。

小結

由全尺寸鍵盤轉細鍵盤之後 i/j/k/l 唔使,唔好即刻罵硬件——先去:

系統設定 → 輔助使用 → 指標控制 → 關閉 Mouse Keys

呢個設定第一次認真見到時會覺得「原來有呢樣嘢」;記住之後,同類怪症多數三分鐘搞掂。

(介面用字會隨系統版本微調;若你嘅 macOS 選單名略有出入,喺 Accessibility 入面搜「Mouse Keys」通常都搵得到。)

— Rockfu/富哥

香港老師申請 GitHub Education:免費 Copilot Pro 同 GPT 模型 vibe coding

香港認可院校老師可以申請 GitHub Education(Teacher),免費攞 Copilot Pro,入面有 GPT/OpenAI 模型玩 vibe coding。呢篇講資格、步驟、避坑,同埋點解唔等於美國 ChatGPT for Teachers。

好多香港老師聽過「vibe coding」——用自然語言同 AI 傾偈,叫佢幫手寫 code、改 bug、整小工具——但一睇價錢就卻步:GitHub Copilot Pro 本身係收費計劃。其實若你係認可院校嘅教師/教員/研究員,可以申請 GitHub Education(Teacher),通過之後有機會 免費用 Copilot Pro,入面仲可以揀 OpenAI GPT 系列模型(同 Claude、Gemini、Grok 等),喺 VS Code、JetBrains 等編輯器直接玩。

呢篇用教學說明方式講:你攞到咩、邊啲人啱申請、點申請、點開通 Copilot,同埋香港常見踩坑。官方條款同介面會改,落手前請以 GitHub 當頁為準。

你免費攞到嘅重點福利

通過教師驗證之後,最值得留意通常係呢幾樣:

  • 免費 GitHub Copilot Pro(平時要月費):unlimited completions、Copilot Chat、模型選擇、每月 AI credits 等(以你帳戶當頁顯示為準)。
  • 模型選擇:Copilot Pro 入面可以揀 OpenAI GPT/ChatGPT 血統相關模型(例如 GPT 系列、Codex 等,實際名單會變),亦常有 Claude、Gemini、Grok 等選項——呢個就係「有 ChatGPT 模型」嚟 vibe coding 嘅意思。
  • 免費 GitHub Team:unlimited users 同 private repos(適合科組、專題小組)。
  • GitHub Classroom:派作業、收 repo、睇學生進度。
  • 較高嘅 Codespaces/Actions 額度,同 Teacher Toolbox 資源。

一句:你唔使自己出錢訂 Copilot Pro,都可以喺課堂 demo、或者自己整教學小工具時,用對話驅動 AI 幫手寫同改 code。

邊啲人可以申請(Teacher)

官方要求大致係:

  • 你係認可教育機構嘅 educator/faculty/researcher
  • 有可核實嘅 學校發出電郵
  • 上載文件證明你同學校嘅關係(職員/教員證相片通常最穩陣;唔支援 PDF)
  • 用 個人 GitHub 帳戶 申請

詳細步驟同條件見官方文件:Apply to GitHub Education as a teacher。

重要:老師請選 Teacher,唔好當 Student 申請。 Student Developer Pack 嗰堆合作夥伴優惠係學生線,教師線唔係嗰套。

申請步驟(實務版)

  1. 未有帳戶就先開 GitHub 帳戶;建議即刻開 2FA(雙重認證)。好多學校 IT(例如港大 ITS 公開頁)都強調呢步。
  2. 去 Settings → Billing & plans → Education benefits,按 Start application,身份揀 Teacher。直達:https://github.com/settings/education/benefits
  3. 選學校、填資料;若系統提示,允許定位/喺校園申請會穩陣啲。
  4. 上載清晰證明文件:職員證用 webcam 即影通常好過掃描件或聘書掃描(港大 ITS 公開提示亦提過類似做法)。記住:唔好 upload PDF。
  5. 提交後,審批多數 約 24 小時至幾日;福利生效有時再等,常見說法係大約 72 小時內陸續開通(以你帳戶通知為準)。
  6. 通過後:入 GitHub Education portal,再去 Copilot 設定頁 Get access/claim 免費 Copilot Pro。開通說明見:Set up Copilot for teachers。

Billing 地址可能要填,但 唔一定要綁信用卡——填完申請先。

香港常見被拒原因同避坑

  • 證件相唔清、反光、裁切到睇唔到名/校徽/日期
  • 用 PDF 上載(系統唔收)
  • 揀錯身份(Student vs Teacher)
  • 只用校友電郵、又唔夠「而家仲係教職員」證明
  • 需要校園/定位時你喺屋企申請、又無其他清晰證明

實務建議(綜合官方同本地院校公開指引,例如 HKU ITS:GitHub Copilot):

  • 先開 2FA
  • 填 billing address(唔使亂綁卡)
  • 盡量喺校園、開住定位申請
  • webcam 影職員證 通常比掃描件易過關

另外:Copilot 教師福利會 定期(例如每月)再核對資格。離職、電郵失效、證明過期,都有機會失去免費 Pro——保持學校電郵同帳戶狀態更新。

講清楚:呢個唔係美國「ChatGPT for Teachers」

最近有人見到 OpenAI 嘅 ChatGPT for Teachers 免費方案,以為香港老師都有。要分清楚:

  • 嗰個係 美國 K–12 相關、獨立產品/計劃(宣傳期去到約 2028 年 6 月一類說法),香港老師一般唔會自動攞到 ChatGPT.com 嗰個 Teachers 方案。
  • 你透過 GitHub Education 免費嘅,係 GitHub Copilot Pro 入面可用嘅 GPT/OpenAI 模型(喺編輯器/Copilot Chat 揀模型),唔等於 免費開美國 ChatGPT Teachers 帳戶。

唔好喺同事群組誤傳「申請完就有免費 ChatGPT Teachers」——講錯會令人白等。

Vibe coding 點樣用喺教學

Vibe coding 簡單講:你用中文/英文描述想要咩,AI 幫手生成同修改程式;你負責驗收、改規則、教學生點判斷對錯。

教師通過之後,常見用法:

  • 喺 VS Code 開 Copilot Chat,揀 GPT 類模型,叫佢整「計分試算表腳本」「課堂計時小工具」「簡單網頁練習」
  • Demo 畀學生睇:點樣寫清楚需求、點樣叫 AI 改 bug、點樣拒絕亂加功能
  • 科組用免費 Team/private repo 管理教材同專題

同學生一齊用 AI 時,記得 事先講清楚規則:邊啲作業可以用 AI、要點標明、邊啲必須自己寫、點樣核對輸出對錯。工具係加速器,課堂規範先係安全網。

官方連結(收藏)

如果你係認可院校老師、仲未申請,值得花半個鐘準備證件同 2FA,過關之後就可以免費喺編輯器玩 Copilot Pro 同 GPT 模型 vibe coding。試完記得同學生講清楚使用界線——教得明,先用得安心。

試爆買 M5 Ultra 512GB 滿血版,定分拆多部機?

港行 M5 Ultra 512GB/8TB 近二十萬:同一筆錢分拆多部機,本地部署並行會唔會更抵?512 無完整公開實測,數字作粗估引發思考。

見到 Mac Studio 可以勾到 M5 Ultra、512GB 統一記憶體、8TB SSD,銀碼一跳——港行官方配置頁而家顯示大約 HK$197,249(以 Apple 香港商店 當頁為準,價錢會變)。腦入面第二個聲音就係:同一筆錢,拆成兩部、甚至更多部,會唔會更啱 本地部署——幾個模型、幾條工作流一齊跑?

對照一下上代:Mac Studio M3 Ultra「滿血」一檔,香港當年高配大約 七萬多(視你點配 SSD;例如 PCM 記載 32 核/80 核打爆 512GB + 16TB 官方約 HK$107,749)。而家同檔思維嘅 M5 Ultra 512GB + 8TB 已近 HK$19.7 萬——記憶體仲係 512,但晶片同儲存組合貴咗一大截。正正因為貴,先更值得問:錢係咪一定要塞進一部機。

講清楚先:公開實測而家多落在 M5 Ultra 256GB(例如並發 session、Flash-Next tok/s);512GB 滿血版幾乎未見完整對照數據。所以下面講 512 同「同價分拆」嘅 token/並行,多數係 用 256 實測推上去嘅粗估,目的係 引發思考——唔係保證你落單後會跑出邊個數。真正想帶出嘅係:本地部署時,多部機有咩實際好處。

Mac Studio
Mac Studio

而家邊啲大模型「比較好、比較易」喺本地跑

Apple Silicon 上,普通人最易上手通常係呢幾條路:

  • Ollama:一條指令拉模型,適合先試水。
  • LM Studio:有介面,調 context、睇 VRAM/統一記憶體用量方便。
  • MLX/mlx-lm:多數情況下 Apple 晶片 decode 會快啲、記憶體亦往往慳啲。

「比較好又易」嘅細/中型選擇(2026 年常見、社群討論多):

類型例子(4-bit 量級)粗略權重佔用點解易用
細、快Qwen 約 7B–9B 級約 5–8GB 起裝完即傾,適合草稿、分類、短通告
中、密實Gemma/Qwen 約 27B 級約 15–20GB質素明顯好啲,一部 64GB+ 機好舒服
中、MoE約 30B 總參、每次只起動幾 B(例如 A3B 類)記憶體似中型,速度似細型記憶體換速度好抵,Mac 好啱
大一檔70B 級 4-bit約 35–45GB+要 64–128GB 機先穩陣留 context

經驗法則:4-bit 大約每 10 億參數 0.5–0.6GB,再加 KV cache(context 愈長愈食) 同系統本身。建議總用量唔好長期食爆統一記憶體嘅 75–80%,唔係就開始 swap、token 速度插水。

Ollama 預設超長 context 可以令「細模型」突然好食 RAM——記得自己調低 num_ctx。

一部機同時跑兩個模型:可唔可以?Token 大概點睇

可以。 統一記憶體夠大,Ollama/LM Studio/兩個 MLX server 開住兩個 model 好常見。例如:

  • 一個 9B 負責「快問快答/改語氣」
  • 一個 27B 或 MoE 負責「寫長文、對 code」

喺 512GB Ultra 上,兩個中型模型加長 context 仍然好鬆。問題唔係「入唔入到」,而係:

  1. 頻寬共用:M5 Ultra 約 1.2TB/s 記憶體頻寬。兩個 model 一齊 decode,大家搶同一條喉——各自 tok/s 通常低過「獨佔成部機」。
  2. 你真正想要嘅係邊種: – 要 一個超大模型 或者 好長 context → 單機大 RAM 贏。 – 要 兩條獨立工作流同時全速(例如一邊寫稿一邊跑監測摘要)→ 分拆兩部機,加總 tok/s 往往更高。

以下係 粗估(用公開 256GB/相近晶片數量級推去 512 同分拆;512 無完整公開對照,只係諗法框架):

場景粗估
Ultra 獨跑 9B(MLX 4-bit)大約每秒近百 token 量級
Ultra 獨跑 27B dense 4-bit大約每秒二三十 token 量級
Ultra 獨跑 MoE(約 30B-A3B 類)往往明顯快過同記憶體佔用嘅 dense 27B
Ultra 同時跑兩個 27B 級記憶體仍夠;各自速度多數會打個折(搶頻寬),總吞吐未必等於「兩倍獨跑」
兩部機各跑一個 27B各有自己嘅頻寬 → 加總更接近「兩倍獨跑」

一句:單機 512GB 係「一台巨型共享廚房」;分拆係「兩間細廚房同時煮」——並行任務通常後者加總更快。

Mac mini
Mac mini

用 HK$197,249(512GB/8TB)做餅,點拆

以下價錢取自 Apple 香港商店配置頁(撰稿時核對),方便對比;落單前請再開一次官方頁。

基準

  • Mac Studio M5 Ultra(36 核 CPU/80 核 GPU)512GB + 8TB ≈ HK$197,249

常見「半滿血/較細」Studio

  • Ultra 36/80、256GB + 8TB ≈ HK$110,999
  • Ultra 36/80、256GB + 1TB ≈ HK$84,749
  • Ultra 36/80、96GB + 1TB ≈ HK$54,749
  • M5 Max 18/40、128GB + 1TB ≈ HK$41,749

Mac mini(分拆常用)

  • M5 Pro 18/20、64GB + 1TB ≈ HK$25,249
  • M6、32GB + 1TB ≈ HK$14,049

組合 A:一部 512 滿血

  • 錢:≈ 197,249(一部)
  • 強項:塞得落好大嘅單一模型、超長 context、一個 process 內多 agent 共用大 KV。
  • 弱項:兩個重模型並行時搶同一條 1.2TB/s;壞機/要維修就全家停工。

組合 B:兩部「256GB 級」

  • 例:兩部 Ultra 256GB/1TB ≈ 84,749 × 2 = HK$169,498(仲剩大約二萬幾可以加一部 mini 或者升級 SSD)
  • 或者一部 256/8TB(110,999)+ 一部 Max 128/1TB(41,749)≈ HK$152,748
  • 強項:兩個模型各佔一部機,並行 token 加總通常好過單機雙開;一部維修另一部仲用得。
  • 弱項:單一模型上限低過 512GB;兩套系統要自己管更新、備份、網絡。

組合 C:M5 Max 128 + Mac mini M5 Pro 64(同價可買多套)

  • 一套:41,749 + 25,249 ≈ HK$66,998
  • 同一筆 197,249 大約可以買 約三套(3 × 66,998 ≈ 200,994,貼近預算,要自己微調 SSD/記憶體)
  • 強項:三個獨立節點——例如「寫手模型/監測摘要/實驗模型」分開;總並行吞吐可以好高。
  • 弱項:單機塞唔落 70B+ 大型;每部頻寬低過 Ultra(Max 約 0.46–0.61TB/s,Pro 約 0.3TB/s)。

組合 D:分拆更多——「一堆 mini/Max」

  • 例:一部 Ultra 96GB(54,749)做「大模型位」+ 兩部 Max 128(41,749×2)+ 兩部 mini Pro 64(25,249×2)≈ HK$188,745
  • 或者乾脆四至七部高配 mini/Max 打散(視你點配)。
  • 強項:故障域細、可按任務擴充、Apple 宣傳 Ultra 亦可用 Thunderbolt 5 做分散式推論(官方指叢集對比單機可快達約 3 倍,視工作負載)。
  • 弱項:電費、網線、管理成本、軟件要自己做路由;唔係「開箱即一台神機」。

實測場景:Qwen3-8B + Qwen-Image-2.1 一齊跑

假設你日常就係呢對組合(好常見):

  • 文字:Qwen3-8B(4-bit 權重大約 4.6GB,短 context 連 cache 約 6GB 起)
  • 出圖:Qwen-Image-2.1(mflux 8-bit 峰值常見約 30–37GB;1024×1024)

兩個一齊常駐,粗略要 約 40GB+ 統一記憶體先舒服(再加系統同瀏覽器)。以下係 粗估,用公開 256GB/社群數字推去各組合——512 一欄尤其係推估,用來諗分拆值唔值得,唔係落單保證。

組合Qwen3-8B(短對話 decode)Qwen-Image-2.1(1024,模型已載入)兩個一齊時點樣
A:一部 M5 Ultra 512/8TB大約 90–120+ tok/s 量級(MLX 4-bit;mlx.app 估 M5 Ultra 8-bit 約 62–110,M3 Ultra 實測 4-bit 短對話約 120)Base 大約 30–35 秒/張(M5 Ultra 256GB 上 mflux 約 30s;另有對照約 35s);Turbo 大約 8 秒/張 量級記憶體極鬆。一齊跑時文字多數仲快;出圖會分薄 GPU/頻寬,或慢一成半截,但仍然一部機搞掂
B:兩部 256GB 級 Ultra文字機獨佔:同上,約 100+ tok/s出圖機獨佔:同上約 30s/Turbo ~8s,唔使同文字搶並行最靚:一邊出 token 一邊出圖,加總吞吐通常贏單機雙開
C:Max 128 + mini M5 Pro 64Max 上約 24–42 tok/s(mlx.app M5 Max 量級);Pro 64 約 16–28 tok/sMax 128 夠放 Image(~37GB);速度估介乎 M4 Max(20 step 約兩分鐘量級)同 M5 Ultra 之間,粗略 約 1–2 分鐘/張(Base),Turbo 或數十秒建議 Max 專出圖、mini 專 8B,定 Max 雙載、mini 做第二條文字。三套同價就係三對流水線
D:分拆更多(Ultra 96 + Max + mini…)每部 mini/Max 各自 約 16–40 tok/s 量級;可開多條 8B把 Image 固定喺 Ultra 或 Max;其餘節點唔好硬塞 Base(32GB M6 偏緊)最啱「多個寫手文字流 + 一部出圖機」;總文字 token 可以好高,出圖仍然受單一繪圖機上限

記憶體速查:8B 好細,瓶頸幾乎一定係 Image-2.1。32GB M6 mini 用輕量 4-bit 包或者 Turbo 或可試,但同 8B 長期雙開唔穩陣——分拆時寧願留部 ≥64GB 畀出圖。

實務一句:若你真係日日 8B 傾偈 + Image-2 出圖,用 HK$19.7 萬買 512 滿血版,記憶體過剩;兩部 256 或者 Max+mini 乘幾套,通常用實際「每分鐘出幾多字/幾多圖」計會更抵。512 仍然贏喺:超長 context、更大文字模型、出圖同時仲要載住好大 LLM。

公開測試摘錄:Ultra/Max 級 token(有來源)

細機(例如入門 M5/Pro)同 Ultra 差距太大,比較意義低,呢度只留 Max/Ultra 級。方法、context、量化唔同,只可橫向參考;你可接受門檻大約 30 tok/s 起。

機/晶片模型條件Decode 大約來源
M3 Ultra 60 核、96GBQwen3-8B 4-bitMLX,短對話約 120 tok/sllm-speed
M5 Max、48GBQwen3-14B 4-bitMLX約 63 tok/sllamaperf
M5 Max、48GBQwen3-32B 4-bitMLX約 28 tok/s(貼近/略低於 30)同上
M5 Max 40 核、128GBQwen3.8-27B 4-bitoMLX,4k–16k約 31–33 tok/soMLX
M5 UltraQwen3.8-27B公開實測整理約 48–51 tok/s 量級llmcheck/整理文
M5 Ultra 256GBQwen-Image-2.1mflux,1024約 30 秒/張(Turbo 另約 8 秒量級)社群實測整理

M5 Ultra 256GB:公開有冇講過「同時並發幾多」?

有,而且講得幾具體——要分清兩種「同時」:

1)同一模型、多條請求一齊 decode(batch/多 session)

  • MacStories 用 M5 Ultra 256GB、oMLX 跑 Qwen3.8-Flash-Next:實測 1/2/3 條同時。作者寫明 256GB 上可以 stack 到三條 Flash-Next session;三條一齊時整組約 22.1 秒做完(每條約 6.5K in/600 out),合併輸出約 81.5 tok/s(單條時合併約 66)。重點:每條會慢過獨跑,但三條都完成得到。
  • llamaperf 匯總 同一機 Flash-Next:單條平均 decode 約 121 tok/s;2 並行約 74 tok/s/條;4 並行約 41 tok/s/條——若以 ≥30 tok/s 做「仲舒服」門檻,大約 2–4 條並行仍過線;再加就會跌穿。
  • 27B 級:oMLX 有 batch 1/2/4 總吞吐上升嘅提交;另有服務向測試(注意有啲係 192GB 機)顯示 27B 可以推到更高 concurrent,但 每 user tok/s 會一路跌——過咗你嘅 30 門檻就要自己睇表。

2)記憶體入面「同時住住幾個模型」

256GB 統一記憶體夠大,可以 預載多個中型模型(例如一個快答、一個寫長文/出圖),唔等於全部一齊全速 decode。一齊 decode 仍然係搶 同一條約 1.2TB/s 頻寬。

實用結論:256GB Ultra 上,本地 agent/多 session 嘅「舒服並發」公開實測多落在 2–3 條(Flash-Next 類);推到 4 條仍可過約 40 tok/s/條。 512GB 理論上 KV/同時載模型更鬆,但 頻寬仍然係一條約 1.2TB/s——唔會 magically 變成「四倍並行仍每條全速」。要更多條仍然 ≥30,細啲模型、短啲 context,或者 分拆多部機各有自己頻寬,往往先係本題。

本地部署:點解會諗「多部機」?

單機大 RAM 好吸引——一個大模型、超長 context、剪片旁邊仲載住 LLM,一部搞掂。但本地真正日用,好多時唔係「一部神機塞爆」,而係 幾條工作流長期開住:寫稿、出圖、監測摘要、實驗新模型……呢時多部機嘅好處好實際:

  1. 各有自己嘅記憶體頻寬 — 單機雙開係搶同一條喉;兩部機各跑一個模型,加總吞吐通常更接近「兩倍獨跑」,而唔係打個折。
  2. 故障域細 — 一部要更新、過熱、或者你試爆某個實驗模型,另一部仲可以照寫稿/照告警。
  3. 任務隔離 — 出圖機專門載 Image;文字機專門載 chat;監測用細模型,唔同寫手搶資源。本地部署最怕「一個 process 食爆,全家卡」。
  4. 同價換節點數 — 用 512 滿血嗰筆錢,可以變成兩部 256,或者 Max + mini 乘幾套;並行任務愈多,呢種換法愈值得計。
  5. 擴充彈性 — 先兩部夠用,之後再加一部做實驗,唔使一次過買到頂。Thunderbolt 5 分散式推論係另一條路,但日常「兩條獨立 API」往往簡單過一開始就玩叢集。

512 仍然有位置:你證實要 單一超大模型、或者 超長 context + 多 agent 共用大 KV。只係喺「未有 512 公開並發數據」之前,更值得先問——你嘅本地負載,係一條大河,定係幾條細河要一齊流?

邊種「跑 token 會更多」?

要講清楚你比較緊嘅係邊個指標:

  1. 單一對話、要最大最醒嗰個模型 → 512GB 滿血方向通常啱(記得:呢度多係推估)。
  2. 同時兩條以上獨立本地推論(兩個 chat、兩個助手後端、一邊寫 code 一邊摘要郵件)→ 分拆兩部或更多,加總 tok/s 多數更高——本地部署最常見嘅痛點就係呢度。
  3. 要快、又要慳記憶體 → 優先揀 MoE 細起動 模型,再決定要唔要 Ultra。
  4. 影相/剪片/寫 code 同 AI 一齊 → 單機大 RAM 方便「剪片唔停、旁邊仲載住模型」;分拆就係「一部專創作、一部專模型」。

實務例子:

  • 「寫手」用 27B 寫 blog 初稿;「監測」用 9B 將 curl/log 變一句人話告警——兩部機各跑各的,唔使 512。
  • 要本機試 100B+ 級或者超長文件一次過入 context——512GB 先有討論價值。
  • 剪 8K 同時載住大模型——大統一記憶體單機舒服啲。

機再滿血,都要 set 好 rules

分拆幾多部都好,如果你用會動手嘅本地助手,記得寫清楚規則:

  • 寫手:只出稿,唔自動發佈、唔開付款。
  • 監測:只告警,唔准自行重啟伺服器。
  • 彙總:定時整清單,外寄停低等你確認。

密碼、OTP、學生個資唔貼 chat;用 Vault/1Password。機係工具,rules 先係遙控。

我自己會點揀(唔係叫你跟)

  • 已經證實自己要 一個好大嘅本機模型 或者超長 context → 先望 512 滿血。
  • 主要係 幾個中型模型並行、想故障隔離、想本地同價換更多吞吐 → 我會優先計 兩部 256 或者 Max 128 + mini Pro 64 乘幾套。
  • 主要瀏覽文書 → 唔使糾結呢篇,望 Mac mini M6 就得。

想追系列可訂 RSS:https://www.rockfu.net/blog/feed/

(規格同售價以 Apple 香港當頁為準。512GB 並發/雙模型數字多為粗估,用來對照分拆思路;有來源嘅實測以文中連結為準。實際視模型、量化、context、軟件版本同室溫。呢篇只係分享諗法,唔係購買建議。)

Grok Bot 進化史:由早期 Beta 到而家功能表(附香港實例)

Grok 係腦,Grok Bot 係會動手嘅同事。講吓點 set rules、同香港實際用法——寫通告、追包裹、監測網站,進化史幾句帶過就得。

最近周圍人都問:Grok 同 Grok Bot 係咪同一樣嘢?簡單講——唔係。Grok 係腦,識傾偈、識寫;Grok Bot 係會動手嘅同事,有自己一部雲端電腦,可以幫你開網、睇電郵、寫稿、甚至盯住你個 server 有冇掛。

2026 年 8 月公開 early beta,之後加 Android、接 The X Subscription,十月再有 Pages、Vault、1Password。細節官方 Help 有,呢篇唔整長時間線表——重點係:而家已經可以當「幾隻手」一齊打工。

用得順唔順,關鍵唔係模型有幾醒,而係你有冇講清楚規則。

先 set 好 rules,唔係亂叫

開一個 bot,唔好淨係寫「你係助手」。好似請人返工,要講清楚職責、邊啲唔准做、用咩語氣。

角色可以咁分(示例,名稱你自己定):

  • 寫手:只負責 blog 初稿,書面語/教學說明風,唔自動發佈,敏感通道唔開。
  • 監測:只做探測同告警,唔准自行重啟伺服器、改防火牆。
  • 彙總/秘書:定時(例如每日某個鐘,香港時間)整告警同待你批核事項清單。

你可以喺 bot 第一則訊息、profile/instructions,或者每次開新任務時重複提醒。敏感嘢(密碼、卡、學生個資)唔貼 chat;用 Vault 或 1Password,外寄/落單要停低等你確認。

一句:rules 寫得鬆,bot 就當自己係萬能;rules 寫得實,先似請咗幾個專責同事。

實際可以點用(多啲例子)

以下全部係「你可以點同佢講」嘅場景。香港網站若擋 cloud IP,可以試經你部電腦路由,或者敏感步自己 Take over。

學校/教學

  • 「用書面語寫明日雨天通告,對象小一至小六家長;另外俾一則 WhatsApp 口語版。」你再按學校格式改。
  • 「根據呢張錯誤畫面同外掛版本,列三個最可能原因、檢查步驟,同『唔好亂 Reset』清單;結果整成一頁畀同事跟。」
  • 「睇我日曆,星期三邊啲會;為科組會議寫五點議程,會前一小時用 routine 提醒我(Asia/Hong_Kong)。」
  • 「整一頁比較三個 AI 方案畀家長會用:表、風險、問答;先只分享俾我。」

日常生活

  • 「Foodpanda 觀塘附近兩餸飯,預算 $120 內,落籃後停低等我確認先付款。」
  • 「Uber 由九龍塘去觀塘大概幾耐幾錢,唔好直接叫車,先報價。」
  • 「呢個順豐運單,開官方追蹤頁,用幾句寫狀態、預計、下一站,連結留低。」

寫 blog/估成本

  • 「用 zh-HK 教學說明風,為自己 blog 出大綱+正文;分類標籤建議;唔好捏造數據。」——常見流程:bot 出稿,你審完先上。
  • 「用公開 API 價同訂閱額度兩套邏輯,估一日教師研討會大概用量。」(可對照本站《大會花多少 bot token》)

管理員/系統監測(幫你打工嗰種)

  • 「每 15 分鐘 check 我個公開網站;唔係 200 或者超時就用一句告警我,並列最近三次結果。唔好自動重啟。」
  • 「我貼咗 df -h、uptime、free -h 同 error log。幫我判斷係碟滿、OOM 定服務掛;用表列現象/可能原因/建議指令/風險。唔好自己跑會改系統嘅指令。」
  • 「根據外掛清單同 PHP/OS 版本,對照公開公告,列高危項目同建議;每週更新一頁。唔好亂裝未知外掛。」——之前好多站因 XML-RPC/舊外掛出事,呢類巡檢好有用。
  • 分工示例:一個 bot 專探測,一個專寫稿,一個定時彙總。監測嗰個發現異常只通知人,唔准自己改機。

再加兩個常見場面:

  • 「每晚 11 點 routine:摘要今日未覆 Gmail,草稿三封最急,唔好直接寄。」
  • 「家用 NAS/備份完成未?只讀狀態頁,失敗就 chat 知我一聲。」(視你有冇俾權限開嗰個介面)

幾樣我自己會守

  • 唔撈亂「Grok App 聊天」同「Grok Bot 助手」——同人介紹時講清楚。
  • Free/Plus 唔一定有 Grok Bot;多數要 The X Subscription Premium 起,或者舊付費 Cursor/連結計劃。用量睇 Settings → Usage & Billing。
  • 學生姓名、密碼、OTP 唔上 chat、唔丟公開 Page。
  • Bot 可以好似千手觀音咁多手,但每一隻手都要有職分——rules 先係真正嘅遙控。

想追系列可以訂 RSS:https://www.rockfu.net/blog/feed/
相關:《大會花多少 bot token?》

(功能同計劃會變;以你帳號畫面同官方頁為準。呢篇只係分享用法,唔係訂閱/資安建議。)