DataSci Ocean
所有文章 標籤 分類
繁體中文
DataSci Ocean
所有文章標籤分類
繁體中文
Home avatar

Apple Podcasts
Featured image for PDF 解析排行榜能信嗎?拆解 ParseBench 的評分設計

PDF 解析排行榜能信嗎?拆解 ParseBench 的評分設計

Hong-Wei Wu avatarHong-Wei Wu  發佈於 2026-10-15  收錄於 論文介紹
ParseBench 把 PDF 解析的評分從「文字像不像」改成「agent 能不能直接拿去用」,表格評分的點子值得借鏡,但廠商自家出題的排行榜數字要打折來看。
閱讀全文
 Large Language Model, Benchmark, Evaluation
Featured image for 檢索索引能自己診斷、自己修嗎?拆解 SELF-INDEX 的亮點與盲點

檢索索引能自己診斷、自己修嗎?拆解 SELF-INDEX 的亮點與盲點

Hong-Wei Wu avatarHong-Wei Wu  發佈於 2026-10-10  收錄於 論文介紹
SELF-INDEX 讓 LLM 自己找出索引哪裡寫不好、只修有問題的文件,並驗證通過才寫入。工程價值高,但裁判與生成者是同一顆模型,可信度仍有缺口。
閱讀全文
 Retrieval-Augmented Generation, Agent Memory, Large Language Model
Featured image for LLM 能自己出題、自己解題,煉出技能檔嗎?拆解 Ctx2Skill

LLM 能自己出題、自己解題,煉出技能檔嗎?拆解 Ctx2Skill

Hong-Wei Wu avatarHong-Wei Wu  發佈於 2026-10-07  收錄於 論文介紹
Ctx2Skill 讓出題的 Challenger 與解題的 Reasoner 自我對弈,不靠人工標註與外部反饋,從長文本提煉可重複使用的技能檔,GPT-4.1 解題率由 11.1% 升至 16.5%。
閱讀全文
 Large Language Model, Multi-Agent, Prompting, Agent Memory
Featured image for 便宜判官先判、沒把握才找 GPT-6:JEV 串接真的省錢嗎?

便宜判官先判、沒把握才找 GPT-6:JEV 串接真的省錢嗎?

Hong-Wei Wu avatarHong-Wei Wu  發佈於 2026-10-06  收錄於 論文介紹
第三方評測 JEV:讓便宜的 LLM 判官先判,信心不足才轉給 GPT-6。簡單任務只需 27% 費用,難任務準確度不掉但只省 9% 到 33%,本文拆解門檻、AUROC 與校準。
閱讀全文
 LLM-as-a-Judge, Evaluation, Uncertainty Estimation, Inference Optimization
Featured image for 會自我進化的 AI Agent,只是在背考題?Google RRSI 的護欄設計

會自我進化的 AI Agent,只是在背考題?Google RRSI 的護欄設計

Hong-Wei Wu avatarHong-Wei Wu  發佈於 2026-10-04  收錄於 論文介紹
讓 LLM 反覆改寫 agent 的 harness,進化題的分數會一路上升,換題目卻未必有效。Google Cloud AI Research 的 RRSI 用七個護欄管住過擬合,本文也檢視證據的缺口。
閱讀全文
 Large Language Model, Evaluation, Single-Agent
Featured image for Resource2Skill:只用教學影片蒸餾的技能庫,就贏過其他三種資源的總和

Resource2Skill:只用教學影片蒸餾的技能庫,就贏過其他三種資源的總和

Hong-Wei Wu avatarHong-Wei Wu  發佈於 2026-09-30  收錄於 論文介紹
Microsoft Research 的 Resource2Skill 把教學影片、程式碼、文章與成品蒸餾成階層式技能庫,七個創作領域平均提升 11.9 個百分點;本文一併檢視其對照組與蒸餾細節的缺口。
閱讀全文
 Large Language Model, Single-Agent, Agent Memory
Featured image for Naive Prompt Optimization:拿掉搜索之後還剩下什麼

Naive Prompt Optimization:拿掉搜索之後還剩下什麼

Hong-Wei Wu avatarHong-Wei Wu  發佈於 2026-09-27  收錄於 論文介紹
Purdue 大學論文《Naive Prompt Optimization》問了一個直白的問題:給夠豐富的執行回饋、配一個夠強的 teacher,還需要 GEPA 那套搜索機制嗎?本文檢視 NPO 的方法,以及它「用更少執行次數打贏 GEPA」這個賣點裡沒拆開驗證的混淆變因。
閱讀全文
 Large Language Model, Prompting, Single-Agent
  • 1
  • 2
  • 3
  • …
  • 20
2022 - 2026 Hong-Wei Wu | CC BY-NC 4.0