公共工程委員會
公開法規查詢 - 波特人Multi-agent 搭配融合模型 測試50題正確49.5題,正確率99%
Public Regulation Query
50題法規專家問答題庫
生成式AI會自己組合答案,當遇到一個字都不能錯的法規時,該怎麼做才能正確推理與回答呢? 長官:「我們的廠商用了半年才達到正確率 65%,你們花16個小時就達到正確率 99%,讓我們重新對AI有信心!」🤩 實施地雷與克服方法: 使用RAG是沒有辦法分析複雜法規情境,必須用波特人小隊 multi-agent 才有機會達標。 未來應用:智慧採購輔助-協助採購解釋與執行 💪依據實際案例情況,透過波特人輔助,協助機關選擇最適當的採購方式! 👨🏫輔助新進同仁與快速上手採購法,避免常見的錯誤與地雷情境!
長官:「我們的廠商用了半年才達到正確率 65%,你們花16個小時就達到正確率 99%,讓我們重新對AI有信心!」🤩
正確答題比率
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
正確率
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9

