公共工程委員會

公開法規查詢 - 波特人Multi-agent 搭配融合模型 測試50題正確49.5題,正確率99%

法規問答機敏資料
Public Regulation Query

50題法規專家問答題庫

生成式AI會自己組合答案,當遇到一個字都不能錯的法規時,該怎麼做才能正確推理與回答呢? 長官:「我們的廠商用了半年才達到正確率 65%,你們花16個小時就達到正確率 99%,讓我們重新對AI有信心!」🤩 實施地雷與克服方法: 使用RAG是沒有辦法分析複雜法規情境,必須用波特人小隊 multi-agent 才有機會達標。 未來應用:智慧採購輔助-協助採購解釋與執行 💪依據實際案例情況,透過波特人輔助,協助機關選擇最適當的採購方式! 👨‍🏫輔助新進同仁與快速上手採購法,避免常見的錯誤與地雷情境!

50題法規專家問答題庫 image 1
50題法規專家問答題庫 image 2

長官:「我們的廠商用了半年才達到正確率 65%,你們花16個小時就達到正確率 99%,讓我們重新對AI有信心!」🤩

正確答題比率

0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
%
正確率

0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9
0
1
2
3
4
5
6
7
8
9