MIT研究團隊推出應用於力學和材料建模領域的語言模型MechGPT
東尋 / 何渝婷編譯
2023-11-20 14:40

(示意圖/取自pixabay)

根據《站長之家》 11 月 20 日報導,MIT 研究團隊近日推出了語言模型 MechGPT,能夠在力學和材料建模領域跨足各種尺度、學科和模態。

MechGPT 通過利用預訓練語言模型進行兩步處理,提出了一種創新方法,能夠從科學文本中提取關鍵資訊,並生成連貫的問題 - 答案對,特別適用於材料科學領域。

該模型的培訓過程採用 PyTorch 和 Hugging Face 生態系統,基於 Llama2 變壓器架構,包含 40 個變壓器層,並通過低秩適應(LoRA)和 4 位量化等創新技術提高了模型的性能。

本文為AI新智界授權刊登,原文標題為「MIT 研究團隊推出應用於力學和材料建模領域的語言模型 MechGPT