隨著生成式 AI 普及,AI 心理諮詢正陷入法律與倫理的灰色地帶。目前美國伊利諾州已開出首槍,禁止在無持牌專業人員參與下使用 AI 進行心理治療,歐盟《人工智慧法》亦將其列為「高風險」領域,要求嚴格的資訊揭露與人類監督。然而,OpenAI 執行長奧特曼示警,現階段 AI 對話不具法律保密義務,隱私資料可能被平台留存或在法律程序中被調閱,與傳統醫病關係受法律保護的權利存在巨大落差,顯示監管邊界正從自律轉向強制立法。
科技巨頭切入心理健康市場,核心動機在於填補醫療資源缺口並獲取龐大的情緒數據。然而,AI 在危機處理上的「責任真空」是產業發展的最大阻礙,當模型產生誤導建議或誘發心理危機時,開發商缺乏明確問責機制。未來趨勢將從「AI 替代者」轉向「臨床輔助工具」,透過建立安全評估體系,將 AI 定位在行政支援或輕度引導,並強制在高風險情境下轉介真人資源,以明確的監管邊界換取技術落地的信任基礎,避免陷入法律訴訟風險。