香榧是一種營養健康的食物，但任何食物都有其相關的禁忌事項，有的人適宜吃，有的人則不適合吃，若是吃錯了反而會對健康不利，不知道香榧不適合哪些人羣吃呢？
蛋白質過敏主要是由於食物中的某些物質（通常是蛋白質）進入了體內，被免疫系統當成入侵病原，免疫系統便釋放出一種特異型免疫球蛋白E，並與食物結合生成許多化學物質，造成皮膚紅腫、經常性腹瀉、消化不良、頭痛、咽喉疼痛、哮喘等過敏症狀，而香榧就是高蛋白質食物，如有蛋白質過敏的話，是不適合吃香榧的。
香榧子一種高油脂、高熱量的堅果，每100克香榧中的油脂含量可高達50%，提供熱量618大卡，人體食用之後會加重體內的火氣，而易上火或本身體內火氣較重的人羣，食用過量的香榧很容易加重牙齦腫痛、口腔潰瘍、皮膚長痘等上火症狀。
香榧中含有大量的脂肪油成分，肝病患者代謝脂肪能力較差，若是食用了大量的脂肪類食物，無法及時代謝，會加重肝臟的負擔，從而可能會導致病情加重，所以建議患有肝炎、重度脂肪肝患者最好少吃香榧。
香榧中含有大量的脂肪成分，它需要膽囊分泌膽汁進行代謝，而膽囊切除患者儲存膽汁的功能喪失，食用香榧這類脂肪高的食物無法及時進行分解代謝，可能會容易引起腹脹、噁心等消化不良症狀，所以做了膽囊切除手術者建議少吃香榧。
香榧中含有豐富的脂肪、蛋白質、纖維素等成分，比較難以消化，而消化功能差者若是食用了過多的香榧更會加重腸胃的負擔，容易引起腹脹不適等消化不良症狀，所以建議消化功能比較差的人羣少吃香榧。
香榧子中的脂肪含量在50%左右，同時還富含蛋白質，吃後不易消化，還含有豐富的膳食纖維素，可促進腸胃蠕動，幫助通便，若是腹瀉患者吃多的話，容易加重腹瀉病情，影響身體康復，因此腹瀉的人不適合吃香榧。
不建議食用。
胃腸不好的人不能吃辛辣、刺激、油膩及難消化、易產氣、粗纖維的食物，如蔥薑蒜、肥肉、大豆、冷飲、豆漿等，這些食物對胃腸粘膜都會有或多或少的刺激，不利於消化，而香榧油脂含量比較高，富含纖維素、蛋白質等成分，吃後不易消化，對於腸胃不好的人來說吃後容易加重消化不良、腹脹噁心等不適症狀，因此不建議吃。
