但是当时人们所食用的部分并非果实，而是作為[[迷幻药物]]的叶子，由于番茄叶子中的毒素导致食用者中毒。也有另一個説法就是傳說它是因為果實顏色鮮豔，被印地安人認為 其是有毒的植物，以致于在很长的一段时间里人们只当做观赏植物，18世紀開始才作為蔬菜在南歐種植 <ref>[http://www.gran2.com/blog/2000 認識番茄– 五感文創]，台灣鮮果配，2016-11-21</ref> 。

祕魯人在初識番茄時視其為毒果子，稱為「狼桃」，16世紀,英國俄罗达拉里公爵見番茄外皮鮮美紅豔，帶回英國送給情人，從此，歐洲人稱其為「愛情蘋果」 <ref>[http://ppcontest04.blogspot.com/2014/04/blog-post_4617.html 番茄紅了醫生的臉就綠了]，blogspot</ref> 。

產銷量最大宗的美國，早期大部分民眾以為番茄有毒，也有視其具有性功能，視為「愛情蘋果」，到18世紀中葉，開始有人種植，食者自然是一些需要催情者，而傳教士被禁止食用。1820年番茄還被認為是有毒食品 <ref>[https://kknews.cc/zh-tw/food/622e2jv.html 在古代吃一碗西紅柿打滷面是多麼困難的事] 每日頭條，2017-11-12</ref> ，在紐約禁止食用^。<ref>{{Cite web|url=https://www.books.com.tw/products/0010739312|title=人造恐慌：擊破謠言和謬誤，告訴你真實的「基改食品」與「有機農業」！|accessdate=2018-09-10|author=|date=|work=博客來|publisher=|pages=81}}</ref>百年後，美國人敢吃番茄了，卻得花上幾個鐘頭烹煮，認為經長時間煮會消除番茄中的“毒性”。也因為這個錯誤的大眾認知，致使美國最高法院在[[尼克斯訴赫登案]]中將番茄歸類為蔬菜而並非水果。