杭州西湖白云庵的意周和尚回忆苏曼殊：“苏曼殊真是个怪人，来去无踪，他来是突然来，去是悄然去。你们吃饭的时候，他坐下来，吃完了自顾自走开。他的手头似乎常常很窘，老是向庵里借钱，把钱汇到上海一个妓院中去。过不了多少天，便有人从上海带来许多外国糖果和纸烟，于是他就不想吃饭了，独个儿躲在楼上吃糖、抽烟。他在白云庵，白天睡觉，到晚来披着短褂子，赤着足，拖着木屐，到苏堤、白堤去散步，有时直到天亮才回来。他除了吟诗外，也喜欢画画。他画得很多，纸不论优劣，兴之所至，手边的报纸也会拿起笔来涂鸦。不过若有人诚心诚意地向他去求画，他又变得非常矜贵了。”
刘师培一次在西湖畔的韬光寺惊见刚别三日的苏曼殊：“尝游西湖韬光寺，见寺后丛树错楚，数椽破屋中，一僧面壁趺坐，破衲尘埋，藉茅为榻，累砖代枕，若经年不出者。怪而入视，乃三日前住上海洋楼，衣服丽都，以鹤毳为枕，鹅绒作被之曼殊也。”
马仲殊在《曼殊大师轶事》中记载：“曼殊善绘事，每于清风明月之夜，振衣而起，匆卒间作画。既成，即揭友人之帐而授之。人则仅受之可耳；若感其盛意，见于言词，语未出口，而曼殊已将画分为两半矣。”
苏曼殊认为，吃什么类什么，吃牛肉喝牛奶会性情类牛。他曾写信劝说在美国纽约哥伦比亚大学留学的朋友邓孟硕不要吃牛肉、喝牛奶，改用腐乳配面包：“唯牛肉、牛乳劝君不宜多食。不观近日少年之人，多喜牛肉、牛乳，故其性情类牛，不可不慎也。如君谓不食肉、牛乳，则面包不肯下咽，可赴中土人所开之杂货店购顶上腐乳，红色者购十元，白色者购十元，涂面包之上，徐徐嚼之，必得佳品。如君之逆旅主人，询君是何物。君则曰红者是赤玫瑰（cheese）；彼复询白者，则君曰白玫瑰（cheese）。此时逆旅主人，岂不摇头不置，叹为绝品耶？”
胡朴安回忆：“子谷其行似狂，其志实狷。今之人洁白如子谷者，诚不多觏也。不甚解世事。一日，余赴友人酒食之约，路遇子谷。余问曰：‘君何往？’子谷曰：‘赴友饮。’问：‘何处？’曰：‘不知。’问：‘何人招？’亦曰：‘不知。’子谷复问余：‘何往？’余曰：‘亦赴友饮。’子谷曰：‘然则同行耳。’乃至啖，亦不问主人，实则余友并未招子谷，招子谷者另有人也。其行事往往类此。”