وأما تسميتهم بالصوفية فقالت طائفة: "إنما سموا صوفية لصفاء أسرارهم، ونقاء ءاثارهم".
وقال ءاخرون: "إنما سموا صوفية لقرب أوصافهم من أوصاف أهل الصفة الذين كانوا على عهد رسول الله صلى الله عليه وسلم، فمن باطنهم الموصوف بالصفاء، ومن لبسهم وزيهم سموا صوفية، لأنهم لم يلبسوا لحظوظ النفس ما لان مسه وحسن منظره، وإنما لبسوا لستر العورة، فاكتفَوا بالخشن من الشعر والغليظ من الصوف".
ثم هذه كلها صفة أهل الصفة الذين كانوا على عهد رسول الله صلى الله عليه وسلم فإنهم كانوا غرباء فقراء مهاجرين، أخرجوا من ديارهم وأموالهم ووصفهم أبو هريرة وفضالة بن عُبيد فقالا: "يَخِرُّون من الجوع حتى تحسبهم الأعراب مجانين"، وكان لباسهم الصوف فلما كانت هذه صفة أهل الصفة في حالهم وزيهم سموا صوفية وصُفية، وسماهم قوم فقراء، لأن أحدهم لا يملك شيئًا وإن ملكه بذله وذلك لتخليهم من الأملاك.
وقال السهروردي: "بعد عهد رسول الله صلى الله عليه وسلم وبعد عهد الصحابة من أخذ منهم العلم سمي تابعيًّا، ثم لما تقادم زمان الرسالة وبَعُدَ عهد النبوة وانقطع الوحي السماوي، اختلفت الآراء وتنوعت الأنحاء وتفرد كل ذي رأى برأيه وكدّر شرب العلوم شوب الأهوية، وتزعزعت أبنية المتقين، واضطربت عزائم الزاهدين، وغلبت الجهالات وكثف حجابها، وكثرت العادات، وتزخرفت الدنيا وكثر خطابها، تفردت طائفة بأعمال صالحة وأحوال سنية، وصدق في العزيمة وقوة في الدين، وزهدوا في الدنيا ومحبتها، واغتنموا العزلة والوحدة، واتخذوا لنفوسهم زوايا يجتمعون فيها تارة وينفردون أخرى أسوة بأهل الصفة تاركين للأسباب متبتلين إلى رب الأرباب، فأثمر لهم صالح الأعمال سنيَّ الأحوال، وتهيأ لهم صفاء الفهوم لقبول العلوم، وصار لهم بعد اللسان لسان، وبعد العرفان عرفان... فصار لهم بمقتضى ذلك علوم يعرفونها وإشارات يتعاهدونها، فحرروا لنفوسهم اصطلاحات تشير إلى معانٍ يعرفونها، وتُعرِبُ عن أحوال يجدونها، فأخذ ذلك الخلف عن السلف حتى صار ذلك رسمًا مستمرًا، وخبرًا مستقرًا في كل عصر وزمان، فظهر هذا الاسم بينهم وتسمَّوا به وسُمُّوا به".
ويقول الإمام الرفاعي الكبير رضي الله عنه: قيل لهذه الطائفة الصوفية، واختلف الناس في سبب التسمية وسببها غريب لا يعرفه كثير من الفقراء، وهو أن جماعة من مضر يقال لهم بنو الصوفة وهو الغوث بن مر بن أد بن طابخة الربيط كانت أمه لا يعيش لها ولد، فنذرت إن عاش لها ولد لتربطن برأسه صوفة وتجعله ربيط الكعبة، وكانوا يجيزون الحاج، إلى أن منَّ الله بظهور الإسلام فأسلموا وكانوا عبَّادًا، ونقل عن بعضهم حديث رسول الله صلى الله عليه وسلم فمن صحبهم سميّ بالصوفي وكذلك من صحب من صحبهم، أو تعبد ولبس الصوف مثلهم ينسبونه إليهم فيقال: صوفي، ونوّع الفقراء الأسباب فمنهم من قال التصوف الصفاء، ومنهم من قال المصافاة، وغير ذلك، وكله صحيح من حيث معناه.اهـ.

ويقول السهروردي في تسميتهم صوفية للبسهم الصوف: "وهذا الاختيار يلائم ويناسب من حيث الاشتقاق لأنه يقال: "تصوّف" إذا لبس الصوف وقال: ولما كان حالهم بين سير وطير لتقلبهم في الأحوال وارتقائهم من عالٍ إلى أعلى منه.. وأبواب المزيد علمًا عليهم مفتوحة وبواطنهم معدن الحقائق ومجمع العلوم، فلما تعذر تقيدهم بحال تقيدهم، لتنوع وجدانهم وتجنس مزيدهم، نسبوا إلى ظاهر اللبسة، وكان ذلك أبين في الإشارة إليهم، وأدعى إلى حصر وصفهم، لأن الصوف كان غالبًا على المتقدمين من سلفهم، وأيضًا لأن حالهم حال المقربين ولما كان الاعتزاء إلى القرب امر صعب يعزّ كشفه والإشارة إليه، وقعت الإشارة إلى زيهم سترًا لحالهم، وغيرة على عزيز مقامهم، أن تكثر الإشارة إليه وتتداوله الألسنة، فكان هذا أقرب إلى الأدب، والأدب في الظاهر والباطن والقول والفعل عماد أهل الصوفية".
وفيه معنى ءاخر: "وهو أن نسبتهم إلى اللبسة تنبئ عن تقللهم من الدنيا، وزهدهم فيما تدعو النفس إليه بالهوى من الملبوس الناعم، حتى إن المبتدئ المريد الذي يؤثر طريقهم ويحب الدخول في أمرهم، يوطن نفسه على التقشف والتقلل، ويعلم أن المأكول أيضًا من جنس الملبوس، فيدخل في طريقهم على بصيرة، والإشارة إلى شىء من حالهم في تسميتهم أولى".
وقيل: "إنهم لما ءاثروا الذبول والخمول والتواضع والإنكسار والتخفي والتواري كانوا كالخرقة الملقاة والصدفة المرمية التي لا يُرغب فيها ولا يلتفت إليها، فيقال صوفي نسبة إلى الصوفة كما يقال كوفي نسبة إلى الكوفة، وهذا ما ذكره بعض أهل العلم والمعنى المقصود به قريب ويلائم الاشتقاق، ولم يزل لبس الصوف اختيار الصالحين والزهاد والمتقشفين والعباد" انتهى كلام السهروردي.