倾听环境对倾听的质量有着巨大的影响。例如，为保证沟通的顺利进行，讲话人在喧闹的环境中讲话要比在安静环境中讲话的声音大得多：而且环境也影响倾听的连续性，进而影响人与人之间的交流。
社会学专家们曾经组织的一项调查表明：由于各种因素的干扰，相距10米的人，每天进行谈话的可能性只有8%～9%，而相距5米的人，这一可能性则达到了25%。重视倾听的管理者必须意识到这些不良环境因素的影响，最大限度地消除不良环境对倾听的阻碍。
美国学者在一个更为宽泛的意义上提出倾听环境的概念，它不仅包括社会因素，而且包含人的心理、生理因素。这一观点认为良好的倾听环境应包括：
（1）安全的环境。在这种环境中，双方有一定安全感，并有与他人平等的感觉。这种环境可以是正式的，比如谈判场所，也可以是非正式的，如在酒吧或咖啡厅。
（2）适当的地点。根据不同的谈话选择合适的倾听环境。例如内容需要保密的谈话则必须保证不受干扰，可选择较为封闭、有隔音设备的倾听环境。
（3）合适的时间。选择适宜的时间，同时保证沟通的次数。这样的时间选择必须得到对方的认可，最好提前与对方预约，让对方能充足的准备。