初桓南郡、楊廣共說殷荊州，宜奪殷覬南蠻以自樹。覬亦即曉其旨，嘗因行散，率爾去下舍，便不復還。內外無預知者，意色蕭然，遠同鬥生之無慍。時論以此多之。
孫長樂作王長史誄雲：“余與夫子，交非勢利，心猶澄水，同此玄味。”王孝伯見曰：“才士不遜，亡祖何至與此人周旋！”
王緒數讒殷荊州於王國寶，殷甚患之，求術於王東亭。曰：“卿但數詣王緒，往輒屏人，因論它事，如此，則二王之好離矣。”殷從之。國寶見王緒問曰：“比與仲堪屏人何所道？”緒雲：“故是常往來，無它所論。”國寶謂緒於己有隱，果情好日疏，讒言以息。