渡は1991年に直腸がんが見つかり、手術後、人工肛門をつけることを余儀なくされた。その後も肺気腫やぜんそくといった呼吸器系の持病に苦しめられてきた。さらに、2015年6月には急性心筋梗塞で倒れ、緊急手術をしている。
「実際には外出時も酸素吸入器を外せない状態です。今年も壮絶な闘病の中でのCM撮影だったそうです」（広告関係者）

最近は近所を歩くこともままならず、自宅療養が続いているようだ。これまで渡は、体調が心配される中でもたびたび復帰を果たしてきた。昨年4月には、周囲が「体力的に大丈夫なのか」と心配する中、石原プロの「相談取締役」として経営陣に復帰した。1か月前の3月に実弟である渡瀬恒彦さん（享年72）が亡くなったことが理由の1つだったという。
「渡瀬さんは2015年秋に胆のうがんが見つかりましたが、がんは小康状態。亡くなったきっかけは『肺気腫』でした。奇しくも、渡さんも同じ病気で苦しみ、兄弟の母・雅子さんもかつて肺炎で亡くなっている。実は、それまでは滅多にしなかったのに、闘病が始まってからお互いの家を行き来するなど、頻繁に連絡を取り合っていました」（渡瀬さんを知る関係者）

渡瀬さんはスペシャルドラマ『そして誰もいなくなった』（テレビ朝日系）で、末期の肺がんに侵された狂気の犯人役を演じきり、その放送の11日前に亡くなった。
「渡さんは、渡瀬さんと“どちらが先に逝っても、派手なお別れ会はやめておこう”と約束したそうです。また、渡瀬さんが死の直前まで次の撮影を考えていたことに、“同じ役者としての絆を感じた”と深い感銘を漏らしていたそうです」

館には無理、あの人って松田優作の舎弟みたいにしか見えない