秀吉には大いに信頼された。
小早川隆景の死後、五大老に列せられる。
越後から会津に移封されたが、これは秀吉の意地悪ではなく、徳川家康の背後を押さえる役目だった前領主の蒲生氏郷が急死したための窮余の一策で、信頼されていたからこそのことだった