退輔會副主委李文忠近來一直是台北榮總內部傳言的標的，外傳除了他個人處事風格強硬霸氣之外，大剌剌個性並多次與醫師談論，他可影響榮總的人事權，甚至未來會「更上一層樓」說法，讓榮總內部人心惶惶且不安，對於這些說法，李文忠表示，在督導榮總業務時，曾大刀闊斧改革三大不合理的制度，目前用專業評選制度，並杜絕關說的人事文化，連他自已都不能干預人事，因此得罪了不少的既得利益者反彈，所以才會成為北榮內部的話題。

據指出，政黨輪替後，李文忠與劉樹林都是代表執政黨進入退輔會擔任副主委，當時李文忠督導事業管理處與就醫保健處，因此榮總在其督導範圍，2016年9 月榮總內部反應有「萬年副主任、科主任」，經查確實有當了20多年的科主任，這影響了人事的升遷，打擊內部士氣，但是榮總醫生多與各政黨高層的親屬，因治療好其病症維持相當好的關係，所以人事調動都會被影響。

當時主委李翔宙接獲反映，經內部會議討論，因李文忠力主應比照院長、副院長的「3+3+1」制度，不應有「萬年科主任」後，在當年的11月核定實施；加上也對榮總內部多項不合理的制度進行檢討整頓，就成為榮總內部討論的焦點。

據指出，經調整督導業務項目後，李文忠在督導人事業務上，因榮總的黑函文化盛行，為杜絕此歪風，只要是不具名或事證不明確的檢舉函，都不予以處理；若事證明確並經院長、副院長認可後，具名檢舉者與被檢舉人，在接受調查期間都要被保護；事證調查成立後，只要是陳年老帳都從寛，再移送懲戒處理。

李文忠強調可影響榮總人事權　作風強勢引非議

據了解，就因為李文忠在督導人事業務，外傳近來多次在公開或私上場合中，特別是與榮總醫師聚會時，不時會強調可影響榮總人事權，甚至有一說是在年改後，即將「更上一層樓」，顯示其強勢的霸氣，才導致榮總及退輔會內部的議論。

對於這些說法，李文忠表示，榮總醫生與政界關係良好，是眾所皆知，就因為整頓會得罪既得利益者，這些的反彈被攻擊是必然的現象，再者，身為副手最重要是把事情作好，建立專業的好制度，這才是政務官的職責，他不會因為這些反彈攻擊文化，就放任而不去作該作的事。