Rychlá odpověď je, ano, můžete. Zafunguje to, ale dobrá cesta to není. U řady pluginů totiž takto zůstanou data pluginu v databázi – nedojde totiž k úklidu. A v databází těch tabulek může zůstat hodně a mohou být i dost rozměrné. Typický příklad je WordFence.
Nemluvě o tom, že některé pluginy si zakládají ve struktuře webu vlastní složky, které takto také zůstanou na webu. Typický příklad může být jakýkoliv caching plugin. Nemluvě o WordFence, kde zůstane složka wflogs

Správný postup je, že plugin nejprve deaktivujete a poté odstraníte.


Ale i tady můžete narazit na zádrhel, některé pluginy mají v nastavení volbu, zda chcete při odstranění pluginu také odstranit data – ta může být neaktivní. Třeba proto, že si tvůrci pluginu myslí, že se “to bude hodit” při příští instalaci.
WordFence, když už jsem to párkrát zmínil, má dokonce plugin na odstranění. Wordfence Assistant – výhoda je, že umí provést úklid, aniž byste WordFence měli aktivní.
Nemluvě o tom, že některé pluginy mohou být zabydlené i jinde – shortcodes, například. Ale je toho mnohem více.
