Étudiant en droit à Paris, Victor De Swarte est républicain. Il est arrêté lors de la campagne des élections législatives de 1869 pour avoir envahi, avec d’autres protestataires, une réunion d’Émile Ollivier. Il collabore au Mémorial artésien , à La France du Nord et à L’Avenir d’Arras . En mai 1870, il mène à Saint-Omer la campagne pour le non au plébiscite. Il s’engage dans les Mobiles du Nord et fait la guerre sous les ordres de Faidherbe, devenant le plus jeune capitaine de l’armée, à 22 ans. Après la guerre, il fonde à Saint-Omer le Comité républicain, qui contribue à faire élire Faidherbe. Il aide à la création de la bibliothèque populaire, et à celle de la société de tir de la ville. En 1875, il est de retour à Paris. L’année suivante, il est secrétaire du Garde des sceaux. En 1877, il se présente à Hazebrouck, en remplacement d’un des 363, malade, et il fonde à cette occasion Le Journal d’Hazebrouck . Il est largement battu. Il retourne près du sénateur Mancel, son mentor, qui l’emploie à diverses tâches. Mancel devenu président du Sénat, De Swarte devient son chef de cabinet. Il donne alors des articles à L’Événement , à La Paix , au Temps , au Bulletin français , à La Grande Revue de Paris et de Saint-Pétersbourg et à La Revue d’administration fiscale . En récompense de ses services, il est nommé trésorier-payeur général de la Haute-Marne, et reçoit la Légion d’honneur. Il termine sa carrière comme trésorier-payeur du Nord. Malheureusement il confondit sa caisse avec ses finances personnelles, et fut suspendu puis renvoyé (on lui refusera la liquidation de sa retraite) et mis en faillite. Pour gagner sa vie, il devient «chroniqueur financier» lui-même se qualifie de «feuilletoniste de bourse» au Matin et au Radical . Victor De Swarte a beaucoup écrit. La BnF présente soixante-deux titres d’ouvrages écrits par lui. On peut citer parmi d’autres, les livres dans lesquels il relate ses voyages: Six semaines en Russie , De Lille aux Portes de Fer ; ceux qui relèvent de l’histoire de l’art Les Tapisseries flamandes et les cartons de Raphaël , Rembrandt et Antoine Van Dyck , ceux quelquefois mâtinés de finances: Les financiers amateurs d’art au xvi e , xvii e et xviii e siècles , Un banquier du trésor royal au xviii e siècle Samuel Bernar d; enfin ceux qui concernent les finances publiques dont le plus célèbre se trouve être son Traité de comptabilité occulte et des gestions extraréglementaires. Législation, réglementation, procédure, jurisprudence , l’un des tous premiers ouvrages traitant de la comptabilité, au moment où les maires et les conseils municipaux acquéraient en 1884 de nouvelles responsabilités.
Victor De Swarte a été membre de la Société des Antiquaires de la Morinie, du Comité flamand de France, de l’Union artistique du Pas-de-Calais, mais aussi de l’Association amicale des enfants du Nord et du Pas-de-Calais, et de la Société de statistiques de Paris.