Στις 24 Απριλίου του 1868 ιδρύεται ο Εμπορικός Σύλλογος Ερμής, με επικεφαλής τον Γερμανό κεφαλαιούχο Θεόδωρο Άμβουργερ και μια ομάδα 36 εμπόρων της Πάτρας. Στο σπίτι του επιχειρηματία Μαρτίνου Φελς, η παραπάνω ομάδα αποφάσισε τη δημιουργία ενός επαγγελματικού σωματείου των πατρινών εμπόρων, εγκρίνοντας το σχετικό ιδρυτικό πρακτικό.

Στις 18 του Γενάρη το 1895 ψηφίζεται και επικυρώνεται το καταστατικό του Ερμή με βασιλικό διάταγμα, που δημοσιεύτηκε στην Εφημερίδα της Κυβερνήσεως του ίδιου χρόνου.

Σκοπός του Συλλόγου όπως ορίζονταν από το καταστατικό ήταν η σύσκεψη των μελών του και η συζήτηση για όλα τα ζητήματα που αφορούσαν στις ανάγκες και στα συμφέροντα του εμπορίου και της βιομηχανίας γενικά καθώς και αυτά που ενδιέφεραν την πόλη της Πάτρας και η αναζήτηση των καλύτερων λύσεων και προτάσεων.

Επίσημη εγκατάσταση του Ερμή στο ιδιόκτητο πλέον μεγαλοπρεπές μέγαρο της πλατείας Γεωργίου Α΄. Τα εγκαίνια πραγματοποιήθηκαν σε επίσημη τελετή που έγινε την Τετάρτη 30 Νοεμβρίου 1911, ημέρα της εορτής του πολιούχου της Πάτρας Αποστόλου Ανδρέα, στις οκτώ το βράδυ. Στα εγκαίνια είχαν παραστεί μέλη  συλλόγων της πόλης και μια σημαντική μερίδα επώνυμων μεγαλοαστών .

Το οίκημα του Ερμή επιτάσσεται από τον ιταλικό στρατό, ο οποίος το χρησιμοποιεί ως τοπικό αρχηγείο. Ο ίδιος ο σύλλογος παύει ουσιαστικά να λειτουργεί. Στις 10 του Σεπτέμβρη του 1943, το κτίριο το παραλαμβάνουν οι Γερμανοί που το μεταβάλλουν σε στρατώνα. Κατά τη διάρκεια της επίταξης το οίκημα υπέστη μεγάλες ζημιές αφού ένα μέρος των δωματίων και των πολύτιμων επίπλων, πινάκων, γραφείων κ.α. καταστράφηκε ή κλάπηκε.

Μετά την απελευθέρωση το κτίριο επιτάχθηκε ξανά από τη χωροφυλακή νοτιοδυτικής Ελλάδας για της ανάγκες στέγασής της μέχρι το 1954 όπου τελικά τον Απρίλιο του ίδιου χρόνου ο Ερμής επιστρέφει στα χέρια των ιδιοκτητών του.

Ο Ερμής, λειτούργησε για εκατόν είκοσι και πλέον χρόνια ως επαγγελματικός σύλλογος.  Με το πέρασμα του χρόνου γνώρισε επτά τροποποιήσεις. Από το Μάρτη του 1995 ο Ερμής αλλάζει ως προς το περιεχόμενό του και μεταβάλλεται από επαγγελματικό σε πολιτιστικό σωματείο. Ως σκοποί του Ερμή ορίζονται μεταξύ άλλων, η ανάπτυξη δραστηριοτήτων σχετικών με τον πολιτισμό, την κοινωνική ζωή, το εμπόριο και την οικονομία γενικά, η παρακολούθηση των κοινωνικών, οικονομικών και εμπορικών προβλημάτων της Πάτρας και της ευρύτερης περιοχής και οργάνωση διαλέξεων και σεμιναρίων για την προώθηση των αρχών του εμπορίου και για τη γνώση των οικονομικών θεμάτων.