Per il Polimetilmetacrilato (nomi commerciali Plexiglas, Perspex, ecc) servono colle specifiche che si vendono, in genere, dove si compera il Plexiglas.
Cerca anche su internet
incollaggio plexiglas.
Tempo fa comunque, per lo stesso uso, come collante avevo usato acetone in cui avevo sciolto qualche ritaglio di Plexiglas e, ad incollaggio avvenuto, avevo fatto colare lungo tutti gli spigoli la stessa colla più diluita per assicurare la tenuta.
Per un filtro interno sarebbe forse poco estetico vedere le frattaglie interne del filtro stesso. Per evitare ciò potresti prendere del Plexiglas opaline che è pigmentato nero
PS: nei vari brico si trovano diversi materiali plastici trasparenti o semitrasparenti che vengono impropriamente chiamati plexiglas, assicurati che quello che comperi sia polimetilmetacrilato (cerca su internet
polimetilmetacrilato Wikipedia per conoscere i nomi commerciali), se non è polimetilmetacrilato le colle per Plexiglas potrebbero non andare bene.