2005年秋末台北樂團一隅之秋解散，擔任主唱/吉他手的洪申豪計畫組織一新樂團，於是找來了一隅之秋時期負責彈奏電吉他的唐世杰擔任鼓手一職，並邀請好友張盛文加入樂團。樂團成立初期一直沒有固定的BASS手，2007年初薛名宏於網路論壇上看見透明雜誌的徵團員啟事後主動和洪申豪連絡，經過多次樂團練習後確定加入。透明雜誌現在的陣容成型。 透明雜誌的作品風格主要建立在四位團員的音樂喜好之上，並無以一特定之類型作為創作最終目標。初期受Pixies、Superchunk、Fugazi、Sonic Youth、Weezer、Cap'n Jazz以及NUMBER GIRL等8、90年代的外國樂團影響所寫的直線吉他噪音搖滾曲子為多數，這些歌曲常以直線行進的爵士鼓和電貝斯為架構搭配刷滿大音量破音效果的電吉他。樂團於2007年9月獨立發行的『4 TRACKS EP』中的四首曲目皆為上述之風格。 十分重視現場演出氣氛的樂團，初期表演的文字宣傳多會註明『請觀眾穿著輕便、盡量避免攜帶相機等物品至現場，以方便活動』。直至近期現場的全員合唱、流汗跳舞、騷動熱絡的氣氛已成透明雜誌的表演傳統，常看透明雜誌現場演出的客人也可接受如此型態的現場演出，不只是站著"看"表演而是參與一場表演。