jQueryでフローティングポップアップウインドウを表示させるには、自作でも比較的簡単に実装できますが、特にこだわりなければプラグインを利用したほうが良い場合が多いと思います。
jQueryでフローティングウインドウといえばThickboxが有名ですが、jQuery1.2.x対応で開発がストップしているということなので、他のプラグインを検討する必要があります。
Thickboxサイトでも推奨されていますが、jQueryを使うのであればFancyboxかColorboxあたりが手軽でお勧めです。スライドショーやインライン、iFrame、外部HTML(Ajax)などに対応しています。
簡単なイメージギャラリーを実現したいだけであれば、Lightboxでも良いでしょう。
FancyboxもColorboxも機能的には大差ないので、どちらを選んでも問題ないと思います。
ただし、ie6が必須の場合は、Fancyboxはie6にて多少の問題があるため、Colorboxを選択した方が良いかもしれません。