ちょいメモ。
Visualforce ページと違って Visualforce コンポーネントには
画面に「プレビュー」ボタンがないので知らなかったんだけど
Visualforce 開発者ガイドに書いてあった。
http://ap.salesforce.com/apexcomponent/[コンポーネント名]
というように、apexcomponent/***** でいけるらしい。
リファレンス
Visualforce 開発者ガイド
（英語）Defining Custom Components | Visualforce Developer’s Guide | Salesforce Developers
（日本語）カスタムコンポーネントの定義 | Visualforce 開発者ガイド | Salesforce Developers