E-mail
パスワード
次回から自動ログインする
パスワード紛失
新規登録
ホーム
|
新着情報
|
研究室
|
掲示板
|
ぶろぐ
|
Wiki
|
お問合せ
|
アルバム
|
リンク
|
サイトマップ
|
|
一覧
検索
最新
ヘルプ
ページへ戻る
履歴
リンク元
印刷
inc/linux/net130205
をテンプレートにして作成
xpwiki
:inc/linux/net130205 をテンプレートにして作成
開始行:
* 自作PC・家庭内ネットワーク update 2013/2/5
** 過去ログ
[[ネットワーク環境(旧7:2012/12)>http:///modules/pla...
[[ネットワーク環境(旧6:2011/10)>http:///modules/pla...
[[ネットワーク環境(旧5:2011/02)>http:///modules/pla...
[[ネットワーク環境(旧4:2009/01)>http:///modules/pla...
[[ネットワーク環境(旧3:2006/12)>http:///modules/pla...
[[ネットワーク環境(旧2:2004/01)>http:///modules/pla...
[[ネットワーク環境(旧1:2000/12)>http:///modules/pla...
** 目的
+ AMDから最新の22nmのIntel Ivy Bridgeに移行して省エネを...
++ フロントパネル。マシン単体ではワットチェッカーの読みで...
|[[&ref(site://modules/dblog1/upimg/t_052d47ad43cf3d2734d...
++ アイドル時(公開サーバー稼働中)、マシン本体+光モデム...
+ PCIパススルーを活用したい。
注意:ESXi5.1では、USBコントローラのパススルーが設定でき...
++ Windowsクライアントを安定稼働させたい。
--- Musicサーバーのプチプチ途切れ音、ブルースクリーンを減...
--- 家族用ゼロクライアントマシンが時々ブルースクリーンに...
++ NAS用ディスクを、PCIパススルーしたSATAコントローラ配下...
--- 今までのようにESXi管理下のVMFSフォーマットでは、いざ...
RAWマウントによりディスク状態もマウントするOSから直接モ...
--- ESXi管理下のVMFSフォーマットでは、ディスクが解列する...
++ PCIパススルーの設定現状
3スロットあるPCIバスは、パススルーの設定は一括となり、...
|&ref(PCI_Pass.jpg,mw:360,mh:360);|
CENTER:各スロットの構成。パススルーゲスト列が空欄のものは...
|スロット|>|デバイス名|パススルーゲスト|h
|00:02:0|オンボード|VGA||
|00:1a:0|オンボード|USB-1||
|00:1d:0|オンボード|USB-2||
|00:1f:2|オンボード&br;(Intel)Panther Point AHCI|SATA|Cen...
|00:1:0&br;00:01:0|PCIe X2&br;(Intel)82574L|GbLAN|Windows...
|00:1c:0&br;02:00:0|PCIe X2&br;(MARVEL)88SE9230|SATA||
|00:1c:4&br;03:00:0|オンボード&br;(Realtek)R8168|GbLAN||
|00:1c:5&br;05:00:0~2|PCI&br;(NEC)USB/USB2.0&br;(玄人志向...
|00:1c:6&br;06:00:0|PCIe X1&br;(玄人志向)USB3.0RD-PCIe|US...
|00:1c:7&br;07:00:0|PCIe X2&br;(Intel)82574L|GbLAN||
** 仮想マシン構成
以下の6つのゲストマシンを常時稼働中。
- NAS/iSCSIターゲット/REGZA録画用: CentOS6.3 (2vCPU)
-- ブート直後、ESXiがこのゲストのiSCSIをマウントできない...
- 公開WEBサーバー: %%Scientific Linux 6.3 (1vCPU) %% K...
-- %%従来は2vCPU割り当てていたけれども、今回は1vCPUで試し...
- メールサーバー、DNS: CentOS5.8 (2vCPU)
-- これも2vCPU割り当てていたけれども、1vCPUで全く不足なし。
- ソフトルーター: vyatta (1vCPU)
- %%Musicサーバー: WindowsXP (2vCPU)%%
- %%家族用ゼロクライアント: WindowsXP (2vCPU)%%
|&ref(system.jpg,mw:320,mh:320);|
** テスト用マザーボードとCPU
ESXiなどの仮想化マシンでPCIパススルーを行うには、M/BとC...
- マザーボード:(AsRock)ZH77 pro3
- CPU:(Intel)Core i5 3470S
- SATAボード:(High Point) Rocket 640L [SATA6Gb/s/RAID]
+ CPU
Intelでは、今年出たIvy BridgeのCorei5系CPUにVT-d対応品が...
-- Ivy BridgeでもVT-d非対応のものもあるので要注意!
-- Hyper Threadingは非対応だが問題なし。
&br;
|[[&ref(site://modules/dblog1/upimg/t_024b765fee98cfa3641...
+ マザーボード
安価なH77チップセット系から選定。 「7」系のIntelチップ...
メーカーにもよるが、大体のM/BではBIOS/UEFIの設定の中に...
まずはテスト用なので、安価な(AsRock)[[ZH77 pro3>http:...
+ SATAボード
M/B上のSATAコントローラをパススルーすると、ESXi起動直後...
この時、Aoyamaさんの[[ESXi5.1のIDマップを作成してみる(M...
--> 結果的には、4ポートのうち2ポートしか認識しない。B...
** 本稼働用マザーボードとハードディスク
+ マザーボード:[[(ASUS)H77V-LE:http://www.asus.co.jp/Mot...
-- PCIe X4スロットが1本ある。
--> Rocket 640L もフルで4ポート使える?
--> 結果、このM/Bでも2ポートしか認識しない。H77チップ...
-- PCIe X1スロットが2本ある。
-- 内蔵NICはAsRockのM/Bと同様に(Realtec)8111なのでESXi5が...
+ HDD:(Western Digital)NAS用REDシリーズ [[WD30EFRX:http...
少し高くてSOHO・自宅用としてはオーバースペックな気もする...
|[[&ref(site://modules/dblog1/upimg/t_004b7fab163b9b9c2f0...
+ ディスクドライブの構成のパーティション
- SSD == VMDKフォーマット、ESXi用ストレージとし各ゲスト...
- HDDはパススルーしたRAW DISK をメインゲストマシンのCentO...
-- sda,sdb: (WD) WD30EFRX (3TB) == データ領域。
--- LVMの先頭ボリウム [vm0-lv0] はiSCSIターゲット領域とし...
--- 以降のボリウム [vm1-lv1] はNAS用としてext4でマウント...
-- sdc,sdd: (WD) WD25EZRX (2.5TB) == データ領域のRAID-1ス...
-- RAW DISKのパーティション・ボリウム構成は以下のようにし...
|領域|ボリウム|sda|sdb|sdc|sdd|h
|1|vg0-lv0&br;iSCSI&br;target用|md0᥿...
|2|vg1-lv1&br;&br;DATA用|md1|md1|...
|3|~|md2|md2|md5|md5|
|4|~|md3|md3|md6|md6|
|5|~|md4|md4|-|-|
CENTER:(s)はRaid-1スペアディスク
- mdadmでRAIDを構成する際の注意点
仮想化の話ではなくてLinux RAIDの話になるが、今回ESXiで...
そのままだとRAIDの構成がおかしくなってしまうので、以下...
-- /etc/mdadm.conf を編集
# vi /etc/mdadm.conf
#code(bash,nonumber){{
DEVICE partitions
}}
続いて、以下のコマンドで表示される内容を、そのまま/etc/md...
# mdadm -D --scan
/etc/mdadm.confは以下のようになった。
#code(bash,nonumber){{
DEVICE partitions
ARRAY /dev/md0 metadata=1.2 spares=1 name=localhost.local...
ARRAY /dev/md1 metadata=1.2 spares=1 name=localhost.local...
ARRAY /dev/md2 metadata=1.2 spares=1 name=localhost.local...
ARRAY /dev/md3 metadata=1.2 spares=1 name=localhost.local...
ARRAY /dev/md4 metadata=1.2 name=localhost.localdomain:4 ...
ARRAY /dev/md5 metadata=1.2 name=localhost.localdomain:5 ...
ARRAY /dev/md6 metadata=1.2 name=localhost.localdomain:6 ...
}}
-- mdadm(Linux RAID) ではなくて、Fake RAIDと呼ばれるオン...
一度解列されると再構築に時間がかかるのだが、そのぶん普...
-- メインのゲストマシンにFreeNAS/NAS4FreeでZFSファイルシ...
- Crystal Disc Mark のベンチ
キャッシュが十分に効いている状況でのテストです。 これだ...
|&ref(DiskMark.jpg,mw:240,mh:240);|
** USB3.0コントローラーのパススルーテスト
テスト的に、(玄人指向)USB3.0RD-PCIe、Ubuntu12.04でUSB3....
|[[&ref(site://modules/dblog1/upimg/t_018af304ba2a6092bd4...
+ 使用機器
HDDケース
-- (NOVAC) [[2SATA HDDはい~るKIT RAID Data Saver NV-HS2...
-- USB3.0 と eSATA のどちらか片方の接続が可能
-- RAID使用可能と思うが、今回は単独ディスクとして確認
&br;
|コントローラ/ゲストOS|CentOS 6.3|ubuntu 12.04|h
|M/B内蔵H77(Intel)コントローラ&br;ESXi usbパススルー|&tim...
|M/B内蔵H77(Intel)コントローラ&br;PCIパススルー|×(2...
|(玄人志向)USB3.0RD-PCIe&br;PCIパススルー|×(2.0)|○|
+ 但し、USB3.0接続できた組み合わせでも、HDDを2台入れた状...
+ 書き込み速度は、100MB/s程度出る。 但し、読み込みはUSB3...
+ 他のOS
-- Windows XP sp3では、(玄人志向)USB3.0RD-PCIeをパススル...
-- Windows 7 ではディスクの認識はOK、USB2.0だと読み書き...
** NICパススルーはゲストマシンに負荷がかかる?
(INTEL)[[PRO/1000 GT DESKTOP ADAPTOR>http://www.intel.com...
|[[&ref(site://modules/dblog1/upimg/t_073bb2f15f4e9c031fa...
-- パススルーではなくてESXi経由で普通に使う分には大丈夫な...
-- 最近のPCIスロットはネイティブPCIではなくて、PCIe/PCI...
-- 最終的には、PCIeに別のNICを追加して、そちらをパススル...
** ハード構成まとめ
|CENTER:PARTS|>|CENTER:型式・仕様|h
|CASE|>|(ANTEC) [[P-150>http://www.antec.com/product.php?...
|M/B|>|[[(ASUS)P8H77-V LE>http://www.asus.co.jp/Motherb...
|~|Socket|LGA1155|
|~|Chipset|(Intel)H77&br;SerialHDDコントローラ、ギガLANデ...
|CPU|>|(Intel)[[Core i5 3470S BOX>http://ark.intel.com/ja...
|Memory|>|(Team) [[TED316G1600C11DC>http://kakaku.com/ite...
|HDD|>|(Intel) [[510 Series SSDSC2MH120A2K5>http://review...
|LAN CARD|(iSCSI用)&br;(パススルー用)|(INTEL) [[Gigabit C...
|USB FLASH|>|適当な2GBのもの。ESXiのUSBブートに使用|
|USB CARD|USB3.0|(玄人志向) [[USB3.0RD-PCIe:http://kakaku...
|~|USB2.0|(玄人志向) [[USB2.0N6P-PCI:http://kakaku.com/it...
|USB &br;SOUND DEVICE|>|(JAVS) [[X-DDC (Black):http://kak...
** 総括
- 今回のCPUは確かに省電力ではあるけど、CPUパワーはそれほ...
- PCIパススルー自体は可能な拡張ボードでも、パスした結果ゲ...
- Musicサーバー用に当初はオンボードのUSBコントローラ-2を...
-- しかし、このマザーのH77チップセットだとPCIボードは一括...
- 家族用ゼロクライアント用にPCIのGbLANをパススルーするとC...
:-D ということで、当初の目的に照らすと微妙に未達成な面...
** 参考
- 本稿執筆後の追加ページ
-- [[[仮想化] XP仮想マシンを8.1Proにバージョンアップ:http...
-- [[[仮想化] パススルーしたIEEE1394経由でDVテープから動...
- サイト内関連リンク
-- [[[仮想化] ESXi 新物理サーバー移行経過:http:///modules...
-- [[[仮想化] ESXiゲストのREGZAリンクHDD交換でハマり方:ht...
-- [[[仮想化] ESXi 次期サーバー移行案:http:///modules/dbl...
-- [[[仮想化] メモリ24GBに増設ほか:http://www.naaon.com/m...
終了行:
* 自作PC・家庭内ネットワーク update 2013/2/5
** 過去ログ
[[ネットワーク環境(旧7:2012/12)>http:///modules/pla...
[[ネットワーク環境(旧6:2011/10)>http:///modules/pla...
[[ネットワーク環境(旧5:2011/02)>http:///modules/pla...
[[ネットワーク環境(旧4:2009/01)>http:///modules/pla...
[[ネットワーク環境(旧3:2006/12)>http:///modules/pla...
[[ネットワーク環境(旧2:2004/01)>http:///modules/pla...
[[ネットワーク環境(旧1:2000/12)>http:///modules/pla...
** 目的
+ AMDから最新の22nmのIntel Ivy Bridgeに移行して省エネを...
++ フロントパネル。マシン単体ではワットチェッカーの読みで...
|[[&ref(site://modules/dblog1/upimg/t_052d47ad43cf3d2734d...
++ アイドル時(公開サーバー稼働中)、マシン本体+光モデム...
+ PCIパススルーを活用したい。
注意:ESXi5.1では、USBコントローラのパススルーが設定でき...
++ Windowsクライアントを安定稼働させたい。
--- Musicサーバーのプチプチ途切れ音、ブルースクリーンを減...
--- 家族用ゼロクライアントマシンが時々ブルースクリーンに...
++ NAS用ディスクを、PCIパススルーしたSATAコントローラ配下...
--- 今までのようにESXi管理下のVMFSフォーマットでは、いざ...
RAWマウントによりディスク状態もマウントするOSから直接モ...
--- ESXi管理下のVMFSフォーマットでは、ディスクが解列する...
++ PCIパススルーの設定現状
3スロットあるPCIバスは、パススルーの設定は一括となり、...
|&ref(PCI_Pass.jpg,mw:360,mh:360);|
CENTER:各スロットの構成。パススルーゲスト列が空欄のものは...
|スロット|>|デバイス名|パススルーゲスト|h
|00:02:0|オンボード|VGA||
|00:1a:0|オンボード|USB-1||
|00:1d:0|オンボード|USB-2||
|00:1f:2|オンボード&br;(Intel)Panther Point AHCI|SATA|Cen...
|00:1:0&br;00:01:0|PCIe X2&br;(Intel)82574L|GbLAN|Windows...
|00:1c:0&br;02:00:0|PCIe X2&br;(MARVEL)88SE9230|SATA||
|00:1c:4&br;03:00:0|オンボード&br;(Realtek)R8168|GbLAN||
|00:1c:5&br;05:00:0~2|PCI&br;(NEC)USB/USB2.0&br;(玄人志向...
|00:1c:6&br;06:00:0|PCIe X1&br;(玄人志向)USB3.0RD-PCIe|US...
|00:1c:7&br;07:00:0|PCIe X2&br;(Intel)82574L|GbLAN||
** 仮想マシン構成
以下の6つのゲストマシンを常時稼働中。
- NAS/iSCSIターゲット/REGZA録画用: CentOS6.3 (2vCPU)
-- ブート直後、ESXiがこのゲストのiSCSIをマウントできない...
- 公開WEBサーバー: %%Scientific Linux 6.3 (1vCPU) %% K...
-- %%従来は2vCPU割り当てていたけれども、今回は1vCPUで試し...
- メールサーバー、DNS: CentOS5.8 (2vCPU)
-- これも2vCPU割り当てていたけれども、1vCPUで全く不足なし。
- ソフトルーター: vyatta (1vCPU)
- %%Musicサーバー: WindowsXP (2vCPU)%%
- %%家族用ゼロクライアント: WindowsXP (2vCPU)%%
|&ref(system.jpg,mw:320,mh:320);|
** テスト用マザーボードとCPU
ESXiなどの仮想化マシンでPCIパススルーを行うには、M/BとC...
- マザーボード:(AsRock)ZH77 pro3
- CPU:(Intel)Core i5 3470S
- SATAボード:(High Point) Rocket 640L [SATA6Gb/s/RAID]
+ CPU
Intelでは、今年出たIvy BridgeのCorei5系CPUにVT-d対応品が...
-- Ivy BridgeでもVT-d非対応のものもあるので要注意!
-- Hyper Threadingは非対応だが問題なし。
&br;
|[[&ref(site://modules/dblog1/upimg/t_024b765fee98cfa3641...
+ マザーボード
安価なH77チップセット系から選定。 「7」系のIntelチップ...
メーカーにもよるが、大体のM/BではBIOS/UEFIの設定の中に...
まずはテスト用なので、安価な(AsRock)[[ZH77 pro3>http:...
+ SATAボード
M/B上のSATAコントローラをパススルーすると、ESXi起動直後...
この時、Aoyamaさんの[[ESXi5.1のIDマップを作成してみる(M...
--> 結果的には、4ポートのうち2ポートしか認識しない。B...
** 本稼働用マザーボードとハードディスク
+ マザーボード:[[(ASUS)H77V-LE:http://www.asus.co.jp/Mot...
-- PCIe X4スロットが1本ある。
--> Rocket 640L もフルで4ポート使える?
--> 結果、このM/Bでも2ポートしか認識しない。H77チップ...
-- PCIe X1スロットが2本ある。
-- 内蔵NICはAsRockのM/Bと同様に(Realtec)8111なのでESXi5が...
+ HDD:(Western Digital)NAS用REDシリーズ [[WD30EFRX:http...
少し高くてSOHO・自宅用としてはオーバースペックな気もする...
|[[&ref(site://modules/dblog1/upimg/t_004b7fab163b9b9c2f0...
+ ディスクドライブの構成のパーティション
- SSD == VMDKフォーマット、ESXi用ストレージとし各ゲスト...
- HDDはパススルーしたRAW DISK をメインゲストマシンのCentO...
-- sda,sdb: (WD) WD30EFRX (3TB) == データ領域。
--- LVMの先頭ボリウム [vm0-lv0] はiSCSIターゲット領域とし...
--- 以降のボリウム [vm1-lv1] はNAS用としてext4でマウント...
-- sdc,sdd: (WD) WD25EZRX (2.5TB) == データ領域のRAID-1ス...
-- RAW DISKのパーティション・ボリウム構成は以下のようにし...
|領域|ボリウム|sda|sdb|sdc|sdd|h
|1|vg0-lv0&br;iSCSI&br;target用|md0᥿...
|2|vg1-lv1&br;&br;DATA用|md1|md1|...
|3|~|md2|md2|md5|md5|
|4|~|md3|md3|md6|md6|
|5|~|md4|md4|-|-|
CENTER:(s)はRaid-1スペアディスク
- mdadmでRAIDを構成する際の注意点
仮想化の話ではなくてLinux RAIDの話になるが、今回ESXiで...
そのままだとRAIDの構成がおかしくなってしまうので、以下...
-- /etc/mdadm.conf を編集
# vi /etc/mdadm.conf
#code(bash,nonumber){{
DEVICE partitions
}}
続いて、以下のコマンドで表示される内容を、そのまま/etc/md...
# mdadm -D --scan
/etc/mdadm.confは以下のようになった。
#code(bash,nonumber){{
DEVICE partitions
ARRAY /dev/md0 metadata=1.2 spares=1 name=localhost.local...
ARRAY /dev/md1 metadata=1.2 spares=1 name=localhost.local...
ARRAY /dev/md2 metadata=1.2 spares=1 name=localhost.local...
ARRAY /dev/md3 metadata=1.2 spares=1 name=localhost.local...
ARRAY /dev/md4 metadata=1.2 name=localhost.localdomain:4 ...
ARRAY /dev/md5 metadata=1.2 name=localhost.localdomain:5 ...
ARRAY /dev/md6 metadata=1.2 name=localhost.localdomain:6 ...
}}
-- mdadm(Linux RAID) ではなくて、Fake RAIDと呼ばれるオン...
一度解列されると再構築に時間がかかるのだが、そのぶん普...
-- メインのゲストマシンにFreeNAS/NAS4FreeでZFSファイルシ...
- Crystal Disc Mark のベンチ
キャッシュが十分に効いている状況でのテストです。 これだ...
|&ref(DiskMark.jpg,mw:240,mh:240);|
** USB3.0コントローラーのパススルーテスト
テスト的に、(玄人指向)USB3.0RD-PCIe、Ubuntu12.04でUSB3....
|[[&ref(site://modules/dblog1/upimg/t_018af304ba2a6092bd4...
+ 使用機器
HDDケース
-- (NOVAC) [[2SATA HDDはい~るKIT RAID Data Saver NV-HS2...
-- USB3.0 と eSATA のどちらか片方の接続が可能
-- RAID使用可能と思うが、今回は単独ディスクとして確認
&br;
|コントローラ/ゲストOS|CentOS 6.3|ubuntu 12.04|h
|M/B内蔵H77(Intel)コントローラ&br;ESXi usbパススルー|&tim...
|M/B内蔵H77(Intel)コントローラ&br;PCIパススルー|×(2...
|(玄人志向)USB3.0RD-PCIe&br;PCIパススルー|×(2.0)|○|
+ 但し、USB3.0接続できた組み合わせでも、HDDを2台入れた状...
+ 書き込み速度は、100MB/s程度出る。 但し、読み込みはUSB3...
+ 他のOS
-- Windows XP sp3では、(玄人志向)USB3.0RD-PCIeをパススル...
-- Windows 7 ではディスクの認識はOK、USB2.0だと読み書き...
** NICパススルーはゲストマシンに負荷がかかる?
(INTEL)[[PRO/1000 GT DESKTOP ADAPTOR>http://www.intel.com...
|[[&ref(site://modules/dblog1/upimg/t_073bb2f15f4e9c031fa...
-- パススルーではなくてESXi経由で普通に使う分には大丈夫な...
-- 最近のPCIスロットはネイティブPCIではなくて、PCIe/PCI...
-- 最終的には、PCIeに別のNICを追加して、そちらをパススル...
** ハード構成まとめ
|CENTER:PARTS|>|CENTER:型式・仕様|h
|CASE|>|(ANTEC) [[P-150>http://www.antec.com/product.php?...
|M/B|>|[[(ASUS)P8H77-V LE>http://www.asus.co.jp/Motherb...
|~|Socket|LGA1155|
|~|Chipset|(Intel)H77&br;SerialHDDコントローラ、ギガLANデ...
|CPU|>|(Intel)[[Core i5 3470S BOX>http://ark.intel.com/ja...
|Memory|>|(Team) [[TED316G1600C11DC>http://kakaku.com/ite...
|HDD|>|(Intel) [[510 Series SSDSC2MH120A2K5>http://review...
|LAN CARD|(iSCSI用)&br;(パススルー用)|(INTEL) [[Gigabit C...
|USB FLASH|>|適当な2GBのもの。ESXiのUSBブートに使用|
|USB CARD|USB3.0|(玄人志向) [[USB3.0RD-PCIe:http://kakaku...
|~|USB2.0|(玄人志向) [[USB2.0N6P-PCI:http://kakaku.com/it...
|USB &br;SOUND DEVICE|>|(JAVS) [[X-DDC (Black):http://kak...
** 総括
- 今回のCPUは確かに省電力ではあるけど、CPUパワーはそれほ...
- PCIパススルー自体は可能な拡張ボードでも、パスした結果ゲ...
- Musicサーバー用に当初はオンボードのUSBコントローラ-2を...
-- しかし、このマザーのH77チップセットだとPCIボードは一括...
- 家族用ゼロクライアント用にPCIのGbLANをパススルーするとC...
:-D ということで、当初の目的に照らすと微妙に未達成な面...
** 参考
- 本稿執筆後の追加ページ
-- [[[仮想化] XP仮想マシンを8.1Proにバージョンアップ:http...
-- [[[仮想化] パススルーしたIEEE1394経由でDVテープから動...
- サイト内関連リンク
-- [[[仮想化] ESXi 新物理サーバー移行経過:http:///modules...
-- [[[仮想化] ESXiゲストのREGZAリンクHDD交換でハマり方:ht...
-- [[[仮想化] ESXi 次期サーバー移行案:http:///modules/dbl...
-- [[[仮想化] メモリ24GBに増設ほか:http://www.naaon.com/m...
ページ名:
ぺージ情報
ぺージ名 :
inc/linux/net130205
ページ別名 :
未設定
ページ作成 :
なーお
閲覧可
グループ :
すべての訪問者
ユーザー :
すべての訪問者
編集可
グループ :
なし
ユーザー :
なし
Counter: 0, today: 0, yesterday: 0
Go Page Top
Powered by
XOOPS Cube
2.2 © 2001-2012
XOOPS Cube Project
, theme design by
BCOOL
ログイン
ユーザ名:
パスワード:
IDとパスワードを記憶
パスワード紛失
新規登録
メインメニュー
ホーム
なーお'nぶろぐ
フォーラム
なーお'n研究室
xpwiki
最新ページ一覧
全ページ一覧
ヘルプ
新着情報
マイアルバム
ラン記録
大会リスト
シューズリスト
画像マネージャ
マイフレンド
WEBリンク集