Sunday, March 18, 2007

Visie op Server Virtualisatie: publicatie 9 maart 2007 in LAN Magazine

Volg de achtervolger
Oplaaiende strijd in virtualisatiewereld

Hans Vredevoort

Microsoft zal de komende 1 à 2 jaar een machtsgreep plegen op de markt van servervirtualisatie, zo voorspelt senior consultant Hans Vredevoort van Nobel. Wat heeft Windows Virtualization ons de komende jaren te bieden? Let the games begin!

Microsoft kan niet altijd worden beschuldigd van originaliteit. Er zijn flink wat voorbeelden op te sommen waarbij Microsoft goedschiks dan wel kwaadschiks het idee van een goed product overnam, of, sterker nog, de maker van het product in zijn geheel opslokte. Geld maakt machtig, hoewel dat zeker niet alleen voor Microsoft geldt. Vijfentwintig jaar geleden al achtervolgde Microsoft het immens populaire spreadsheetprogramma Lotus 1-2-3 dat in 1983 op de markt was gekomen. Het succes was zo groot dat Microsoft beslist niet achter kon blijven en werkte aan een eigen spreadsheetprogramma onder het devies van ‘do everything 1-2-3 does and do it better’. De onbetwiste leider werd in de jaren daarna volledig voorbijgestreefd. In de jaren negentig zagen we hoe op nagenoeg vergelijkbare wijze de populaire browser Netscape werd ingehaald en verpletterd door Internet Explorer, simpelweg door de laatste te integreren in Windows zelf. Denk ook in dit verband aan de strijd tussen Novell en Microsoft op het gebied van netwerkbesturingsystemen. We weten wie de uiteindelijke winnaar is geworden. Dit zijn maar een paar sprekende voorbeelden.
Terwijl VMware dezer dagen heer en meester is met hun servervirtualisatieproducten VMware Server en VMware Infrastructure, vormt zich langzamerhand een front waarbij partijen die je normaliter nooit met elkaar in verband zou brengen, samenwerkingsverbanden smeden. Denk aan de reikende hand van Microsoft naar Novell en de samenwerking met XenSource, de open-sourceontwikkelaar die eind 2006 met het para-virtualisatieplatform XenEnterprise op de markt kwam, onder andere als onderdeel van Novells SuSE Linux Enterprise 10. De producten van XenSource zullen gaan werken in combinatie met Windows Virtualization binnen Longhorn Server. Als je verder in overweging neemt dat Red Hat oorspronkelijk van plan was om ook Xen te integreren, maar hier eind 2006 van afzag en richting VMware kroop, moet je concluderen dat we twee kampen zien ontstaan: VMware (inmiddels onderdeel van EMC) en Red Hat aan de ene kant en Microsoft, XenSource en Novell aan de andere kant. Hoewel de vooraanstaande serverleveranciers claimen dat beide platformen volop ondersteund worden, neigen de grote jongens HP, IBM en Dell naar mijn mening meer naar de kant van VMware.

Terug naar de toekomst
Nu dan terug naar de toekomst. Mijn stelling is dat Microsoft het staaltje powerplay, zoals in de inleiding is beschreven, in de komende twee tot drie jaar gaat herhalen op het gebied van servervirtualisatie en mogelijk zelfs gaat beslissen in haar voordeel. Een goede observant zal hebben opgemerkt dat Microsoft zich flink aan het versterken is op verschillende gebieden van de virtualisatiemarkt. De overname van Connectix in 2003 zorgde voor een entree in de virtualisatiewereld met producten zoals Virtual PC en Virtual Server. In 2005 werd Virtual Server doorontwikkeld tot Virtual Server 2005 R2 dat ook gebruik kon maken van op x64 gebaseerde hardware. In 2006 werd Softricity overgenomen, waarmee het superieure applicatievirtualisatieproduct SoftGrid werd binnengehaald. Nu gaan er zelfs geruchten dat Microsoft (wellicht indirect via Novell), een overname overweegt op XenSource, de maker van het veelbelovende Enterprise Virtualisatie systeem XenEnterprise. Wat niet slecht zal uitkomen tijdens de onwikkeling van een hypervisor in de eerstvolgende versie van Windows Server - codenaam Windows Longhorn Server. Er is sprake van grote beroering in de open-sourcemarkt, waarbij Novell door sommigen zelfs als een verrader wordt aangemerkt.
We laten de polemiek en het wapengekletter nu even voor wat het is, zodat we ons kunnen concentreren op wat Windows Virtualization ons de komende jaren te bieden heeft.

De Hypervisor
Een hypervisor, ook wel Virtual Machine Monitor genoemd, is een flinterdunne kernel tussen de hardware en de erboven liggende gevirtualiseerde machines. De term hypervisor komt van origine van IBM waarbij al in 1972 bij VM/370 gesproken werd over een hypervisor als de para-virtualisatie interface, waarbij een gast-OS toegang had tot lager liggende services direct vanuit het hoger liggende control program (Bron: Wikipedia). We kunnen onderscheid maken tussen twee soorten hypervisors. Bij de zogenaamde type 1 hypervisor draait een gastbesturingssysteem (Virtual Machine) in de tweede laag direct boven de hardware. VMware Infrastructure en Xen beschikken over een dergelijke hypervisor. Bij een type 2 hypervisor ligt het gastbesturingssysteem op de derde laag boven de hardware omdat er ook nog een volledig besturingssysteem (Windows of Linux) op de laag boven de hardware ligt. Een voorbeeld van dit type is Microsoft Virtual Server 2005 R2, waarbij de virtualisatiesoftware bovenop Windows Server 2003 draait, ook al zorgt een Virtual Machine Monitor (VMM.sys) voor de afhandeling van kernelmode-operaties. Een ander voorbeeld is VMware Server (voorheen GSX Server) welke zowel bovenop Windows als Linux kan functioneren. Eén van de redenen waarom VMware Infrastructure nu technologisch boven Microsoft uitsteekt, is de implementatie van een type 1 hypervisor.
De hypervisor van VMware heeft echter ook een nadeel. Driver-support maakt deel uit van diezelfde VMware-kernel, hetgeen de hypervisor een monolithisch karakter geeft. VMware Infrastructure draait niet zomaar op willekeurige serverhardware. Er wordt maar een gering aantal SCSI, SAN en netwerkadapters ondersteund. Voor iedere hardwaredriveruitbreiding is dus aanpassing van de VMware-kernel vereist, waardoor nieuwe generaties hardware minder snel geadopteerd kunnen worden. Een voorbeeld hiervan is de trage adoptie van het iSCSI-protocol in VMware Infrastructure 3. Het is dus belangrijk om de betreffende Hardware Compatibility List te controleren alvorens hardware aan te schaffen voor dit virtualisatieproduct.

Longhorn Server
Microsoft introduceert in 2007 een op hypervisor gebaseerde virtualisatiearchitectuur als onderdeel van de opvolger van Windows 2003: Microsoft Longhorn Server. Dit besturingssysteem, dat naar verwachting ook weer in de edities Standard, Enterprise en DataCenter zal uitkomen, kan in twee varianten worden geïnstalleerd. Ten eerste de volledige variant waarbij het complete besturingssysteem wordt geïnstalleerd met al zijn services, drivers, grafische user interface, Internet Information Server, Internet Explorer en overige programma’s zoals Calculator, Media Player en WordPad. Daarnaast kan tijdens installatie tevens gekozen worden voor de Windows Core-variant.
Windows Virtualization wordt als één van een gereduceerde set rollen binnen Longhorn Core geïmplementeerd. De Core wordt zo dun mogelijk gehouden, waarbij alle traditionele Windows-overhead zoveel mogelijk is verbannen. Naast de rol Virtualization zijn ook de rollen domaincontroller, fileserver, DNS-server, DHCP-server, certificateserver mogelijk. Deze lijst is nog niet definitief. Core heeft in ieder geval geen grafische gebruikersinterface en dat is wel even wennen voor een verstokte Windows-gebruiker. Linux- en VMware-beheerders zullen in eerste instantie blij verrast zijn, maar daarna ook weer teleurgesteld omdat de PowerShell, zoals deze in de volledige versies van Windows beschikbaar is, ontbreekt. Dit laatste is het gevolg van het ontbreken van .NET in Longhorn Core.
Longhorn Core oogt als een simpele command prompt maar is absoluut krachtig in al zijn eenvoud. De uiteindelijke doelstelling is het bieden van een hogere betrouwbaarheid, een grotere schaalbaarheid en een hogere performance van de virtual machines, die vanaf nu Partitions worden genoemd. Doordat Longhorn Core een gereduceerde set programmaregels heeft, ligt het in de verwachting dat de code veel minder hoeft te worden gepatcht. Beveiligingsrisico’s, die als gevolg van verplichte installatie van Internet Information Server en Explorer vaak voorkwamen, behoren tot het verleden om de simpele reden dat deze niet in Core kunnen draaien.

Windows Virtualization
In tegenstelling tot VMware Infrastructure zijn de hardwaredrivers niet opgenomen in de hypervisor. Iedere server met een Windows Server-driver zal kunnen dienen als host voor Windows Virtualization. De verwachting is dat deze support uitermate breed zal zijn.
In de architectuur van Windows Virtualization ligt de hypervisor net als bij VMware Infrastructure direct boven de hardware. Vanuit Longhorn Core wordt deze middels een setup command tussen Longhorn Core en de hardware geplaatst. Boven de hypervisor wordt in eerste instantie één Parent Partition geïnstalleerd. Naast virtualisatiemanagementtaken verzorgt deze Parent Partition de afwikkeling van I/O (naar en van cpu, geheugen, disk en netwerk) voor alle Child Partitions. Het is uiteindelijk de Parent Partition die de fysieke hardware controleert. De term Guest of Virtual Machine is door Microsoft dus vervangen door het begrip Partition en doet denken aan de functionaliteit van de zeer kostbare BigIron-servers met 32 of 64 processors. Hierbij kan de server naar keuze worden gepartitioneerd in verschillende geïsoleerde sub-servers met ieder één of meer processors, een hoeveelheid geheugen en I/O-slots. Microsoft heeft hetzelfde voor ogen maar dan met de flexibiliteit en dynamiek van virtualisatie. Niet de fysieke devices worden opgedeeld, maar de virtuele pool van processors, geheugen, disk en netwerkbronnen. Deze architectuur biedt door zijn fijnmazigheid een zeer grote flexibiliteit en bezettingsgraad. De partities kunnen onderling op hoge snelheid communiceren via een transportsysteem, de zogenaamde VMBus. Het datatransport dat plaatsvindt over deze VMBus wordt afgehandeld door de Virtual Storage Client (VSC) in de Child Partition en de Virtual Storage Provider (VSP) in de Parent Partition. De Hypervisor hoeft eigenlijk alleen in actie te komen voor het opzetten van een kanaal naar de hardware en het afhandelen van de hardware interrupts. Een VSP is een servercomponent die overigens zowel kan voorkomen in de Parent Partion als in de Child Partition. De VSP levert I/O-verzoeken af bij een service zoals een filesysteem. De Hypervisor kan I/O-verzoeken direct bij de fysieke hardware afleveren en kan in zowel kernelmode als usermode opereren. De VSC is een clientcomponent die zich altijd in de Client Partition bevindt en dient als de onderkant van een I/O-stack binnen die partitie. Binnen Windows Virtualization zullen we spreken van Virtual Devices (VDevs) die tot uiting komen in twee varianten: Core VDevs die als device emulator functioneren en die door Microsoft geschreven zijn en de Plug-in VDevs die zowel door Microsoft als de rest van de industrie geschreven worden. Het beheer van deze Virtual Devices verloopt via Windows Management Instrumentration (WMI), waar ze als COM-objecten worden aangeboden. Deze COM objecten draaien feitelijk in het VM Worker Process van de Parent Partition.

Emulatie en Enlightenment
De Child Partitions kunnen de hardware wel zien, maar niet controleren. We spreken in dit geval ook wel van device-emulatie waarbij altijd een actie van de Parent Partition nodig is indien de hardware moet worden ingeschakeld. Het zal duidelijk zijn dat dit enige performance consequenties heeft. Deze device-emulatie is noodzakelijk om compatibel te kunnen blijven met oudere Virtual Machines die met Virtual Server 2005 R2 zijn gecreëerd. Een ander voordeel is dat emulatie een hoge compatibiliteit voor applicaties biedt. De applicatie denkt met echte hardware te maken te hebben. Tevens kunnen fysieke devices middels emulatie efficiënt door meerdere partitions worden gedeeld.
Windows Virtualization zal natuurlijk compatibel moeten zijn met Virtual Server, maar de introductie van het concept I/O Enlightenment biedt zeer interessante nieuwe mogelijkheden. I/O Enlightenment is een verzameling abstracte protocollen waarmee I/O kan worden beschreven. Bruikbare protocollen zijn SCSI, iSCSI, R(emote)NDIS en RDP. Ook toekomstige device stack-implementaties in de Child Partitions zullen dusdanig worden geschreven dat deze gebruik kunnen maken van de hardware-abstracties. In de Parent Partition draait een protocolserver waardoor meerdere child partitions de services van een bepaald hardwaredevice kunnen delen. De noodzaak van een device-emulator kan langzamerhand overboord worden gezet. Dit betekent dat de afhankelijkheid en bemiddelende taak van de Parent Partition langzaam minder zal worden. De Child Partitions kunnen hun devices direct controleren, maar zijn in dat geval wel exclusief eigenaar van het device. Via Device Assignment wordt het hardwaredevice toegekend aan één van de Child Partitions. Het grootste voordeel is dat de performance die van een niet gevirtualiseerde machine kan evenaren. Tevens kan de onderlinge afhankelijkheid van partities hiermee worden beperkt. Ook kan een sterke mate van isolatie tussen de partities worden bewerkstelligd. Hoewel de term I/O Enlightenment in eerste instantie een wat lastig te bevatten concept is, zouden we het kunnen voorstellen als een techniek die licht brengt in het donker; de Child Partition kan het fysieke device, met andere woorden, niet alleen zien maar ook totaal bezitten.

Deviceemulatie
Biedt migratiepad voor Virtual Server-gebruikers
Directe toegang voor storage, netwerk, video en USB
Herkenbare ‘10 jaar oude’ devices in een virtueel moederbord
I/O-Enlightenment
Vrijwel even snel als fysieke machines
Voor compatibiliteit met oude besturingssystemen
Door hardwareabstractie open voor vernieuwing zonder aanpassing van Hypervisor

The Winner Takes All
We zagen in het afgelopen jaar VMware met rasse schreden uitlopen op Microsoft Virtual Server. Er was binnen een Microsoft VM geen support voor meer dan één processor, het adresseerbare geheugen binnen een VM was beperkt tot 3,6 GB, ondersteuning van de x64 Windows-varianten was beschikbaar voor de host maar niet voor de VM, beheersoftware was beperkt tot een minimale webconsole. De strijd was een beetje ongelijk geworden. Daar komt met Windows Virtualization nu eindelijk een einde aan. Virtualisatie zit bij de volgende incarnatie van Windows Server in alle versies gewoon standaard in de doos en zal naar verwachting uitsluitend op x64-processortechnologie van Intel en AMD draaien. Virtual Server 2005 R2 zou te veel op de schop moeten om alle wensen van klanten te kunnen realiseren. Met het risico van een nog grotere achterstand op haar concurrent VMware, zullen we moeten wachten op iets wat we mogelijk Windows Server 2007 zullen noemen.
Anderzijds begint de virtualisatievisie van Microsoft zo langzamerhand steeds duidelijk te worden. Bedrijven die niet direct binnen twee jaar hun fysieke serverpark grotendeels willen virtualiseren, hebben misschien nog wat tijd om de achtervolger in te laten lopen. Virtualisatie is wat laat op de agenda gekomen bij Microsoft, maar als ze ergens in geloven kan het ook heel erg hard gaan. Er worden miljarden dollars gestoken in ontwikkeling, allianties en overnames. De strijd om de virtualisatiemarkt zal met Windows Virtualization versus VMware Virtualization pas echt goed losbreken. De winnaar is de klant, de consument van virtualisatie. En bij servers zal het zeker niet blijven. Net als bij Intel en AMD, die allebei proberen op elkaar voor te lopen, ontstaat een gezonde concurrentie waarbij de prijs daalt en de kwaliteit stijgt. Voor Windows-virtualisatie zullen we niet extra hoeven te betalen, wel voor het beheer ervan. In de Microsoft System Center-reeks zullen in 2007 producten verschijnen die Windows Virtualization perfect kunnen monitoren, beheren en veiligstellen (onder andere Operations Manager, Virtual Machine Manager, Data Protection Manager, Configuration Manager). We zullen gaan genieten van SMP binnen de Child Partition (1, 2, 4 of 8 cpu’s), meer dan 32GB geheugen per partitie, direct hardware kunnen adresseren die nu ontoegankelijk is voor virtualisatie en er komt ondersteuning voor zowel 32-bit als x64 OS in de Child Partition. Het wordt zélfs mogelijk om online en realtime hardware toe te voegen aan een virtuele server. We kunnen daarnaast niet alleen het geheugen dynamisch laten vergroten of online extra disks of netwerkdevices beschikbaar stellen, we zullen zelfs één of meerdere processors kunnen bijschakelen terwijl de Child Partition operationeel is. We zouden ons kunnen voorstellen dat System Center MOM op enig moment registreert dat een databaseserver als gevolg van een toename in het aantal gebruikers al een tijdje tegen tachtig procent van zijn geheugen- en processorgebruik aanzit. Op basis van policy’s en scripts zou de Child Partition extra geheugen en processors toegewezen kunnen krijgen. Dit is een goed voorbeeld van automatisering van de automatisering; onderdeel van de visie van het dynamische datacenter.
Dat virtualisatie een belangrijk middel is om daar te komen wisten we al. Wat nog niet veel mensen zich realiseren is dat de achtervolger met rasse schreden nadert en binnen twee jaar zijn eerste inhaalpoging waagt. Zeker voor bedrijven die grotendeels op Windows gebaseerde servers draaien en nog wat tijd hebben om hun visie op ICT-infrastructuur bij te stellen, kan het aanstormende Windows Virtualization nog tijdig een paradigma-omschakeling veroorzaken.

Hans Vredevoort (hans.vredevoort@nobel.nl) is senior consultant infrastructure bij Nobel te Naarden.

68 comments:

The Shrimp said...

Mijn excuses voor de late reactie, ben dan ook maar pas op uw Blog terecht gekomen via Google.

Een fantastisch artikel die mijn intresse voor Microsoft virtualisatie heeft aangewakkerd.

Toch heb ik een aantal vragen:
Wat moet ik mij voorstellen met de Hypervisor van Microsoft? En wat is de link met Server Core?

H@ns said...

Op http://www.microsoft.com/whdc/winhec/2007/pres.mspx vind je een Powerpoint die dit haarfijn uitlegt: Virtualization Technology Directions.

Bedankt voor je reactie

Unknown said...

Hoi Hans,

Leuk om te zien dat je artikel terug te lezen is op je blog.

Groet,
Tom

Anonymous said...

goede start

Anonymous said...

I inclination not concur on it. I regard as polite post. Especially the appellation attracted me to study the sound story.

Anonymous said...

Opulently I agree but I dream the list inform should have more info then it has.

日本ダービー said...

第77回 日本ダービー 2010 予想、オッズ、厳選買い目は?人気が平然と馬券に絡む理由とは!?見事に展開を読んで結果を的中させる

出会い said...

エロセレブとの出会いを完全無料でご提供します。逆援助で高額報酬をゲットしよう

モバゲー said...

モバゲータウンでいろんな異性と交流を深めあいませんか。異性に対して経験がない方でも簡単にお楽しみいただける、シンプルかつ効率的に優れているサイトとなっています

ツイッター said...

全世界で大ブームを巻き起こしているツイッター!!それを利用して今まで経験したことがないような恋を経験してみませんか

モテる度チェッカー said...

モテる度チェッカーが今回リニューアルしました!!今迄と違い診断内容にモテない人と診断された方を救済する、速攻効果が出るモテる為のアドバイスが付きます、またモテる診断された人には、より一層のモテ・テクニックを手に入れませんか

安田記念 said...

第60回 安田記念 2010 予想 オッズ 出走馬 枠順で万馬券をズバリ的中!絶対なるデータが確実に当てるための秘訣

ツイッター said...

今話題のツイッターで理想の関係を築きませんか。ツイッターで自分の出来事をリアルタイムで表現して相手にその想いを伝えましょう

安田記念 said...

第60回 安田記念 2010 予想 オッズから展開と結果をズバリ当てる!出走馬、枠順など全てを考慮にいれた緻密なデータをもとに検証

友達 said...

気楽に遊べる人募集です♪まずはお友達からヨロシクね!! freedum@docomo.ne.jp

スタービーチ said...

スタービーチで素敵な愛を掴みませんか?愛に対する理想や想いを現実にしていきましょう

モバゲー said...

モバゲータウンでは今までとは一味違う出逢いを体験する事ができるのです。これまで良い出逢いがなかった人にはもってこいの無料登録型の掲示板です

ゲーマーチェッカー said...

ゲーマー達のステイタス、ゲーマーチェッカーであなたのゲーマー度数を測定!!測定結果を元に自分と同レベルのオンライン対戦も出来ます。ゲームが得意な人もそうでない人もどちらも楽しめますよ

スタービーチ said...

日本最大級のであいコミュニティ「スタービーチ」で恋人を探しませんか。素敵なであいを経験して理想の人と楽しい思い出を作りましょう

スタービーチ said...

スタービーチが完全リニューアルして復活しました!!あの伝説級のであい系サイトが満を持して再降臨。煌めくような今この瞬間にあなたの胸にもときめきをお届けします

スタービーチ said...

であい系の元祖はやっぱりスタービーチ!初めてであい系にチャレンジする娘も多いここならゲット率は最強

モバゲー said...

モバゲータウンでであいを楽しみませんか。気軽に誰でも楽しめるであいサイトとなっています。こんな事をしてみたいなど希望の事が実現できる、そんなであいコミュニティサイトです

gree said...

greeで楽しめちゃうであい掲示板実現!ここで楽しみませんか?いろんなであいをここで見ていきましょう

出会い said...

エロセレブとの出会いを完全無料でご提供します。逆援助で高額報酬をゲットしよう

宝塚記念 2010 said...

宝塚記念 2010 予想データから完全攻略!出走馬 枠順などからはじきだすデータは最強!これで平成22年の宝塚記念はもらったも同然!波乱の展開もあり

メル友 said...

全国からメル友募集中の女の子達が、あなたとのであいを待ってるよ!無料エントリーで自由な恋愛を楽しんじゃお

スタービーチ said...

スタービーチがどこのサイトよりも遊べる確率は高いんです。登録無料で新しい恋をGETしてみませんか

出会い said...

出会い系サイトで逆援助生活をしよう!エッチなセレブ女性たちが集まっています

モバゲー said...

モバゲーを使ってご近所さんと知り合えちゃう!新感覚のコミュニティサービスを利用してみよう

玉の輿度チェッカー said...

今の時代簡単に金持ちになる方法は中々無いけど、可能性は誰しも秘めてます!!そう一番手っ取り早いのは玉の輿です。この玉の輿度チェッカーをキッカケに金持ちになった方が、意外と多いのです。是非あなたも一段高みを目指しませんか

出会い said...

一流セレブたちが出会いを求めて集まっています。彼女たちからの逆援助でリッチな生活を楽しみましょう

出会い系 said...

セレブの為の出会い系、セレブの雫では女性会員数も増え、男性会員様が不足するという状態となっております。そこで先着順に、男性会員様を募集しております

スタービーチ said...

日本で一番会員数が多いのはやっぱりスタービーチ!若い娘から熟女まで好みのご近所さんがすぐに見つかる☆無料期間中に試してみませんか

出会い said...

お金持ちの女性と出会い、彼女たちとHするだけで謝礼がもらえるサイトをご存じですか?高収入の女性ほど、お金を使っていろいろな男性と遊んでいます

モバゲー said...

流行のモバゲーで友達たくさん!運命の出会いがあるかも!?まだ初めていない人も無料ゲームで遊ぼう

モニター said...

副業 在宅 でも出来る モニターアルバイト 募集!数ある副業の中、馬券モニター程稼げる副業はない!初心者の方でも簡単にできるのが最大の特権です

逆援助 said...

女の子に逆援助してほしい、女の子と真剣にお付き合いしたい、複数プレイをやってみたい、童貞・処女を卒業したいのなら新感覚コミュニティ・ラブフリーでメル友を探そう

モバゲー said...

大人気モバゲーが遂に出合いの場所に!モバゲーだから気軽に出会える!出合いに縁がなかった方も是非ご利用くださいませ

スタービーチ said...

スタービーチは誰にでも出逢いという奇跡をもたらしてくれる。スタビで理想の関係作りしてみませんか

SM度チェッカー said...

最近普通のプレイに物足りなさを感じているそこのアナタ、ワンランク上のプレイをしてみませんか?そんな時の目安にSM度チェッカーを使うんです。自分の深層心理を暴きパートナーとのプレイ時のアドバイスも付きますよ!!一度どうですか

井の中のカ○ズ君 said...

流行りの検索ワードの番組、井の中のカ○ズ君で紹介された在宅ホスト倶楽部っていうワードで簡単にお金稼ぎました。携帯からgoogle検索にアクセスして在宅ホスト倶楽部って検索してみてください☆男性の方なら家でいるだけで1日2万円ぐらい稼げちゃうから本当に楽ちんだよ。誰か一緒にこの仕事で盛り上がろう

モバゲー said...

モバゲーでは友達から恋愛まで、様々な出 会いを探せる無料のコミュニティサイトです。常時サポートスタッフが掲示板をチェック、サクラや業者を排除しておりますので安心してご利用いただけます

スタービーチ said...

日本最大級の出会いコミュニティ「スタービーチ」で探しませんか。素敵な出会いを経験して理想の人と楽しい思い出を作りましょう

モバゲー said...

出会い専門のモバゲーSNSが誕生!メル友、恋人、セフレetc…貴方の理想に合った関係になれちゃいます。素敵な人と過ごしたいならココで見つけてみませんか

スタービーチ said...

最近スタービーチが女の子のコミュニティーサイトで話題中みたい!!夏休み目前ってのもあり登録比率に女性の数が半端ね~、やっぱり夏に一人は辛すぎや~とか思ってたら、暇な娘多すぎ・彼女簡単に出来ちゃった

スタービーチ said...

出 会いを探しているのなら会員数ナンバーワンのスタービーチ!開放的な夏休みはここで新しい出 会いを見つけよう!

モテる度チェッカー said...

夏休み目前になり、一人で大事な休みを過ごすのは誰でもイヤと違う?そんな時にモテる度チェッカーで簡単診断、この夏アナタも彼氏・彼女と過ごすための貴重なアドバイスが手に入りますよ、もうアドバイスに対しての感謝のメールが毎日!!アナタもこの夏を乗り遅れるな

グリー said...

グリー発信!!出会い専門SNS誕生、今話題のgreeから出会いをGETしよう。greeにしかできない事が盛りだくさん!!気軽にメールするだけで出会えるサイト・・・貴方の理想の異性と出会いませんか

モバゲー said...

モバゲー専門の出会い掲示板が誕生!出会いを求めている方にはオススメのサイトです。幸せな時間を過ごしたい方、淋しい思いをしたくない方はぜひご覧ください

ツイッター said...

今話題沸騰中!?新感覚出会いをツイッターで体験しませんか?リアルタイムで相手が何をしてるか分かるから、理想の人かどうかが簡単に分かる。貴方の理想の人をGETしませんか

mコミュ said...

素敵な出 会 いで愛を育む♪理想の人と楽しめる関係を築きませんか?mコミュでしか味わえない幸せを掴みましょう

スタービーチ said...

スタービーチで会える!?理想の異性をGETしよう☆素敵な出会いばかりだから求めている関係も作りやすい!!貴方が求めているのはどういった恋ですか?

名言チェッカー said...

他の人が言ってる名言や格言って良い事言ってるな~とか思ってる方、名言チェッカーで今日から自分に相応しい言葉を見つけませんか!!これでどんな人にも一目置かれる存在に為れますよ

mixi said...

mixiをも凌駕する出会い率!!出会いをするならここしかない♪mixiより出会えてしまうこのサイト。一度ハマれば辞めれません。スタービーチで素敵な出会いをしちゃいましょう

モバゲー said...

モバゲーで出会いをすれば楽しい事は間違いありません。暑いからこそ出会いを楽しむべきなのです。登録無料で簡単に利用可能!

モバゲータウン said...

モバゲータウンでは恋愛から出合いまでのキッカケをつかめる無料のコミュニティサイトです。常時サポートスタッフが掲示板をチェック、サクラや業者を排除しておりますので安心してご利用いただけます

スタビ said...

スタビが今一番アツイのはご存じでしょうか?夏休みで出会いを探している娘とすぐに会えちゃうんです。登録無料でここまで出会える所は他には存在しません。今登録して良いパートナーに巡り合おう

スタービーチ said...

出会いのシーズン、夏到来!スタービーチでご近所さんと知り合っちゃおう!ひと夏の体験も女の子は求めている

モバゲー said...

モバゲーでついに出会いができる!?楽しめる出会い、求めていた出会いはココから始まる。素敵な出会いでまずは関係づくりwしていきましょう

gree said...

greeで素敵な時間を過ごしたい・・・そんな願望を叶えてくれるサイト誕生!!今までにないドキドキ感と興奮をこのグリーで楽しみましょう

スタビ said...

スタビで出会いができる!!いつでもどこでも出会いが可能なスタービーチで最高の出会いをしてみませんか

mコミュ said...

簡単な出逢いはココでできる☆素敵な出逢いをmコミュで体験していきませんか?楽しめる出逢いを経験するならここしかない!!まずはお試しを

ツイッター said...

新時代突入!ツイッターで始まる出逢い…ここでしかできない出逢いが新しい風を巻き起こす!!素敵な巡りあわせを体験していこう!

SMチェッカー said...

あなたの秘められたSM度がわかるSMチェッカー!簡単な質問に答えるだけで自分の隠された部分が分かります!みんなで試してみよう

モバゲー said...

今やモバゲーは押しも押されもせぬ人気SNS!当然出 会いを求めてる人も多い!そこで男女が出 逢えるコミュニティーが誕生!ここなら友達、恋人が簡単にできちゃいますよ

モバゲー said...

もう夏休みも終わりに近づき、この夏最後の思い出を作りたいと焦ってる方が、モバゲーのコミュニティーに書かれてましたよ!!折角なんで夏の思い出作りに協力して自分も美味しい思いをしてみるのはどうですか?大手スポンサーサイトが付いてるので全部タダですよ

グリー said...

最近はどこのSNSサイトも規制ばっかりで、ちょっと出 合いに関して書き込みするとアク禁食らうけど、夏休み終盤に差し掛かり色々なサイトを調べた結果、グリーだけはどうも規制が緩んでるみたいです。今がチャンスの時期ですよ

大人の出会い said...

大人の出会いで大興奮!素敵な一夜を共に過ごせるパートナーを探しませんか?割り切った関係、肉体関係だけでもOK!