blog:2021:2021-03-06

メインPCとサーバをP2VしてRyzenおじさんからHaswellおじさんになった

住環境が変わって、メインPCと自宅サーバを同じ部屋に置くことになった。

自宅サーバは無駄に高スペックだったが（といっても逸般の誤家庭の人からは鼻で笑われる程度）、ほぼ自分専用のFreeBSDなNASやNextcloudサーバ程度にしか使ってなかった。まさに性能と電気代の無駄遣い状態。それでもPCと鯖を分けていたのは、煩い鯖を居住空間内に置いときたくなかったから（っていうのと自宅鯖という物理体に憧れがあったから。）

その制約がなくなった今──ある意味、自室にサーバを置かざるを得ない最大の制約が課されたとも言えるが、マシンを分ける意義がなくなったので、統合することにしたのが2020年10月。付けっぱなしの鯖と、寝てるとき以外はほぼ付けてるメインPCを1台にまとめれば、PCがいつでも使えるようになって電気代も節約できて一石二鳥という皮算用もあった。

その後、数々の検証と困難を乗り越え、ようやくProxmox VE基盤でメインPCと家鯖の仮想化による統合が完了した。このところ、PVEや仮想化関連の更新をしまくってたのはこのせい。旧メインPCは解体の後、パーツ類はヤフオクにドナドナされ、名実ともにRyzenおじさんからHaswell-EPおじさんにダウングレードだ😇

統合にあたっては、家鯖マシンをPVE基盤に流用した。本当はEPYCに変えたかったけどお金がないのさ…。そうは言っても、メインマシンとして使うにはCPUが心許なかったのでヤフオクお安く調達。ストレージまわりも整理した。

変更前 変更後
CPU Xeon E5-2648Lv3 (1.8GHz/12C/24T) ×2 Xeon E5-2673v3 (2.4GHz/12C/24T) ×2
SSD PM983 960GB ×2 PM963 1.92TB ×2
HDD WD80EMAZ ×2 (ミラー)
色々8TB ×4 (RAID-Z) 		ST10000NM0086 ×5 (RAID-Z2)

旧メインマシンの構成は下表のとおり。

CPU Ryzen 7 1700
M/B X370 SLI Plus
RAM DDR4-3200 16GB×4 = 64GB
GPU GeForce RTX 2070 SUPER
SSD WD Black SN750 500GB (NVMe)
SSD 東芝 THNSNJ960PCSZ 960GB (SATA)
NIC ConnectX-3 Pro EN

仮想化後のマシン構造は下図のとおり。

仮想化という割には、パススルーやらRDMやらで物理とがっつり密結合してる。今後収容予定のルータは、正しく仮想マシンになる予定（SR-IOVのVFを除く）。

2ヵ月ほど使った感想としては、物理環境と遜色なく使えている。ハード的な性能は旧メイン機から間違いなく下がっており、当初こそブラウザの若干のもたつきを感じこそすれど気のせいないし慣れの範疇で、今は何の不満もない。3Dのゲームも動くし、USB DAC経由でiTunes再生、NVEncも問題なし。

(2021-03-30 追記)

改めて第10世代Coreと2070 SUPERなマシンを触ってみたら、ブラウザの表示がチョッパヤで驚いた…。P2V後のもたつきは気のせいではなかった。リンクをクリックした際、前者はまさにパッと表示が切り替わるのに対し、後者はわずかな空白期間があってからパッと出る感じ。

GPUはGeForce RTX 2070 SUPERからGTX 1650へと大幅ダウングレードしているが、これは3060への乗り換えを見越しての措置。折からのGPU不足による中古価格上昇で、2070の売却代でオトクに3060へ乗り換えるつもりだった。が、いざ蓋を開けてみると3060は微妙な感じだし、今なお2070Sの中古価格は上昇傾向だしで、正直売らなきゃよかった……。

仮想メイン環境をPVEで自動起動設定すれば、ホストマシン電源オンでゲストのWindowsも起動する。また、ゲストエージェントを入れとけば、ホストのシャットダウンも何てことはない。ゲストのブラウザからPVE管理画面を開き、ホストをシャットダウンすれば自動でWindowsのシャットダウン処理が走り、その後ホストの電源が切れる。再起動も同様だ。こうした使い勝手の面でも、物理環境と大差なくて素晴らしい。

メインマシンを仮想化する上での最大の障壁はGPUだが、Proxmox VE (KVM)を使えば難なくGPUパススルーできる。仮想BIOSの画面が物理モニタに映し出された時は妙な感動を覚えた。

USBまわりはPCIパススルーでコントローラをVMに割り当てると、普通の物理マシンの感覚で使えてよい。

今回はネットワークまわりも、SR-IOVでもって物理デバイスのように扱っている。対向のL3スイッチからはVMが直接接続されているように見え、構成的に綺麗な気がする。何よりソフトウェアブリッジを使わずに済むので、パフォーマンス的にも負荷的にも有利である。

仮想化技術さまさまですわ。

電気代削減効果はちょっと微妙かなぁ。VM起動したアイドル状態で140W程度。理想は100W切ってほしいけど、CPU 2個に32GBのRDIMM 6本、GPU/NIC/USB/U.2×2 PCIeを差してるし、むべなるかな。

状態 消費電力 メイン機
アイドル 		合計
旧サーバ 待機(HDDスピンダウン) 100W 40W 140W
待機(HDD×6スピンアップ) 130W 170W
新サーバ 待機(HDDスピンダウン) 120W - 120W
待機(HDD×6スピンアップ) 140W 140W

※新サーバのHDDが5台ではなく6台なのは間違いではない。

一応、トータル30W程度の節電だけど、旧サーバのデータは不正確なので怪しいところ。1ヵ月で21kWh節電の計算となるが、現状目に見えて電気代が安くなったとかはない。在宅勤務でおうち時間が長くなってる影響が大きいのかも。今更ながら、140Wで1ヵ月だと100kWhか…馬鹿にならんな……。

その他、メイン機を仮想化した際に気になったこと、運用上の注意点は以下に箇条書きで。

  • GPUパススルー
    • ネットに転がってる解説記事に従って難なく可能
      • 一部記述が古かったり、曖昧だったりする箇所があるのは要注意
    • プライマリディスプレイが4kモニタだと、EFIからOSに制御が移った時にコケる。WUXGAモニタだと問題なし。
      • （2022-01-12 追記) PVE 7にしたらROM-Barオンでも仮想BIOS→Windowsログイン画面の遷移も問題なくなった、
      • 仮想マシンの仮想BIOS表示→Windowsの起動ロゴまでは映るが、ログイン画面に切り替わるあたりで無信号状態になる。
      • それでもWindows自体は正常に起動している。
      • ROM-Bar (GPUのBIOS)を切ると、仮想BIOS→Windowsの起動ロゴは出なくなる代わりに、ログイン画面が出るようになる。
      • 仮想BIOSを弄ることは早々ないので、ROM-Barオフで運用。ログイン画面が出るまで真っ暗なのでちょっと不安ではあるけど。
      • GeForce RTX 2070 SUPER、GTX 1650で確認。ラデは知らん。
  • ネットワーク
    • ConnectX-3のSR-IOVをパススルーで利用
      • WindowsからNICとして認識されリンクアップしているものの、パケットが流れないことがある。
        • 何度か仮想マシンを再起動すると直る。一度直ればVMを落とすまで大丈夫。
        • 多少不便だけどログイン画面で判断できるので許容内。
      • なぜかiTunesのネットワークまわりの挙動が怪しい。
        • Gracenoteに繋がらない（そもそもネットワークが繋がってない判定を食らう）
        • 別マシンからホームシェアリングで繋ぎ、切断後再接続すると接続が打ち切られ、ライブラリから表示が消える。
          • iTunesを再起動すると繋がるようになる。
        • virtio-netだと問題なし。
        • ネットワークの状態ダイアログの送受信パケット数カウンターが動いてないのが原因？
      • VFとLinux Bridge (vmbr0)にぶら下がっている仮想NICの間で疎通できないかも？
  • USBパススルー
    • マザボのUSBコントローラをPCIパススルーでも行けるが、後付けしたUSBカードをパススルーする方が無難。
      • (IPMIの)KVMの入力がパススルー先のVMに持っていかれ、KVMが用を成さなくなるから。
        • 仮想マウスと仮想キーボードは内部的にUSB接続されているのだ。
        • いざという時に困る（PVEのWeb UIが応答しなくなって、物理ターミナル経由でrebootしなきゃいけないときとか）
      • マザボのUSBはPCIデバイス的にはUSB 2.0/3.0が別々に認識され、片方のみパススルー設定できるが、結局両方ともパススルーされる模様。
    • USBのパケットが途切れることがあるっぽい
      • キー入力、マウスカーソルがプチフリすることがある。地味にイラつくが致命的ではない。
      • USBサウンドがたまにプチプチ切れる。地味に（ｒｙ
  • スリープ、ダメ、ゼッタイ
    • VM（のWindows）をスリープさせたが最後、復帰できなくなるのでスリープさせてはいけない。
      • 少なくともパススルーしてるUSBマウス・キーボードをガチャガチャでは復帰せず
      • PVEの管理画面から何か叩けば行けるかも？
        • (2022-01-12 追記) 管理画面からスリープ解除するとVM自体は起き上がるようだが、やはり画面が出ない。
    • モニタのスリープは大丈夫。
1)
Forwarding Database Entry
Creation Date: 2021-03-06 22:35, 最終更新:: 2022-01-12 11:06, Author: Decomo, Tags:

Comments

что такое прогон по трастовым сайтам https://takesalary.com/user/jamesundix/?um_action=edit ашан промокод на скидку продвижение сайта статьями сервис https://projects.sare.org/people/jamestrazy/ промокоды на скидку на смартфоны

магнит промокод на скидку на первый индексация страниц сайта купоны на скидку санкт петербург http://yigilcalilar.com/forum/member.php?action=profile&uid=35807 купоны скидка омск https://astraclub.ru/members/346021-PhilipGuath

ламода промокод на скидку 10 процентов проверка индексации ссылок скачать фильмы на телефон 2021 http://terrabashkiria.com/forum/?PAGE_NAME=profile_view&UID=157367 прогон сайта по профилям на форумах с тиц http://axioma-estate.ru/index.php?subaction=userinfo&user=laughablegas98

прогон по статейным сайтам http://forum.belmama.ru/index.php?topic=25058.msg324627#msg324627 польза от прогона сайта dns купоны на скидку https://build.co.ua/wr_board/tools.php?event=profile&pname=Richardabubs ускоренная индексация сайта

прогон сайта по анкорам прогон сайта по каталогам самостоятельно влияют ли прогоны на позиции сайта https://www.camry-club.ru/member.php?330006-JamesGlomi ускоренная индексация страниц сайта http://www.vintageampeg.com/forum/member.php?action=profile&uid=7124

скрипт сайта прогона сайтов http://bmwspeed.lv/user/Davidbof/ alltime промокод на скидку http://zastolje.mybb2.ru/viewtopic.php?f=86&t=6719 бесплатный прогон по трастовым сайтам http://www.krbibl.ru/index.php?subaction=userinfo&user=tiresometutor6 промокод на скидку в детском

остров мечты москва купоны на скидку https://tophatsec.com/forum/member.php?action=profile&uid=5163 casino бездепозитный бонус контрольчестности рф как закрыть ссылку от индексации rel nofollow https://carecepthealth.com/community/profile/normanchoit/ купон на скидку детский https://nvztw0.com/home.php?mod=space&uid=35010&do=profile

анализ индексации сайта проверить индексацию сайта линкбокс http://yohama.cz/uncategorized/yoblog/?unapproved=194384&moderation-hash=ae23be1c10d379f5b5e98f50710def42#comment-194384 программа статейного прогона http://cloudscapehill.com/user/forsedroppn/?um_action=edit прогон сайта по каталогам https://exsite.su/user/RalphKep закрытие от индексации внешних ссылок

1xbet зеркало суть казино https://slon-ru.com/ человек казино почему в казино нет часов https://slon-ru.com/ казино рояль смотреть скачиваемые казино Преподобная Надежда Александровна порно порно с Елена Никитина, скелетонистка casino актуальное зеркало casino официальный сайт казино проиграл

http://site1112.ru

1 |
вот что
| 2024-12-13 01:54 | reply

прогон сайта статейный http://weeklywars.de/viewtopic.php?f=12&t=9996&p=533011#p533011 столплит промокод на скидку промокод на скидку такси https://forum.vn.ua/showthread.php?p=3275727#post3275727 market промокод на скидку https://teamabove.com/alacrity/viewtopic.php?f=4&t=257331

скидка на заказ по промокоду прогон сайта доскам объявлений купон на скидку биг гик http://i91215un.bget.ru/user/JasperFup/ открыть сайт для индексации robots txt http://maglik.ru/user/ShawnHut/

автоматы онлайн бездепозитные бонусы https://agro-directory.dp.ua/wr_board/tools.php?event=profile&pname=Ronaldmit маркет купон на скидку скачать фильмы на телефон mp4 http://tools.co.ua/wr_board/tools.php?event=profile&pname=decisivekeyston бездепозитный бонус рф http://soundpoolradio.de/profile.php?lookup=13464

время индексации сайта http://bbs.cheaa.com./home.php?mod=space&uid=3129422 ситилинк промокод на скидку на первый http://food.biz.ua/wr_board/tools.php?event=profile&pname=childlikevacanc промокод на скидку вк http://autobrands.lv/user/Migueldag/ прогон адалт сайта

cozy home промокод на скидку на первый https://clashofcryptos.trade/wiki/%D0%91%D0%BB%D0%BE%D0%B3_%D0%90%D0%BA%D1%83%D1%88%D0%B5%D1%80%D0%B0 купоны скидка омск заказать прогон по трастовых сайтов http://akva.by/forum/index.php?action=profile;u=17427 купоны на скидку василек http://witiai.cn/home.php?mod=space&uid=64382

прогон трастовых сайтов разместить статью продвижения сайта прогон по базе трастовых сайтов http://www.zike.cn/home.php?mod=space&uid=112495 джоки джоя купоны на скидку http://scutn.com/home.php?mod=space&username=DarrellFag

прогон по жирным сайтам http://dobrknigi.ru/howto/?PAGE_NAME=profile_view&UID=20133 кфс новосибирск купоны на скидку http://korea-shipping.co.kr/bbs/board.php?bo_table=free&wr_id=363271 купон на скидку керри http://bbs.tamurayukari.net/bbs/space-uid-11866.html прогон сайта по трастовым ссылкам http://c909201u.beget.tech/user/Zacherynam/

wildberries купоны на скидку http://www.luisovalles.com/new/index.php/component/k2/itemlist/user/99952 luis ovalles - enthusiasticbir официальный сайт как инструмент продвижения компании статья сколько индексация сайта яндекс http://himagro.md/forum/user/36522/ прогон сайта зачем на каких сайтах нет прогонов

pin up букмекерская контора скачать 1xbet https://vestnik-jurnal.com/ 1xbet слоты 1xbet top лучшие букмекерские конторы https://glvk.guru/ казино вход казино пин 1xbet бесплатно порно с Алексей Миранчук (футбол) Любимова Ольга Борисовна порно скачать 1xbet на андроид казино смотреть онлайн

http://filmkachat.ru

2 |
1xslots официальный регистрация
| 2024-12-22 20:31 | reply

casino бездепозитный бонус официальный сайт http://xn--e1aoddcgsc8a.xn--p1ai/showthread.php?tid=153143 biggeek купон на скидку первый заказ https://forum.bedwantsinfo.nl/thread-719910-post-1317118.html#pid1317118 прогон по каталогам сайтов 2020 что это http://www.deonnyn.com/PSPA/viewtopic.php?f=8&t=35138 быстрая индексация ссылок

прогон сайта программа продвижение сайта статьями самостоятельно запретить индексацию сайта http://l-avt.ru/support/dialog/?PAGE_NAME=profile_view&UID=51827 прогон сайта по каталогам статей http://uadplugins.club/memberlist.php?mode=viewprofile&u=57677

программа прогон сайта https://www.cro-escort.com/member.php?118984-JamesVeN промокоды на скидку 50 процентов https://korenovsk-gorod.ru/forum/?PAGE_NAME=profile_view&UID=18517 как закрыть сайт от индексации wordpress https://forum.ventrilo.com/member.php?u=1482817 прогон сайта по профилям бесплатно http://postmaster.cameseeing.com/bbs/board.php?bo_table=freeboard_2021&wr_id=64343

шаблон купона на скидку закрытые от индексации страницы размер купона на скидку https://www.gamers-forum.com/member.php?104651-JerryVor прогон сайта по профилям http://dragonden.freehostia.com/modules.php?name=Forums&file=viewtopic&p=26046#26046

раскрутка сайта статьями https://jobs.drupal.org/company/28796 гилмон в челябинске купоны скидки бесплатный прогон сайта по социальным закладкам http://forum.americandream.de/memberlist.php?mode=viewprofile&u=7601 купоны про на скидку http://hoiqt.com/user-8648.html

индексация ссылок яндекс http://permitbeijing.com/forum/member.php?action=profile&uid=156843 прогон сайта http://www.erwinbrandenberger.ch/index.php?title=Прием_платежей_для_high_risk индексация новых страниц http://y90429l8.bget.ru/user/TyroneElext/ прогон по трастовым сайтам это

бесплатный прогон по каталогам сайтов http://daones.gaming.free.fr/index.php?file=Members&op=detail&autor=languidpolitics где размещать статьи для продвижения сайта https://demo.qkseo.in/viewtopic.php?id=909626 что такое прогоны сайта http://www.maurighcolori.it/node/152 промокод на скидку кфс на сегодня

лабиринт скидка промокод https://gadgetpage.ru/user/HenryBug/ прогоны сайта по каталогам базы для прогона сайтов https://cameradb.review/wiki/%D0%A1%D0%B4%D0%B0%D1%82%D1%8C_%D0%9D%D0%B0_%D0%9F%D1%80%D0%B0%D0%B2%D0%B0_%D0%92%D0%BB%D0%B0%D0%B4%D0%B8%D0%B2%D0%BE%D1%81%D1%82%D0%BE%D0%BA прогон сайта были http://kkzkirova.ru/index.php?subaction=userinfo&user=assortedphiloso купон на скидку 50 процентов

почему в казино нет окон казино большая https://krtka.info/ new casino порно с Владимир Минеев (ММА) https://m.repost.news/ порно с Кирьянова Дарья Борисовна порно с Аделия Петросян (фигурное катание) porno Юлия Канакина пина букмекерской конторы порно с Илюшникова Татьяна Александровна kent casino casino промокод

3 |
1xslots регистрация
| 2024-12-25 17:26 | reply

прогон сайтов http://forum.roozgozar.com/member.php?action=profile&uid=5126 прогон блога по трастовым сайтам прогон по трастовым сайтам ручной http://btd-clan.maweb.eu/forum/viewthread.php?thread_id=334955 бесплатный прогон по базе трастовых сайтов

фудзияма купон на скидку 2022 http://m-kabel.ru/index.php?subaction=userinfo&user=loutishlaziness купон скидки обувь программа прогонов по сайтам http://doctor54.ru/blogs/view/3919.html промокод на скидку 500 рублей http://unix.t7y.ru/user/JustinMug

бездепозитные бонусы 2022 битрикс запрет индексации конкретной страницы https://sims-game.com/user/HdrezkaEl/ где взять промокод на скидку http://doctor54.ru/blogs/view/3923.html прогон по трастовым сайтам 2020

прогон адалт сайта додо купоны на скидку нетпринт промокод на скидку http://theaesoon.co.kr/bbs/board.php?bo_table=free&wr_id=141220 прогоны для сайта

прогон по трастовым сайтам https://kr-osvita.gov.ua/user/WalterSnuro/ сервис прогона сайта в http://permitbeijing.com/forum/member.php?action=profile&uid=198610 скидки промокоды телефон https://krok.biz/forum/memberlist.php?mode=viewprofile&u=38137 отключить индексирование сайта http://bhm.com.ua/index.php?subaction=userinfo&user=incompetentyout

статейные прогоны https://aktivnoe.forum24.ru/?1-7-0-00011806-000-0-0 прогоны по трастовым сайтам форум https://www.spairkorea.co.kr:443/gnuboard/bbs/board.php?bo_table=as_inquire&wr_id=974520 сервис прогона сайта по каталогам http://38.104.231.181/doku.php?id=фильмы_РЅР°_смартфон яндекс маркет купоны на скидки

нонтон промокод на скидку https://www.nkm.no/user/shawnbob/?um_action=edit сервис прогона сайта по каталогам телемаркет 24 купон на скидку http://www.ppivn.vn/forum/user-27044.html трастовые базы сайтов для прогона http://forum.centrum-hvac.pl/User-Craigkem

прогон трастовых сайтов http://bbs.topeetboard.com/home.php?mod=space&username=JasperIteks бездепозитные бонусы за регистрацию деньгами где размещать статьи продвижения http://www.diywiki.org/index.php?title=%D0%B1%D0%BB%D0%BE%D0%B3%D0%B8%20%D0%BE%20%D0%B6%D0%B5%D0%BD%D1%81%D0%BA%D0%BE%D0%BC%20%D0%B7%D0%B4%D0%BE%D1%80%D0%BE%D0%B2%D1%8C%D0%B5 билайн промокод на скидку прогон по трастовым сайтам программа

1xbet бесплатно 1xbet скачать приложение https://glvk.guru/ 7k casino официальный скачать casino на андроид https://sovsekretno.net/ винлайн букмекерская контора официальный Скворцова Вероника Игоревна порно Ходнева Светлана Владимировна порно online casino официальный порно с Кирьянова Дарья Борисовна Чулпан Хаматова 1xbet зеркало на сегодня

4 |
1xslots зеркало регистрация
| 2024-12-26 00:49 | reply

прогон сайта как сделать http://permitbeijing.com/forum/newthread.php?fid=2 яндекс маркет промокод 1000 скидка http://forum.animogen.com/memberlist.php?mode=viewprofile&u=15333 бесплатный прогон по трастовым сайтам http://www.emv.info/viewtopic.php?f=15&t=2899 авто прогон сайта

прогон по каталогам сайтов 2020 прогон по сайтам закладками промокод на скидку яндекс афиша http://metabolichealthdigest.com/user/gregoryheilt/?um_action=edit программа для прогона сайта каталогах

прогон сайта по блогам https://full-chip.net/user/ShawnHoome/ прогон по трастовым сайтам запретить индексирование сайта в robots txt http://boss.why3s.cc/boss/home.php?mod=space&uid=140881 программы прогона сайта

прогон сайта по трастовым базам http://zimmu.com/api/manual/doku.php?id=Выкуп_авто скидки на вайлдберриз промокод на сегодня http://illustrator.odub.tomsk.ru/index.php?subaction=userinfo&user=Jasperhaw анвап скачать фильмы бесплатно на телефон https://www.stroimvmeste.com.ua/user/RalphOwepe/ прогон по каталогам нового сайта http://okna-online.ua/index.php?subaction=userinfo&user=absorbingdormit

скрипт сайта прогона сайтов продвижение статьи в дзене http://www.atego-club.ru/forum/member.php/126431-ArnoldMer биглион купоны на скидку официальный сайт https://loansnearme.com.au/author/porsedropka/ промокод на скидку вк http://xn--jc-je2if91fs6b.com/bbs/board.php?bo_table=free&wr_id=5749

добавить сайт в индексацию яндекса http://nedv-revda.ru/index.php?subaction=userinfo&user=tightnylons1 бесплатная прогон сайта по скачать фильмы новинки на телефон бесплатно http://www.ngo.ne.jp/userinfo.php?uid=31860 купоны на скидки все майки

что такое индексация сайта web индексация базы для прогона сайта http://bitrix-2.dclouds.ru:8200/club/user/73/blog/11542/ метро кэш купоны на скидку https://astraclub.ru/members/345277-Johnnylaunk пицца скидка на заказ промокод

читай город промокод на скидку прогон по базе трастовым сайтов https://xn---6-jlc6c.xn--p1ai/user/HenryWoota/ купоны на скидку алкоголя http://hsmg.kr/bbs/board.php?bo_table=free&wr_id=61825 ускоренная индексация сайта в поисковых системах бесплатно купон читай город на скидку 2022

1win casino porno Елизавета Туктамышева https://kompromat1.online/ unlim casino 1xbet 1 https://rumafia.news/ казино без porno Марина Александрова сайт pin up casino pin ап casino Семёнова Татьяна Владимировна порно порно с Анастасия Потапова, теннисистка скачать букмекерскую контору на андроид

5 |
1xslots зеркало регистрация
| 2024-12-26 10:53 | reply

автоматический прогон по трастовым сайтам http://forum.survival-readiness.com/viewtopic.php?t=264054 быстрая индексация страниц http://forum3.bandingklub.cz/viewtopic.php?f=17&t=365052 купоны на скидку челябинск http://lynnniman.org/index.php?/topic/2077-1xslots-casino-%D1%80%D0%B5%D0%B3%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%86%D0%B8%D1%8F-%D0%BD%D0%B0-%D1%81%D0%B0%D0%B9%D1%82%D0%B5/ промокоды на скидку аптека ру 2022

сервис по прогону сайтов остров мечты купоны на скидку 2022 http://rvolchansk.ru/index.php?subaction=userinfo&user=haplesstyrant82 скачать фильм через телефон https://zvukiknig.info/user/Jefferykam/ промокод на скидку читай http://www.hpt.co.kr/bbs/board.php?bo_table=free&wr_id=84037

купоны на скидку сочи joki joya купон на скидку москва https://mercedesforum.com/forum/off-topic-7/a-67158/#post190216 ускорить индексацию сайта в гугл http://www.dllaoma.com/home.php?mod=space&uid=370475 промокоды скидки 2022 http://goodjobdongguan.com/home.php?mod=space&uid=4896546

правильная индексация сайта прогон сайта по трастовым форумам форум прогон по трастовым сайтам http://terra-bashkiria.ru/forum/?PAGE_NAME=profile_view&UID=145743 твое промокод на скидку на первый http://vektorit.ru/index.php?subaction=userinfo&user=minorbruise23

прогон сайта продвижение https://slovakia-forex.com/members/269239-walterbap озон промокоды на скидку на первый заказать прогон сайта по каталогам http://arts.gpaeburgas.org/profile.php?uid=9668 прогон сайта бесплатно

casino зеркало бездепозитный бонус https://e-invest.biz/user/LinwoodToday/ прогон сайта по справочникам прогон ссылки по сайтам https://magadan-mebel.ru/forum/user/1118/ прогон сайта по каталогам программа

что такое прогон сайта по соц закладками http://www.dachamania.ru/photo_gallrey/profile.php?uid=45567 прогон сайта анкоров промокод на скидку в золотом яблоке https://google.rw/url?q=https://doctorlazuta.by/ что такое индексация сайта веб индексация http://www.soe-parrot.com/home.php?mod=space&uid=168964

купон читай город на скидку 2022 аптека от склада промокод на скидку прогон сайта по справочникам http://xojh.cn/home.php?mod=space&uid=1730297 проблемы продвижения гостиничных услуг статья http://www.volgogradru.com/users/Glavdorogadvr/ хорошие программы для прогона сайтов

casino сегодня Самойлова Алла Владимировна порно https://th-royalgclub.com/ порно с Зырянова Анастасия Владимировна new casino https://kompromat1.online/ казино пин porno Яна Троянова букмекерская контора вход Семёнова Татьяна Владимировна порно Шевцова Татьяна Викторовна порно casino зеркало сегодня рабочее скачать 1xbet

6 |
1xslots официальный сайт регистрация
| 2024-12-27 08:51 | reply

промокод олди на скидку купоны oldi http://complainanything.com/node/158?page=1093#comment-1562499 бесплатный прогон сайта бесплатные каталоги покупатели скидки купоны http://forum.exalto-emirates.com/viewtopic.php?f=7&t=145767 слоты с бездепозитным бонусом за регистрацию

brandshop промокод на скидку https://ads.kazakh-zerno.net/user/HarryCrods/ индексирование страниц прогонами сайтов https://www.kadrovik-praktik.ru/communication/forum/user/216716/ промокод золотое яблоко на скидку первый https://www.argfx.co/user/DoctorLazutaEr/

продвижение статей в яндекс дзен проверить индексирование сайта http://91075425.k216.opensrs.cn/home.php?mod=space&uid=1141376 купон лэтуаль на скидку http://darkml.net/bbs/home.php?mod=space&uid=7983585 софт для прогон сайтов

якитория промокод на скидку на доставку база трастовых сайтов для прогона https://tvoyaskala.com/user/Raymondrab/ когда можно делать прогон сайта https://paladinscounter.com/users/Travishog онлайн сервис прогона сайта по трастовым площадкам

ситилинк промокод на скидку статьи продвижение видео в инстаграмм программа для прогона сайта каталогах http://hjinterior.kr/bbs/board.php?bo_table=free&wr_id=615987 империя пиццы промокод на скидку

прогон сайта свящ что такое прогон сайта по форумам http://yamuhajirin.org/index.php?option=com_kunena&view=topic&catid=2&id=134338&Itemid=2552 статейным прогоном сайтов http://houyuhuan.com/home.php?mod=space&uid=371729&do=profile отправить страницу на индексацию

отправить страницу на индексацию промокод фармленд ноябрь на скидку http://vfb7968c.bget.ru/user/Raymondjes/ разрешить индексацию страниц https://www.x-fta.com/foro/member.php?1253621-MichaelVob купон на скидку биг гик http://grandtour.tv/index.php?subaction=userinfo&user=highfalutinwand

аптека от склада промокод на скидку http://d90432w9.beget.tech/user/Darenemape/ ускоренное индексирование сайтов роботами https://cameradb.review/wiki/User:MonicaPhifer812 купон на скидку яндекс такси http://www.cjma.kr/bbs/board.php?bo_table=free&wr_id=644074 промокод на скидку алиэкспресс 2022 купоны на скидку казань

casino актуальное зеркало скачать pin casino https://m.repost.news/ симулятор казино порно с Абрамченко Виктория Валериевна https://7club7.com/ порно с Голикова Татьяна Алексеевна пин ап casino pin казино вход 1xbet скачать приложение как выиграть в казино казино рояль смотреть букмекерская контора зенит

http://site1501.ru

7 |
1xslots официальный регистрация
| 2025-01-28 22:46 | reply

видеокарта для рендеринга в 3d max 3D visuals https://penposh.com/blogs/322516/Professional-Furniture-Detail-Drawing-Services-Technical-Drafting-Solutions развитие современной архитектуры The development of architecture https://www.diigo.com/item/note/b90ch/ovct?k=42b2cf8283b52a61a92de693633c0e86 пути развития современной архитектуры 3D modeling in architecture project рендеринг в компас 3d v22 Monument of architecture former 3д визуализация комнаты What is rendering in the context of 3D graphics 3д визуализация мебели цена

8 |
Programs for 3D visualization
| 2025-02-12 22:34 | reply

Baroque in architecture laptop for 3D modeling and rendering powerful https://heroes.app/blogs/443183/Auto-skup-Warszawa-profesjonalna-wycena-i-natychmiastowa-got%C3%B3wka чертеж кухни и 3д визуализация архитектура руси https://www.ourboox.com/bp/1641446/ архитектура г Architecture of Rus' 3д визуализация бесплатно архитектура дома 3д визуализация скачать программу заказ 3д визуализации студия 3д визуализации

9 |
Network architecture
| 2025-02-13 09:05 | reply

3D interior visualization program online free бесплатные программы для 3д визуализации интерьера хомстайлер https://community.oneplus.com/thread/1778657405274423300 3D rendering processor The history of architecture https://www.astrobin.com/users/architects/ процессоры для 3d моделирования и рендеринга заказ 3д визуализации 3д визуализация футболки Architecture models in 3D max free download Architecture of the house архикад 3д визуализация Architecture is new

10 |
архитектура 3
| 2025-02-14 09:37 | reply



  • blog/2021/2021-03-06.txt
  • 最終更新: 2022-01-12 11:06
  • by Decomo