<div dir="ltr">yes + 1xssd cache<br><br><br>        NAME                                            STATE     READ WRITE CKSUM<br>        tank                                            ONLINE       0     0     0<br>          raidz2-0                                      ONLINE       0     0     0<br>            scsi-35000cca22be96bed                      ONLINE       0     0     0<br>            scsi-35000cca22bc5a20e                      ONLINE       0     0     0<br>            scsi-35000cca22bc515ee                      ONLINE       0     0     0<br>            ata-Hitachi_HUS724030ALE640_PK2A31PAG9VJXW  ONLINE       0     0     0<br>            scsi-35000cca22bc1f9cf                      ONLINE       0     0     0<br>            scsi-35000cca22be68899                      ONLINE       0     0     0<br>            scsi-35000cca22bc58e1b                      ONLINE       0     0     0<br>            scsi-35000cca22bc4dc6b                      ONLINE       0     0     0<br>            scsi-35000cca22bc394ee                      ONLINE       0     0     0<br>            scsi-35000cca22bc10d97                      ONLINE       0     0     0<br>            scsi-35000cca22bc605d1                      ONLINE       0     0     0<br>            scsi-35000cca22bc412bf                      ONLINE       0     0     0<br>            scsi-35000cca22bc3f9ad                      ONLINE       0     0     0<br>            scsi-35000cca22bc53004                      ONLINE       0     0     0<br>            scsi-35000cca22bc5b8e2                      ONLINE       0     0     0<br>            scsi-35000cca22bc3beb3                      ONLINE       0     0     0<br>        cache<br>          sdc                                           ONLINE       0     0     0<br><br></div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Oct 23, 2014 at 10:57 AM, Karli Sjöberg <span dir="ltr">&lt;<a href="mailto:Karli.Sjoberg@slu.se" target="_blank">Karli.Sjoberg@slu.se</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span class="">On Thu, 2014-10-23 at 10:11 +0200, Arman Khalatyan wrote:<br>
&gt;<br>
&gt; ---------- Forwarded message ----------<br>
&gt; From: Arman Khalatyan &lt;<a href="mailto:arm2arm@gmail.com">arm2arm@gmail.com</a>&gt;<br>
&gt; Date: Thu, Oct 23, 2014 at 10:11 AM<br>
&gt; Subject: Re: [ovirt-users] Are there some general strategyhow to Iscsi<br>
&gt; strorage domain?<br>
&gt; To: Trey Dockendorf &lt;<a href="mailto:treydock@gmail.com">treydock@gmail.com</a>&gt;<br>
&gt;<br>
&gt;<br>
&gt; Thank you Trey for sharing your setup.<br>
&gt;<br>
&gt; I have also one test system with zvol exported with iscsi over 10G.<br>
&gt; Unfortunately the difference in performance of zfs over raid<br>
&gt; controller is huge, particularly where VM running mysql. I did not try<br>
&gt; HBAs yet, I have only LSI/Adaptec/Areca RaidControllers they dont have<br>
&gt; IT mode. Maybe that can be the reason.<br>
&gt;<br>
&gt; For sure always one need to find the sweet edge between performance<br>
&gt; and reliability.<br>
&gt;<br>
&gt; Just for comparison with yours I get on random IO:<br>
&gt; zvol/16Disks/Raid2/tgtd/iscsi/10G-&gt; on VM multiple rsync -<br>
&gt; ~100-150MB/s, Same HW but disks with Areca RAID6 -  650MB/s stable<br>
&gt; even more in some cases.<br>
<br>
</span>Did you have separate log devices attached to the pool?<br>
<br>
The pool´s name was &#39;16Disks&#39;. Did you have 16 disks in one radiz2 vdev?<br>
<br>
/K<br>
<div class="HOEnZb"><div class="h5"><br>
&gt;<br>
&gt; The best performance I got on FDR iser-&gt;<br>
&gt; 80% of bare metal performance: 1500MB/s but ovirt goes mad claiming<br>
&gt; that Network and Disk devices are saturated. My VM goes time by time<br>
&gt; to paused state.<br>
&gt;  It is due to that the Ovirt treating all ib devices as 10Gbit<br>
&gt; cards(in terms of speed).:(<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; On Thu, Oct 23, 2014 at 8:30 AM, Trey Dockendorf &lt;<a href="mailto:treydock@gmail.com">treydock@gmail.com</a>&gt;<br>
&gt; wrote:<br>
&gt;         Not sure if it&#39;s a solution for you, but ZFS.  My domains are<br>
&gt;         all ZFS (using ZFS on Linux in EL6.5) and my backup server<br>
&gt;         receives incremental snapshots from primary storage which<br>
&gt;         includes both NFS exports and iSCSI.  ZFS makes creating block<br>
&gt;         devices for iSCSI very easy, and they are included in snapshot<br>
&gt;         replication.  The replication is not HA but disaster recovery<br>
&gt;         and off site.<br>
&gt;<br>
&gt;         I&#39;ve hit 300MB/s using ZFS send over IPoIB on my DDR fabric,<br>
&gt;         which isn&#39;t amazing but not terrible for an old DDR fabric.<br>
&gt;<br>
&gt;         ZFS is probably not an easy solution as requires rebuilding<br>
&gt;         your storage, but maybe for future use or other readers it<br>
&gt;         will give some useful ideas.<br>
&gt;<br>
&gt;         - Trey<br>
&gt;<br>
&gt;         On Oct 22, 2014 11:56 AM, &quot;Arman Khalatyan&quot;<br>
&gt;         &lt;<a href="mailto:arm2arm@gmail.com">arm2arm@gmail.com</a>&gt; wrote:<br>
&gt;<br>
&gt;                 Hi,<br>
&gt;                 I have 2x40TB domains each are exported with<br>
&gt;                 iser/iscsi with ib and 10Gb interfaces.<br>
&gt;<br>
&gt;                 For sure they are RAID6 storage little bit save on<br>
&gt;                 failure.<br>
&gt;                 But I was wondered if any way to backup those domains.<br>
&gt;                 particularly master one.<br>
&gt;<br>
&gt;<br>
&gt;                 I was thinking somehow DRBD based replication, with<br>
&gt;                 lvm snapshots etc. But it looks like overkill.<br>
&gt;<br>
&gt;                 Will be nice somehow to deploy replicated/HA Master<br>
&gt;                 domain with ability to backp on tapes as well.<br>
&gt;<br>
&gt;<br>
&gt;                 Any ideas are welcome.<br>
&gt;<br>
&gt;                 Thanks,<br>
&gt;<br>
&gt;                 Arman.<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;                 _______________________________________________<br>
&gt;                 Users mailing list<br>
&gt;                 <a href="mailto:Users@ovirt.org">Users@ovirt.org</a><br>
&gt;                 <a href="http://lists.ovirt.org/mailman/listinfo/users" target="_blank">http://lists.ovirt.org/mailman/listinfo/users</a><br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
<br>
<br>
<br>
</div></div><span class="HOEnZb"><font color="#888888">--<br>
<br>
Med Vänliga Hälsningar<br>
<br>
-------------------------------------------------------------------------------<br>
Karli Sjöberg<br>
Swedish University of Agricultural Sciences Box 7079 (Visiting Address<br>
Kronåsvägen 8)<br>
S-750 07 Uppsala, Sweden<br>
Phone:  <a href="tel:%2B46-%280%2918-67%2015%2066" value="+4618671566">+46-(0)18-67 15 66</a><br>
<a href="mailto:karli.sjoberg@slu.se">karli.sjoberg@slu.se</a><br>
</font></span></blockquote></div><br></div>