VMS Benchmarking- Quantiative Test Metrics For Key Feature Validation

The challenge is the VMS vendors claim their product is the best in class. How as a customer validate that? For this we are in the process of the VMS benchmarking. I am looking for key features, their testing methods, test metrics (numeric values) and test tools. Also looking for Camera stream simulation software for stress testing. Request for the necessary inputs from the IPVM Team.

Login to read this IPVM discussion.
Why do I need to log in?
IPVM conducts unique testing and research funded by member's payments enabling us to offer the most independent, accurate and in-depth information.

**********, ***'* ***** **** **** * ***********. *'** ******* * new ********** **** ****** ****** ********** ********.

** *** ************, **** ******** *** *** ******** ** ************?

** ****,

***** *** *** ******* ********. ** ***** **** ** *** test ********** *** *** *** ********* ******** **** **** ************ confirmation:

  1. **** ***** ****/******: ******** ****/******* *** * ***** ****** *************. What ** *** **** ******** ** ** *** ** *** market *********** ******* ******** ** **********, ***** **** *** *********?
  2. ********* **********
  3. ** **********/ *** ******* *** *** ********** ************ ******* *** best ** *** *****
  4. *********** ********
  5. ******* ********* ************ ***** ** *** ******* ************?
  6. ******* ************- ***** ******* **. **** ** ***** *** *** enterprise ********
  7. ****** ******* ** *** *** ** ***** ** *** **** cameras *** ************ *******

******* *** **** ******.

******, ***** *******

**********,

*****, ***** ********. * ****** ****** ** ****** * ****** of **** **** ********* *** ******** *** ****** ***** ********** to **** ** **** ******** ** * ******* ******** ** compare **** **** ********** ** ****** *** ****** ********.

*** ******* ** ************ ** ********** ******* ***** *** **** standards ** ***** ** ***** ******* *** ******** **** *** VMS ** ********. ***** *** ** **** ********* * ** aware ** ********** *** * ******* **** ** *** ** **** *****.

********, *** *** ***** **** ** ******** *** ********* **** of ************ ***** ******** ****** *******. ** ** ** **** to **** * ****** ******* **** ** ******* *** *******:

*** * ****** ******* ******* **** * ** ** ****** layouts

*** * ****** ******* * ** *** ****** *******

**** ***** *** ******* ** ** **** ****? ****** **** be ***** ****** ** ******? ***** ** *** **** **** all ** ***** ***** **** *** ** *******?

******* *** ** **** ** ** ** *** *** ***: does *** *** ** *** *********** ***** * ******* ** 18 ****** *******? ** ** ****** * ***** **** **** fine.

*** *** ** *** ******* ** ******** * **** ** breed *** *** ******** **************? ** **, ** *** ** good ** ***** **** **** *** ********* **** *** *** questions **** **** **** *** ****** **** ************ ** **** for ** * ****** ***:

  • *** *** ********* * ******* ****** ** **** **** ** a *** *******?
  • ** ** ****** ****** ** ********* ** ***** *** *** be **** ** **** *** **** ****** *** **** ** avoid ** *** **** ******.
  • *** *** **** ** **** ** ***** **** ******* ****** installs ** *** *** ***** *** ****** ******* *** ***** add ** **** ***
  • ** **'* * ***** ************, ********** ********** ***** ** ***:
    • ****** ********* *******
    • ******* ********** ** *****/******/****** *************
    • ******* **************
  • **** ****...

****'* ******* **** ** *** *** *** *** ***********. * created * ******** **** * ***** ****** ** *********/******* *** boxes ******* *-* *** *** ** *** ***********. * "*" meant *** ****** ****'* ***** **** *******/******** *** "*" ******* "9" **** ******* ***** ** *** ********* ** *** **** the *** ********* **** ********. **** *********/******* **** *** * section *** ******** **** **** *** *****, ******* *** **** to ****** ***** *** ***** ***** *** ********.

*** ********* ******* **** *** ** * *********** *** *** results **** ******** *** **** ************ *** *** ********* ** obtain * ****** *****. *** *** ***** ************* ***** ** to ***** *, ***** *** ********** ********* **** ******** *** refined, **** ******* ******** *** **********. *** *** ** ***** were ******* ** ******** ** *** *** *******. ** ***** cases, **** ****** *** *** ******* *** *******. ***** *** system *** ****** ** **** *****, *** ***** ****** ***** in ***** *****, **** *********** ********** *** *** *****. *** purchase ******** *** ***** ** *** ********** ** *** ******** importance ** **** ******, ********** ******** *** ********* ******** ****** ongoing *********** *** ********** ** *** ****** ********, **** ******* criteria *** *** ********* ***********.

* ***** **** *** * **** ** *** ********** ******** document.

****** **** *** ******* **** ******** ********. **** ** **** we *** ******* ***.

****, ***** *** ****** ***** *** ********** ******** ******** **** guidelines ** *** ** **** *********** ** *** ********?

******, ***** *******

*'** *** ** * *** *** ** ***** ** ****, Carl. ****** *** *** *******, * ** ***** ***** ** value ** ****. ***** ** * ***** *** ******, ** could **** ****** ** ** ******* *** ********* ***** ** one ** *** **** **** ** **** ***. * ******* starting **** ************; ************* **** **** ***** ****, *********** *** needs *** ** **** * ******** **** ***** ****. **** look *** *********** *** *** ******** * *** **. **** needs * ****** **** *** **** ****** ******, ** **** the *** ** ********** *********, **** ** ***** ******* *** indication ** *** *****, ******** ***** *** ******* *** ****** for ***** ** ***** ***** ************.

****** ***** *** **** *** **** ******.

* **** *** ***** *** **** ***** ***********. **** ** thought *) *************** *** **** ** ** ******** *) *** well ** *** ** ****** ** ***** ********** *******/******* *********.

******, ***** *******

*****,

***** * ****** * **** *** **** ****** ***** ***** 2 *** ***** * ***** *** ****. ***** **** *** about * ****** *** **** ******.

******. *** **** ** **** *** ******* **** ************/*****, ** it ***** ************* ** ****** ******* ***** ******* ** **** is ******.

*'* *******..***** *** ***, **** *** *********** **** ******** ** part ** **** * ***** ********?

****, *** *** **** ***** ******* *** ****** ** *** prior ** ******* ** ***** ** *** ** **** ** during? *******.. *** ****** ********* **** * **** **** ** selecting * *** ** ***** *** ** ******* ** ****** the ******* ********** ********** ***** ** *** ******* *** (*** to ***********/******* **********, **** ** ********* *** **** *** ******* comes ** ****.)?

***, ** ******* * ****** ** ************* ** ****** ******* for ********** ***** ** *******-********** *******. ** **** **** * list ** ****** ********** *** ************. **** * ***** *** Phase * ********** **** ***** *** ******* * ****** ** times ****** *** ****** ** *** ***********.

***** * ******** **** ***** ** ***** * ******** *** expanded ***** ** **** ** ******* ** ***** * *** discussions ***** ********* ********* *** ******** ********** ** **** ********.

** ********* * ****** ** ******** ****** ***** * *** more ****** ***** *. ** **** ********* * ****** ** IP ******* ****** ***** *.

* ******* **** *** *********. *** * ***...***** *** *** finally ********? *** ****** **** ****, ** *** *** ******** the ***** *** *** **** ** *** **** ***********? ** are ***** ******** **** **** ***** ******* * * ****** process ****'* *******?

** ******** *: ************.

**'** **** *** ****** ** ******** * ****** *** *** of *** **** ** ***** **** **** ;-)

****, ** ****** ***** ***** ** ********* ************?

******,

**'** ** ***** ***/** ******* *** ****** *** * *********** of *** ******* *** *** ********* *** "****" **********. *** biggest ***** ** **'* ******* ********* ***********: ******* ***** ********* 40Mbps ******* ***** ** ********* *******. ** * **-******* ******* we *****'** *** ** ****** ***** *** ****** ** ******** per ******* ** * (***@*****= ******) ** ***** "****" ********* *** *** ****** ** 2Mbps.

* ********** ****** ** ******* *** ****** ******* ** *****. The ******* ******* ******* ********* (******* ** **** **** *** cameras *** *****).

** ** ******* **** *** ***/** ******* *** ****** *** UDP ********* *** ****.

**** ****** ** * **-******* (****-*******) *******. ********, *** ********* viewing ** ***** *** ** ******** @ *.***** (***** ******) or ** ******** ** * ******* ** * @ *.***** (subtotal ******) *** * @ *.***** (******** **.*****) - ***** 38.5Mbps. ** ** ******** @ *.***** (***** ******). *****-********* ******* chassis **** ** *** ** *.*****/******* ** ***** ********* *** 40Mbps ********* *****.

** ***** *** **** *********** *********** ** ** *** **** of **% @ *.***** *** **% @ *.*****. ********** ******* add ** **** **** *** ********* *** ***** ***** *** multicast ***** *******. ***** ********** *** ******* (** = *** channels) ******** ******** *** ******* ** **** **** ******* **** multicast ***** ****** **** ******* *******. **** **** ****** ** limitations ** *** **** ******* *** ** ****** ************** ******* exceeding *** ****** ** ********* ******* ** *** *******' ********* limits.

** ***** **** **** **** ** *** ******** ***** ** viewed ** **** ********** ************** *** *** **** *** ** do **** ***** ** ** *** *** **** *** **** view ** *** *** ****** ** ******** *** *******. ** servers ** *** **-********** ******* ** ***** *** *** ***** proxy ******* (**** **) *** ***** * *** ** *** cost. **** *** ** ***** **** **** ** **** ********** Axis *****-****** *******, ***** *** *** ******* ** ********** *** streams @ ***** **************.

****, *****,

**** **** **********

**** ** ** **** ********, * **** ***** *** *********** and ***** ******. ** ***** *** *** ***** **** *** clearly ***********.. *** ******* *** **** *******/*** **** ** ** of * *** *** * ?

******, ***** *******

*****,

**, ****, ***'* **** * **** ** ****'* ********** ******. Also ********* *** ******** ******** *** ******, ***** *** **** but *** *** ** ****** ** ** ****** ** ****, depth **** ** ************ ********* ****.

**** * ****** *** *******:

*. *********** ********: **** ********* ** *** ****, ****** ********* or ***** ** **** ********** (*** **** *** **** ******** than ***** **************).

*. *******/*** **** ****** * *******: ** ********** ********* ** *** ******* **** (****** ***** or ******** *****?), ******* ************** *** *** *** ***** ************ (CPU **. ***, *** ****** ******* ********** ** ***?) ******* in **** ***** ** *** ** ********* ****** ** *******.

*****,

* *** **** **** * **** ** *** ***** * evaluation ****. ***'* *** ** ** **** ****:

**, ** ****'* **** ********. ** ****** ***** ** **** me ***** ***** *******, *'** **** **** * ****. ** me ** ********.