Verkada Notification Outage
Verkada is suffering an event notification outage and analytic search failures.
Inside, we examine what the issues are, what Verkada told IPVM and the risks of these outages for VSaaS users.
Update **/** - ***** *** *** ************* ********* / ** ******
** ** *** ******* ** **/** email *** *** ************* *** ****** have **** ******** **** *** *******. Mobile *** ************* *** ***** *** working. ** ******* *** ** ******* for ********** ******** *** **** ****** the ****** **** ** ** ********.
************, ****** ****** ** **** ******* properly, ******* *** *** ***(*) **** it *** *** ***********, ****** ********* events *** ***** *** *****.
Outage ********
*************, *** *****, *** *** ****** app, *** *** *** *******, ********** users **** ******* ****** ***** ********** and ******** *****.
**** ********* *** ****** *** ****** at ***** * **** *** ** the **** ** **** ***********. ******* cameras *** ***** ********* ** *******'* servers *** ********* ** *********** ********, no ********* ************* ** *** ******** were **** ** *******.
*******, **** ** ********* ******* ******* on **/** ** * ** **, they ********* **** **** ***** ** the ***** *** **** ********** * fix:
******* *** ****** ** ******* ** ETA *** *** ***, *** ***** it *** *** *** ******** *** engineering:
*************, *** ******* ***** ***** **** caught *** ***** ******* ******* **** are ***** ******* ******* ** ***** homes:
** ******** * ************* ** ~* PM **, ** *** *** *****, but **** *** ******** *** *****. Verkada ****** *** ************* *** **** not *******.
****** **** ***** ** *** ***** did *** ******* *** ******:
No ******* ************
******* *** *** **** ***** ************* to ********/*** ***** ** ****** * blog ***** ***** *** ****** ** of *** ******* ** **/**, ~** hours ***** **** ****** ***** ** it. ******* **** *******.*** ******* ** ***** ** ******** 5.5 ***** ***** ***** ****** *******(* **** ***** ** *** ********).
*** ********** ***** *****.*** *********** * full ****** ******, ***** ******* ** suffering * ******* ****** ** ***** notifications *** ******** ********.
** ***** ******* **** *** ***** of *** ***** *** **** **** not ******** * ***** ********. ** will ****** **** ***************** **** ******* ***, ***** ** common ** *** ** ********.
Cloud - ***** ************ *****
*** ************ ****** ***** ***** ***** to **** ******** ****** (****** ** vehicles ** ***** ********), ********** ** remote ***** ** ***** ****** ******** hours **** ** *** *** ** actively ********** ***** *******. **** ** especially ********* *** ***** ***** *** rely ***** ** *******'* *** * ********, "***** ******** *** ******", **:
***** ***** ** ******** *********** ********* without ****** ** *********** ******* ************ around *** *****. **** ************* **** immediately ***** ************ ** ******* **********, such ** * ****** ******** ** the ******** ** * ****** ***** hours, *** ********** ** **-**** ********* is ******* ** ********** **********.
**** ** *** *** **** ***** as *** **** ** *** ******** at * ********, ***** ***** ********* alerts **** *********** ***/*** *******. ******** events *** ****** *** **** ***** VMS ******** **** ********* *** ************* have ********* *** *******, *** *** protocols ******** *** *** *********** ** complicated.
Person ********* ****** ******
** ******** ** *** ************ *******, People ****** ** **** *** *********** properly. ***** ** *** ***** ******** History ******, ****** *** ******* *** highlighted ** *** ******, ********* ** People ****** ******* "** ****** ******** within **** **** *****":
******* **** **** ***** *** ******* to *** ****** *** ******* * fix ********, ******* ** ** *** time ** **********, *** ***** ***** persists.
Cloud ** **-**** *******
******* ********* ******* ***** *** ******** of ******** ******* *** ****** **** come **** ************ *************. *** **** are ********* ***** **** ***** *** such *****.
** *** ***** ****, ** **** ongoing ******* ************ ****** *****, ***** are **** ***** **** ***'* ***** provider *** ******** **** ***** **** to ****** **** *** **** **** be ******** ** ******* ** ********.
****** ************* ******* ********* ******** *** detected ****** *****, *** *** *** some ********** ******** *****.
*****, *** *** ***** ********, *** alerts *** *****/***/*** ************* ** ******** events (******, ********) ***** ** * user ******* ******** (******, ******** *****, after *****, ***). *** ********* **** to ** ******* ********, ** *** people *** *********** **** ******** ***** in *** ********, *** *** ****** results **** *** **********.
***** *** *** ********** ** ****** on *** **** ** *** ******* technologies. ****** **** **** ****'* *****.
** ***** ** ***** ********** ** IPVM **** **** ******* ******.
** ** ************ **** *** ********** would *** * ***** ********** ******** for ********* *** ****** ** * strictly ***-***** ********* ****** ********. **** is *** ** **** **** ******** events *** ** *********.
* ****** **** ****** ** *** enterprise *** ** ******* ***** **** useless ** **** *** ***** ******* and *** ****. **********, ******** ** foreign, **** **** * ***** *** with ******* *** ****** ***** *******, just **** **** ****** ******** **** critical ***************.
*** **** ***** ****** **** *** make ******** ** ****** *** ****** vulnerable.
** ** ************ **** *** ********** would *** * ***** ********** ******** for ********* *** ****** ** * strictly ***-***** ********* ****** ********.
"************", ** *** ** ***. ******** that ***** *******, ***, ***, *****, and ***** ******** ********* *** *** likely ******** ********** ** *****-****** *********. Why ***** ** ** "************" **** their ******** ******* ***** ** *** different?
** ***** **************** **** ** *** *****-***** *******, or ***** *****-******* ****, *** ** you ***** ***** ** ** "************" then *** ** * ************ *** in *** * **** ***** **** ahead.
* *** ******** ** ******** ****** or ******* *** ***** **** "****** 365/Google ***** ** ****, ***** *'** go ****!" ** ******* **** ***** than ***'* *****, *** * *** of ************* **** ** ** **** with **.
** ** "***********" *** *** ** think **** ****** *****, *******, ***, etc ***** ****** ** **** ** life **** ****** * ************ ****** using ********* *** ******** ***** *** and **** *** ****** *** ** would ** *** *********. ** ***** "unbelievable", ********* ** **** **** **** in *** ******** **.
***'* **** ********* *******, **** ***** pull ********, *** ***** ********* **** to *** ******* *** *****, ***. Let's **** ****** ******* ******* **** to ** ** *** ***** *****, before ******* * **** *** ********* egress. **'* *** *** **** ** email *** ***.
******** ************ ***** *** (** **** you ***) *** ******** *** * very ***** **** *****.
** ** "***********" *** *** ** think **** ****** *****, *******, ***, etc ***** ****** ** **** ** life **** ****** * ************ ****** using ********* *** ******** ***** *** and **** *** ****** *** ** would ** *** *********.
* ***** *** ****** ** *****. I ***** **** *** *** ***** of ********* ******** ****** *** ** compared ** *** **** ***, *** I *** ******* *** *** *** why ***-***** *** ***** ******* ****. Calling ** "************" ******* **** *** are *** ************* *** ****** ****** of *** ******, *** *** ******** to ***** ***********, ***.
** *** **** ** ******** ** systems ********** ******* *** *** ********* costs ** *** ****** **** *** needed ** ****** *** ********* ** networked *******, **** ******* ***** *** fairly ************ ********* *****.
** *** **** ** *** *** aspects ** **** ** *** *******, data *********, ********, **********, ***** *********, up-time, ***, ** ******** ****, *** have ** *** *** ***** *** do ** **-*****.
****'* ** ****-************** ** *** ********* of ******, *** **** ** *** essense ** **. *** ****** ** two ***** ** *** ******* ** two *****.
***** *********** **** **** **'* *** set ** ***** ** ******** *** the *********** ********* ** ******** ***** risks.
** *** ********* ***** ** * life ****** **********, ** ** ** house ** ** ******** ** ****** the ************ ** ********** ** ****** (the *****). ** *** **** *** consider ***** ** * **** ****** technology, ***** *** **** *****.
** ****** *****'* **** **** ** this ** **** ************ ***, *****, I ***** ****'* *** ******* ** it.
***, **** ***** *** ***-************. * would **** **** ****** *** *** a ****** ** **** ******** ***** that ********** *** *********** ** * huge ****** ****** ** **. * didn't ***** * *** ** ***** the *******. **** ** ************ ** the **** **** **** ****** ****** has ******* ******** **** *********** ** a ****** **** ** ******* ***** and ******. **** ** *** ***** of ****, "***********" ** ** ********** adjective ** ******** *** ******** *** dangerous **** **, ***.
*** ******* ** **** **********\***** ******* don't ********** ********** **** * **** perspective ** ******** ** ****, *******. If *** ***** ******** ***** ** that ***** ***** **** ** ****** without *********** ******* ********, ** **** for ** ******* ******** ***** *** sacrifices ** ******** ********.
***, * ***** ***** ***** ******** all *** ****, **** *********** ** the **** *****.
**** * **** **** * *** not ******** ** *** ************ ** undesirable *********, **** ****** ** **** a **** ** ******** *** ************ and ************* ** *** ***** ******** on *** ***** *** ********** ** those ***** ** **** ********** ***********.
***, **** ***** *** ***-************.
*** **** ******** **** *** * bunch ** ***** *********** ******** ** with ************ * *****-***** ****** **** takes **** ************ *** ***** *****-********* surveillance *******.
**** ** *** *********** * **** seen **** ***** *** **** **** multiple ********* *** *** *** *********** by * "******" **** ******. ****, Verkada ****** **** ***** *******, ***** does *** **** * ***** **********.
**** ** ************ ** *** **** that **** ****** ****** *** ******* priority **** *********** ** * ****** used ** ******* ***** *** ******.
******** ******. **** "*****" *** *** referencing **** **** ****** ****** ***************** *** *********** ** *** ******?
Update **/** - ***** *** *** ************* ********* / ** ******
** ** *** ******* ** **/** email *** *** ************* *** ****** have **** ******** **** *** *******. Mobile *** ************* *** ***** *** working. ** ******* *** ** ******* for ********** ******** *** **** ****** the ****** **** ** ** ********.
************, ****** ****** ** **** ******* properly, ******* *** *** ***(*) **** it *** *** ***********, ****** ********* events *** ***** *** *****.
* ** **** ******* ** *** how ******* ** ***** ** ******* the ****-****** ** ****.
********* **** ******** *** ****** ** something ****: ****** ******** --> ****(*) matched --> ***** **** ****** ** database --> ***** **** ********** ** notification *******.
* **** ** ********** **** *** event ************ ***** ***** ** ** somehow ********** **** *** ***** *****, but ***** ******** **** *** ****** detection **********.
**** **** **** *** **** ******, it ***** **** **** * ******* in *** ***** ****** **** *** not *********** ****** *** ******* *** event *** ** *** ************ **********, but ** ****** * ***** *** say *** ****.
** ** **** **** ****** ** use * ***** ***** ******* *** the ************ ******** (**:******), ** ***** ** *********** ** know ** ******* ** ******** ** have ****** (** ******) ***** *** push ************ *****.
******* *** * *** *****, ********* Verkada *** *** **** * ** team ***** ********, **** ***** ********* ******* *********:
** ******* ***** ** * ***-****** sales **** ****** ****** * ** team.
***** * *** ** ****** **** it *****, ********* **'* ** *** to **** * **.
***** *** * **** ****** ********** techniques
**** ****** *********** - ****** ******
******* ********, **** ** ***% ******* with *** *********, ***** ** **** more ******** *** ********* **** ****** QA. ** ****** **** ** **** if ********* ***** *** ** *********.
** **. *** * *** ******* and * ****** *** ***** *** is *** ***** *** **** ********* one, * **** **** **** ***. And **'* *** **** ******...
*) ** *******. ***** *** ** much **** *********, ********** ** * startup ** ****** ** **** *** code **** *** **** **** ** manually ****** ** ******** **** ***********. Little ***** **** ****, *** **** term **** ****. ** ** ***** do ** *****, ** ***** **** a **** ******* **.
*) ** *** ****** ****** *** back ** *** ****, ** *** much ****** ** ********.
*) *****, ***** *** ****** ***** manual ** ** **** *********(********** ***** term).
*) ** *** ************, ** **** plays *** **** ** ********* *******. They **** *** ********* ** ****** functional ***** *** ****** ********** ***** to **** ****** **** ****** *** users.
***** **** * *** ** *** original ** ******* ******** **** ****** QA ** **** *******.
*** ****** * **** **** *********/******** do *** *** ****** ** ** all. * ******* ***** ***** ** an ******* **** *** ********. **'* totally ****, **** *********.
**** ******** ** ********* **********. *** "********* **'* ** *** ** **** a **" ** ***.
** *** ******** ** *** ******-**, while ********** **** ******** ** *********, in ********, *** ****** *** ***** QA ******* ** ************'* ********* ** all ***** ** **** *** ********.
*'* *** ** **** ****, * fifth *****, **** *** ****** ********** and *** * **** *** ***** situation ** ***********, ****** ******* *** can't ***** ******* *** *** ******** patterns ******* **** ** *** ***** will ******** ***.
********* * **** *** *** **** playing *****'* ********, * ***'* ******* you ****** ***** **'* ******** ** hire *** *********** *** ** *** in **...
**** *** ***** ********* ********* ** know **** **** **** * **** of************(*** **** *****). ** ***** **** people ***** **** ****** *** ** role ** ************ *******(*'* **** **** did).
** **'* *** ***** "** *** in **.." ** "*** ****** *** human **".
***, * ***** **** ******* ****** of ******* **** ******** ***** **** out ** ******* ****** ********* ** production. ** ***** ** *****, ********* to **** ** **, **** ** appearantly **** **** **** **** ** formalize **.
**** ****, *** ********** ********* *** automation:
******* ********, **** ** ***% ******* with *** *********
*****, *** ********** ** ********** **** the **** ** **********, **** ****** that *** ********** ********, ******* ******* Optix ** *** *******, ** ***** to **** * ********** ** *******, beyond ***.
* ******** **'* ***** ** **** I ***** **** ****** ***** ***** product *******.
**** ******* ** ***'* **** *** this ***** ***??
** **** ******** ******* ** ********* notification *******, **** ** *** *** resolution ******** **** *******. * ******* partner **** ** **** *** ***** having ****** *** **** *** ******** a ******** ** * ****.
** **** ********* ** ******* *****/*** notifications, **** ***** ** ****** *** notifications.
******* *** *** ******** * ****** or ********** *** *** ******, *** we **** ****** *** ****** **** we ******* ***, ** ******* ********* a ****-******.
**** ****** ** ***** **** **** pushed * ******** ****** **** **** massively ******* * ******** ******, ** altered **** ***** *********** ************* ** the ************ **** ** **** **** hard ** **** ****.
** **** *** *** ***** ** a *** ***** ******* ********, ** would **** **** ****** **** **** that ** * **** *****, ******** along **** ******* ********* ** * different *** *****. *** ** *******, we ***** ** ******* ** ***** platforms ****** ************ ******** *** ***** products.
** **** *** *** ****** ** a ***** ***, *****, ***., **** would **** ****** **** ****, ** fixed *** ***** ** ***.
** **** **** ******* *** ** server *********, **** ***** **** **** a ***** ** **** ******** ** eBay ** **** **** **** *** cycles :)
**** ****** ** ** ******* **** is **** **** ******* ** **** architecture, *** ******* **** ******* **** that *** **** *********, ** **********, to *******.
* ****** ** ******* ********* **** ever ** ***** *** ****** ***** how *** **** *** *******, ************, etc. *** ****** *** ** ***** personal ********* *** ********. **** ** one ** *** ***** ********* ** SaaS-style *******, **** ******** ********** ** only ** **** ** *** ******* link ** **** ********* *********.
*********** *******'* ********* ***** **** ** being '****** ********, ****** **':
****** *** ******* ***** ** **** situation, ********* ****** ***** ** ** 'always' ******** ** '**' ** *** service (******* *** ******* ** ***** or ***, ***.) ** *** ******* can **** ****** ********.
*********** *******'* ********* ***** **** ** being '****** ********, ****** **'
****, ** **** ***** *** ******* has **** ******** **** ****** **** you ***************** ** ***'* *** ***** *******.
*'* ******** **** *** ********** ******** IPVM ** **** ** ** * customer ***** ***.
** ********* *** ******* ******* * local ******* ****** *** ********** *** system ******* ******** **********.
***** * ******* ***** **** ***** block ******** ******* **** *** ***** address/domain, * ** *** **** ** they ***. **** **** ** **** channel, ****** *** ******** ******* ***/************.
***** *** **** ******** ********** **** a ***** ********** ** ** **** covert *******, ** * ************ ***** to **** ***** ******** **** **** you?
*'* **** ****** *** ** *********; my ******* *****'* ******* ** ************.
*** **** ** ** ****** ** they ********* ** ***** ***? ** they *** *** ******* **** **********.** to ****** *******?
** **** ** *** *********** ******* with ** *** ** ********** ** back ** **, ****'*... *** ********** at *** **** **** *******.
* *'* ** ******, ** **** heard **** *** ******** ******* ******* for ***** **** **** *** **** receiving *************.
**** ******* *** *********'* *** ******* ****.
* ** * ******* *******. ***.
******: **** ******* *** **** ***** to *** *** **********:* ** * ******* *******. ***.
******:******* *** *** * ****** ****** page, *********:
** *** ****** ** ******** ***** than **** ************* ** ******? **** what ** ******* ** *** ******, this ****** ** ** ** *** be ********* **** **** **** "*************", and *** ** ********* **** **** of *** ********* ******* ** *** cloud ** ****.
** **** ** *********** ** *** if *** ****** ******** ***** ***** things *** ********, ************ ** ***** recorded ****** *** **** ** *** outage.