Posts Tagged ‘sertifikācija’

Big Data has sent you a friend request. Accept or Ignore?


Do you know there is a continuing education program – Big Data analytics Lielo datu analītiķa modulis – tālākizglītības iespēja IT profesionāļiem in Latvian University Computer Science faculty? Moreover, this program was introduced in cooperation with Accenture Latvia as a subprogram from Computer Science master studies.
Moduļa izveide ir Accenture Latvia iniciatīva un nepieciešamība pēc tālākizglītības iespējām esošajiem darbiniekiem.”

I will drop in here sometimes to reflect on my journey and lessons learned.

Why am I there?

Because I want to learn. I am relational databases and SQL expert and I hope as well map my current skills as to improve in Big Data area. I believe we have no choice to turn away and pretend Big Data do not apply to us. At the moment, less than 0.5% of all data is ever analyzed and used, just imagine the potential here.

After all this is so interesting turn in existence of mankind how have we faced that greedy data burst over us and I have chosen to domesticate that big data beast instead of fearing AI will steal my job.

Am I scared of lack of capacity? Of course, I am! Do I have plenty of free time? Oh, you can trust me, full time developer and mother-of-three and servant-of-three-cats, I haven’t! This is a very complex and time consuming program, I must attend and pass exams for six courses within 2 years from statistics to predicting algorithms, from Hadoop to R and neural networks. Each lecture lasts 16:30 – 19:45 (heyahh, nearest Narvesen, are you ready to sell a lot of coffee?). This semester once a week, next semester – twice a week.

I saw this year we are about seven newbies – wannabe big data analysts from various IT companies there. Let’s see survival rate. Fingers crossed for all of us!

So, I attended
the first lecture
of possibly the easiest course of six in total – Data processing systems. Professor tempts us with benefits of completing this module and uses a lot of buzzwords – NoSQL, HADOOP, ACID, BASE, CAP theorem, map reduce etc. We will have tests, quizzes and practice to set our system on our choice. Professor also reveals that previous year students ran restaurant’s and fitness clubs in their deliverables. Also, he will randomly pair students to force their systems integration. We will have to use our fantasy – like restaurant menu to be accompanied with a personalised offer from fitness club for best burn calories eaten.

Professor in action

He jokes we will experience a common real life situation when MY system is perfect and that terrible pain when you need to integrate that MY very perfect one with this totally horrible ‘other system’.

After intro about course prerequisites etc we had a warm-up session to illustrate why there is an explosive demand of Big Data analysts. By the year 2020, about 1.7 megabytes of new information will be created every second for every human being on the planet. Accumulated digital universe to around 44 zettabytes or 44 trillion gigabytes.

Why do we have data amount increasing so fast?

I bet you can’t even imagine all the different ways there are for data to be collected – some to be used right now for a known purpose and much of them are accumulated to reveal their potential later (like Facebook finds more and more ways to use their fabulous data collection) and most likely to use as a basis to be fed into artificial intelligence.

XKEYSCORE is a formerly secret computer system first used by the United States National Security Agency for searching and analyzing global Internet data, which it collects on a daily basis. The program’s purpose was publicly revealed in July 2013 by Edward Snowden. Content for 3 to 5 days and metadata for 30 to 45 days tracking someone’s Internet usage as easy as entering an email address. The amount of data per day is 20+ terabytes.

Creative businesses like Turnstyle are gathering location data from the pings and signals smartphones are giving off when Wi-Fi or Bluetooth is turned on. To track that consumer’s exact path and timing, do they linger by the shoe rack and after that decide to head to espresso bar. These data are sold – isn’t it nice to see where people are crowding or avoiding?

Browsers, applications, smartphones, smartwatches, wearable devices, vacuum cleaners and lawn movers, fridges and car navigation systems – all they are sending data to their base station. Amount of devices and users is growing very fast.

Video cameras and drones, car recorders and health checks, robots for cleaning oil pipelines, buyer’s habits in supermarkets and student’s grades, taxes and account operations, selfies taken and emails sent, phone calls and google searches, Candy Crush moves and self-driving cars, augmented and virtual realities…

Everywhere around is data and data about data. If we do not use them to make our lives better right now, we are wasting that data resource, letting their power to stay idle and downtime.

Challenges humans face

  • How to learn to use this tremendous amount of big data?
  • How to extract value from big data? Imagine a doctor’s office having stream of his patient heart rate, oxygen level and hundreds of other measurements. How to detect anomalies in data and trigger his attention?
  • How to know what value can we extract from big data we have? (remember TurnStyle and consumer path from wifi; remember Facebook anniversaries greetings…)
  • How to search within big data? (remember a sad story when a path was restored based on a small shoe fragment in one of camera recordings)
  • How to store big data?
  • How to update big data?
  • And, of course, quite painful issue of data protection. International Data Corporation IDC estimates that about 40% of data requires some level of security, from privacy protection to full-encryption “lockdown.” Unfortunately, from these 40% less than a half actually has protection.

Disclaimer
This blog is solely my personal reflections.
Any link I share and any piece I write is my interpretation and may be my added value by googling to understand the topic better.
This is neither a formal review nor requested feedback and not a complete study material.

Advertisements

23.05.2014 Analītiķu brokastu “minūtītes” : OMG OCEB 2 sertifikācija


2014. gada  23. maijā piedalījos BDA rīkotajās Biznesa analītiķu brokastīs. Kā jau zināms, bezmaksas brokastu nav un patiesībā šis bija labi noorganizēts veids, kā savākt analītiķus un pastāstīt viņiem, ka sākot ar šīgada rudeni BDA būs pieejamas apmācības un sertifikācija OMG OCEB 2 Fundamentals jeb Object Management Group Certified Expert in BPM 2™ pēc BPMN 2 notācijas. Semināru vadīja Gundega Lazdāne, BDA pasniedzēja un FMS Biznesa analīzes grupa vadītāja.

Sertifikācijai kopā ir trīs līmeņi – Fundamentals (par to ir šis stāsts), Intermediate (ar laiku arī šo varēšot BDA apgūt), Advanced. Pirmā grupa mācīsies ~24. – 26. septembrī, izmaksas varētu būt kā par 3 dienu BDA kursiem + eksāmens (nu, piemetu uz aci pēc www.bda.lv izcenojumiem, ka ~600-800 EUR).

Mērķauditorija: analītiķi – gan biznesa, gan sistēmanalītiķi.

Gala ieguvums, kādu es saskatīju – prasme un motivācija zīmēt BPMN diagrammas un, iespējams, ar laiku gan PPA papīru kalnus daļēji aizstāt ar tām, gan pašam sastrukturēt pieeju, gan savā starpā komunikācijā izmantot. Kolēģi no liela IT uzņēmuma seminārā teica, ka sākumā lietojuši kā skices paši savai saprašanai, sākuši rādīt klientam, ātri vien klienti paši sākuši pieprasīt, un tagad arī testētājiem un programmētājiem darba uzdevumi tiekot pārvaldīti caur BPMN: procesi, sadarbība, saruna, horeogrāfija (process, collaboration, conversations, choreography), jeb vienkāršāk izsakoties – vizuāli diagrammā apraksta, kādas aktivitātes kādā secībā un pie kādiem nosacījumiem notiek, kā savstarpēji mijiedarbojas un kā tiek koordinēta sadarbība.

Starp citu, pilnīgi legāla atbilde uz jautājumu – kam tāds BPMN vispār vajadzīgs? – ir arī šī: tas palīdz man kā analītiķim saprast un aprakstīt procesus.

OMG šoreiz nav Oh My God! :-), bet gan jau būs, kad sākšu pa īstam mācīties.

Rīki, ar ko dalībnieki darbā zīmē, tika minēti gan bezmaksas, gan maksas: QPR,  SPARX Enterprise Architect, Bonita, MS Visio.

Par eksāmenu (raksta beigās ir ar Gundegas laipnu atļauju pielikti daži iespējamu jautājumu piemēri)

Šim eksāmenam (atšķirībā no CBAP u.tml) nav priekšnosacījumu – nevajag apmācību punktus, pieredzi u.tml. Samaksā un kārto. Pagaidām nav zināms, vai būs nepieciešama resertifikācija, bet paskatījos, ka dažiem citiem līdzīgiem ir ik pa 3 gadiem.

Tests, 90 jautājumi. Lai nokārtotu, jāatbild uz 62. Laiks – 120 minūtes (jo angliski un mēs neesam angļi. Angļiem ir 90).

 Eksāmena % sadalījums:

  • 40% – BPMN notācijas zināšanas – ko nozīmē kurš elements, kā raksta scenārijus, kā veidojas modelis u.tml.
  • 15% ir par BMM jeb Business Motivation modeling – stratēģiskā domāšana, vīzija, misija, taktika. Jebkas, ko uzņēmumā darām, ir attiecināms (saistīts) ar kādu augstāku mērķi, kā to nodrošināt.
  • 30 % – pamatzināšanas, pamatjēdzieni, kā arī – kas ir biznesa procesi, kā veidojas organizācija, kā rodas un veidojas procesi, apakšprocesi, darbības principi, plūsmas
  • 15% – augstā (virspusējā) līmenī – pārvaldības ietvari, kvalitāte, mērījumi

Image

Domāšana

Vairākkārt tika runāts, ka šīs nav „plikas zīmēšanas” apmācības, bet ir vairāk – domāšana, pieeja, attieksme. Visam pamatā ir mērķis, uzņēmuma mērķa esamība un virzība uz to ir uzņēmuma brieduma indikators. Izslēdzam pieeju ”daru šito tāpēc, ka man tas jādara”. Tā vietā: „daru tāpēc, ka tā sasniedzu mērķi X”. Skaidri saprotams, kāds process, kas to sāk, kas beidz, ko dara, kāds rezultāts, kādi nosacījumi.

Subjektīvā daļa – vai es to gribu?

Pašlaik nezinu. Ohohoo, protams, patiktu pamosties ar šīm zināšanām (un sertifikātu :-) ), bet šobrīd kārtoju Oracle programmēšanas sertifikāciju, tāpēc par šo padomāšu ne gluži rīt, bet nākamgad. Diagrammas zīmēju, bet jāatzīst, tās ir stipri vienkāršas, salīdzinot ar BPMN 2.

Ko pavisam noteikti varu apgalvot: brīdī, kad man BPMN ieinteresēs pa īstam, es iešu uz šiem kursiem, jo BMPN 2 standarts uz 508 lapām ir, piedodiet autori, bet miega zāļu piesātināts. Tāpēc labāks veids, kā to apgūt, būs kursi un ikdienas lietošana.

Caurskrienot BPMN 2 – bildītēs

Notācija ir ļoti bagāta – daži piemēri (vairākas no šīm es nezināju) – nokopēju no sagūglētiem slaidiem par BPMN 2 tutorial:

Image

Diagrammu piemēri:

Image

 

Image

 

Image

Horeogrāfijas piemērs (arī nokopēju no sagūglētiem slaidiem par BPMN 2 tutorial)

Image

Eksāmena jautājumu piemēri

 Image

 

Image

%d bloggers like this: