Үлкен деректерді талдау (Big Data)

Бағдарлама

SQL, Excel, Power BI сияқты әртүрлі құралдарды қолдана отырып деректерді құрылымдап жинау және өңдеу

EXCEL-де деректерді өңдеу

1. Формулалар мен функциялармен жұмыс
— Ақпаратты жылдам жинау және салыстыру үшін формулалар құру логикасы

2. Деректерді өңдеуге арналған негізгі формулалар
— АГРЕГАТ, ПРОМЕЖУТОЧНЫЕ.ИТОГИ, СУММЕСЛИ, СУММЕСЛИМН, СЧЁТ, СЧЁТЗ, СЧЁТЕСЛИ, СЧЁТЕСЛИМН, ЛЕВСИМВ, ПРАВСИМВ
— Мәтіндік функцияларды пайдаланудың практикалық мысалдары

3. Күн мен уақытпен жұмыс істеуге арналған функциялар
— Excel-де уақыт пен күнді есепке алу ерекшеліктері
— Функцияларсыз күнтізбелік күндерді есептеу
— ТДАТА, СЕГОДНЯ, ГОД, ДАТАМЕС, ДЕНЬНЕД, НОМНЕД, ЧИСТРАБДНИ, РАБДЕНЬ, РАБДЕНЬМЕЖД

4. Логикалық функциялар мен өрнектер
— Excel-дегі логика операторлары, логикалық мәндер
— ЕСЛИ, И, ИЛИ, ЕСЛИОШИБКА, ЕСЛИМН

5. Сілтеме функциялары және массивтер
— ПОИСКПОЗ, ИНДЕКС, ФИЛЬТР

6. Деректерді тексеруге арналған функциялар
— Ашылмалы тізімдер жасау
— Формулаларда басқа парақтар мен басқа жұмыс кітаптарының ұяшықтарына сілтемелерді пайдалану
— Сілтемелерді тиімді пайдалану
— Басқа парақ немесе кітаптың мәндерін пайдаланатын формула жасау
— Бір кітаптағы басқа параққа сілтеменің синтаксисі
— Басқа кітаптағы ұяшыққа сілтеменің синтаксисі
— Сыртқы байланыстармен жұмыс
— Сыртқы байланыстары бар формула мәндерін өзгерту. Байланыстар күйін тексеру

7. Кестелермен жұмыс
— Кесте (Table) объектісімен жұмыс
— Жалпы ережелер
— Кесте құру
— Кестелер құру үшін жылдам талдау құралын пайдалану
— Кестенің мүмкіндіктері
— Сүзгінің ашылмалы тізімдері
— Деректерді сүзу үшін кесіндіні пайдалану
— Кірістіру жолы
— Қорытынды жол
— Кестені өңдеу
— Кестенің есептелетін бағанын құру

8. Деректерді визуалды талдау
— Шартты пішімдеу (Conditional Formatting)
— Шартты пішімдеу ұғымы
— Шартты пішімдеу құрудың жалпы тәсілі
— Шартты пішімдеу ережелерінің түрлері
— Пішімдеу критерийі ретінде формуланы пайдалану
— Шартты пішімдеу ережелерінің диспетчері
— Шартты пішімдеу ережелерін өңдеу басымдығы
— Шартты және «шартсыз» пішімдеу

Power BI-де деректерді өңдеу

1. Дереккөздермен жұмыс

2. Power Query-мен жұмыс
— Power Query Editor-да сұраулар өңделетін M функционалдық тілінің шолуы
— Кестелерден деректерді дайындау. Артық бағандарды жою, деректерді жетілдірілген сүзу, мәндерді ауыстыру, бағандарды ажыратқыш бойынша бөлу. Шартты бағандарды (мәндері басқа бағандарға тәуелді бағандарды) қосу. Бірнеше кестені біріктірудің әртүрлі тәсілдері: бірнеше ұқсас кестені жапсыру, басқа кестелерден жетіспейтін деректерді қосу (Excel-дегі ВПР аналогы). Деректер форматын орнату. Unpivot пайдалану

3. Деректер моделі
— Реляциялық дерекқор теориясына кіріспе. Кесте түрлері. Кестелер арасындағы байланыс түрлері (One to Many, Many to Many). Реляциялық дерекқордың негізгі түрлері
— Деректер моделін құру. Байланыстарды орнатуды егжей-тегжейлі зерттеу. Деректер моделін баптау. Деректерді пішімдеу

4. DAX көмегімен модель есептеулерін құру
— DAX функционалдық тілінің шолуы. DAX функциялары (SUM, AVERAGE, COUNT, DISTINCTCOUNT, What IF) көмегімен қарапайым өлшемдер құру. Есептелетін бағандарды қосу. Есептелетін кестелер құру. Time Intelligence функцияларының (PREVIOUSMONTH, PREVIOUSQUARTER, PREVIOUSYEAR, SAMEPERIODLASTYEAR, DATEYTD, STARTOFMONTH, ENDOFMONTH және т.б. көптеген басқалары) жұмысы үшін қажетті күнтізбені CALENDARAUTO және CALENDAR функциялары негізінде құру (күнтізбені дәлірек баптау үшін)
— Өлшемдерді, есептелетін бағандарды аналитикалық есептерде пайдалану. Өлшемдерді пайдалану бойынша ұсынымдар. Айнымалыларды пайдалана отырып, күрделі DAX формулаларын құру (CALCULATE, FILTER, SUMX, AVERAGEX, ALL, ALLEXCEPT, SWITCH және т.б.)

5. Тиісті визуализацияларды анықтау және іске асыру
— Power BI-дегі әртүрлі визуализация түрлерінің шолуы: кесте, матрица, график, гистограмма, диаграмма және т.б. Power BI қосымшалар дүкенінен визуализациялар қосу. Кесінділер

6. Ақпаратты өңдеу және басқарушылық шешімдерді жылдам қабылдау үшін DASHBOARD-ты практикалық құру

7. Дерекқорларға қосылу теориясы

8. Дерекқорды талдауға арналған құрылымдалған сұрауларды құру

SQL-де деректерді өңдеу

1. Реляциялық ДҚБЖ ұғымы
— SQL-мен жұмыс істеуге арналған танымал қызметтер
— SQL сұрауларының түрлері
— SQL сұрауларының құрылымы
— Дерекқор құру принциптері
— SQL сұрау тілі

2. SQL-де кестелермен және дерекқорлармен жұмыс
— Кестелерді құру және өңдеу. Деректер түрлері
— Дерекқорлар. Деректер түрлері. Агрегаттық функциялар
— Деректерді топтау. Агрегаттық формулалар
— Деректермен жұмыс — сүзу, іріктеу, өңдеу және т.б.
— Деректерді оқу — кесте жолдарын толтыру
— Өңдеу нысаны. «Қосылу, қызмет» бетбелгісі

3. SQL-дегі сұраулар синтаксисі
— Сұрау ұғымы және оның құрамын талдау
— SQL сұраулары (ALTER TABLE, DROP TABLE, DELETE, UPDATE, SELECT, INSERT, CREATE TABLE, SELECT ALL/DISTINCT, FROM, WHERE, GROUP BY, HEAVING, LIKE, BETWEEN, IN, NOT IN, sum, min, max, coun және т.б.

4. Single-ROW функциялары
— Функциялардың түрлері және ДҚ-мен жұмыс (LOWER, UPPER, INITCAP, CONCAT, LENGTH, LPAD және RPAD, TRIM
— CONVERSION функцияларына кіріспе

JOIN Біріктіру функциялары