2017微軟 MVP 資料實踐技術活動日(北京站)

2022-07-03 12:09:09 字數 820 閱讀 2226

power bi | 互動式資料視覺化 bi 工具

excel bi :無所不能的業務資料分析利器

excel +powerbi=excel bi

tensorflow實戰驗證碼識別

李奇

sql server :

對於oltp來說.對應的資料應該是價值密度高的資料

sql server 用於nosql 時序資料 全文索引,訊息資料,圖 層級資料則有很多額外開銷

關聯式資料庫不適用schema頻繁變更的場景

讀遠遠大於寫的操作或昻貴操作就該放入快取(關係資料acid特性會給讀操作帶來大量額外的開銷)

不易scale out

全文索引: elasticsearch

nosql :mongodb

時序資料庫:

influxdb

時序資料庫druid

graphlite

prometheus

k-v: redis memcached

訊息佇列:

apache kafka:下一代分布式訊息系統

rabbitmq是乙個在amqp基礎上完成的,可復用的企業訊息系統

圖:neo4j

寬列:hbase是乙個分布式的、面向列的開源資料庫

apache cassandra 是一套開源分布式 key-value 儲存系統

zabbix:通用監控軟體

監控方案:

powershell ----->全文索引ek-----> grafana

powershell ----->influxdb ------->grafana

大資料實踐HIVE詳解

一.hive的事務 1 什麼是事務 要知道hive的事務,首先要知道什麼是transaction 事務 事務就是一組單元化操作,這些操作要麼都執行,要麼都不執行,是乙個不可分割的工作單位。事務有四大特性 a c i d 原子性 一致性 隔離性 永續性 atomicity 不可再分割的工作單位,事務中...

MySQL 批量更新資料 實踐

1.應用場景 在測試環境需要做一些的資料的批量更新 在 實現中,並不建議這麼做,因為可能會有問題,比如更新某個資料時失敗,會導致後面的更新操作都失敗 更好的方法tbd 2.學習 操作 最簡單的方式 sql語句 如 update user set if 男 女 男 或者update user set ...

深圳 廣州 微軟SQL技術沙龍分享會(MVP

深圳 廣州 新一期俱樂部活動報名開始,這次是廣深地區sql server 技術沙龍分享會 mvp sql server作為乙個資料平台,不管是sql server 2017 on linux 還是把一門開源r語言融入其最賺錢的旗艦商業資料庫,微軟已經決定,下一代的由雲驅動的計算將以資料驅動的智慧型為...