1. Big data là gì? Nó khác gì với việc lưu giữ và phân tích data truyền thống ?

Nguồn gốc: 

Từ khi Internet, việc lưu trữ dữ liệu, thông tin là yêu cầu bắt buộc. Sự phát triển các công nghệ lưu trữ từ 1960s (khai sinh mạng Internet đầu tiên) là dùng file để lưu trữ thông tin.
Khi Google sinh ra, họ đã phát minh ra cách thức scale việc lựu trữ và xử lý ở mức cao hơn (mô hình Map-Reduce) để sắp xếp lại gần toàn bộ thông tin trên Internet .

Lịch sử Database Technology qua các thời kỳ khác nhau

Mốc thời gian 2002 đánh dấu cho bước nhảy vọt do Google tiên phong, cách mạng Dot Com phát triển

Định nghĩa:

Big Data là tập hợp dữ liệu lớn và phức tạp vượt mức đảm đương của những ứng dụng và công cụ truyền thống. Kích cỡ của Big Data đang từng ngày tăng lên, tính đến năm 2012 mỗi ngày có 2,5 exabyte dữ liệu được sinh ra (exabyte bằng 1 tỷ gigabyte), và đến năm 2025 IDC dự đoán số liệu này sẽ là 163 zettabyte (zettabyte bằng 1 nghìn exabyte)... Ví dụ cho tiềm năng khối dữ liệu lớn có thể kể đến kính thiên văn Sloan Digital Sky Survey đặt tại New Mexico (Mỹ) bắt đầu đi vào hoạt động hồi năm 2000; sau một vài tuần thiết bị này đã thu thập dữ liệu lớn hơn tổng lượng dữ liệu mà ngành thiên văn học từng thu thập trong quá khứ, và sau 10 năm tổng dung lượng đã đạt đến hơn 140 terabyte (terabyte bằng 1 nghìn gigabyte). Trong khi đó thống kê được công bố thời điểm cuối năm 2017 cho thấy Facebook đang có khoảng 2 tỷ người dùng thường xuyên và chỉ riêng ảnh cũng đã có khoảng 300 triệu bức được tải lên mỗi ngày. YouTube hay Google cũng phải lưu lại hết vô số các lượt truy vấn và video của người dùng cùng nhiều loại thông tin khác có liên quan. Nguồn dữ liệu cho Big Data tăng trưởng cực nhanh cũng một phần bởi sự gia tăng số lượng và giảm giá của các thiết bị cảm biến, thu nhận thông tin trong môi trường Internet vạn vật như điện thoại, camera, micro, chip bắt sóng... Điều quan trọng là ứng dụng của Big Data có mặt ở khắp mọi nơi trong các xu hướng công nghệ ảo hóa mới nhất. Ví dụ như trong một mảng sản xuất của cuộc cách mạng công nghiệp 4.0, những công nghệ mới như Big Data hay cloud computing sẽ giúp cảnh báo sớm sản phẩm lỗi, hỏng, từ đó phòng ngừa trước và gia tăng năng suất, chất lượng, nâng cao giá trị cạnh tranh. Để đưa ra nhận định hữu ích cho quy trình quản lý nhà máy công xưởng, dữ liệu cần được xử lý bằng các công cụ, các thuật toán để trích xuất ra được thông tin có ý nghĩa. Khi có vấn đề hiện hữu hoặc vô hình trong một công xưởng công nghiệp ví dụ như máy móc xuống cấp hoặc chi tiết hao mòn thì thuật toán phải có khả năng phát hiện và tìm cách giải quyết. Big Data còn ẩn chứa rất nhiều thông tin quý giá mà nếu trích xuất (data mining) thành công sẽ giúp rất nhiều cho việc nắm bắt xu thế trong kinh doanh, nghiên cứu khoa học, dự đoán để phòng tránh các dịch bệnh sắp phát sinh, phát hiện sớm tội phạm; dù tất nhiên mức độ ứng dụng thu thập dữ liệu cũng đặt ra nghi ngại về sự giám sát vượt quá giới hạn riêng tư của công dân trong thành phố thông minh.

Các nhóm người dùng chính trong chiến lược xây dựng Big Data trong tổ chức 

Nhóm manager có nhu cầu data nhiều nhất, trong nhóm bên trên là các data scientist làm công việc phân tích

Quy trình áp dụng:

 

 

   

Big Data và A.I kết hợp với nhau như thế nào ?

CLick vào hình để xem lớn, kiến trúc hệ thống Big Data và Machine Learning kết hợp lại với nhau

Các bài toán Big Data thực tế trong các ngành khác nhau

 

 

 

2. Những đầu sách nào là must-read dành cho beginner nếu muốn tìm hiểu về Big Data & data analytics ? 

.

• Dữ Liệu Lớn https://tiki.vn/du-lieu-lon-p1006403.html
• Marketing Theo Dữ Liệu Lớn https://tiki.vn/maketing-theo-du-lieu-lon-p477657.html
• Khoa Học Khám Phá - Dữ Liệu Lớn https://tiki.vn/khoa-hoc-kham-pha-du-lieu-lon-p392555.html
• PHÂN TÍCH DỮ LIỆU TINH GỌN : https://moingay1cuonsach.com.vn/2018/09/21/phan-tich-du-lieu-tinh-gon/

• AI Trong Cuộc Cách Mạng Công Nghệ 4.0: https://tiki.vn/ai-trong-cuoc-cach-mang-cong-nghe-4-0-p7348463.html
• Siêu Dự Báo https://tiki.vn/sieu-du-bao-p2316589.html

3. Ứng dụng của SQL/R/Python trên thực tế ở các mô hình business tại VN hiện tại là như nào ?

SQL 

là ngôn ngữ truy vấn dữ liệu bậc cao (viết code như tiếng Anh), nên khá dễ học
Do mục đích truy vấn dữ liệu nên nó cần 1 môi trường database như Access (rất cơ bản) đến MySQL (cho developer ) hay Google Big Query (trên Cloud Computing)
Học SQL miễn phí:
https://www.mikedane.com/databases/sql/
https://www.youtube.com/watch?v=HXV3zeQKqGY

R

• chuyên cho các chuyên gia nghiên cứu dữ liệu, Wiki Link vê lập trình R
• R là một công cụ rất mạnh cho học máy, thống kê và phân tích dữ liệu. Nó là một ngôn ngữ lập trình. Ngôn ngữ R là một platform-independent do đó chúng ta có thể sử dụng nó cho bất kỳ hệ điều hành nào. Việc cài đặt R cũng miễn phì vì thế chúng ta có thể sử dụng mà không cần phải mua bản quyền.
• Link đọc thêm: https://viblo.asia/p/r-la-gi-nhung-ly-do-ban-nen-bat-dau-hoc-ngon-ngu-lap-trinh-r-6J3ZgBRgKmB

Python

• Có nhiều tính năng tương tự R nhưng khả năng lập trình đa dạng cho nhiều bài toán hơn R, đặc biệt là Machine Learning 
• Học ở Đại Học Khoa học tự nhiên: https://csc.edu.vn/lap-trinh-va-csdl/lap-trinh-python-co-ban_143
• Học Online (khoá này của MIT, rất chất lượng ) Introduction to Computational Thinking and Data Science https://www.edx.org/course/introduction-to-computational-thinking-and-data-science-2

Big Data Solutions

Phân tích Khách hàng

Phân tích dữ liệu trong ngành hàng bán lẻ và tiêu dùng

Giải pháp Big data giúp hiểu Khách Hàng Mục Tiêu

Giải pháp Big data cho lĩnh vực Dịch Vụ Khách Hàng

DỊCH VỤ CUNG CẤP DỮ LIỆU KINH TẾ/TÀI CHÍNH

Phân tích con người

Dịch vụ và giải pháp Big Data cho lĩnh vực Y - Dược - Chăm Sóc Sức Khỏe

Dịch và và giải pháp Bigdata, Dịch vụ dữ liệu chính xác, tin cậy , đúng mục tiêu

Giải Pháp Big Data Tối ưu hóa quy trình kinh doanh

Data hàng trăm ngàn record về địa điểm, bệnh viện, trường học, công viên, sân bay, bến xe buýt,...

Giải pháp Big data cho lĩnh vực Ngân hàng

Giải pháp Big data trong Quản Lý Thiên Tai

Có thể bạn quan tâm:

Quản lý thu chi kinh doanh, tài chính cá nhân,... trên điện thoại và máy tính bảng.

Đầy đủ tính năng cần thiết và dễ dàng sử dụng. Dùng miễn phí nhưng an toàn tuyệt đối!

Quản lý thu chi kinh doanh.
Quản lý thu chi bán hàng online.
Quản lý thu chi cửa hàng.
Quản lý vay nợ, trả nợ.
Quản lý thanh khoản hợp đồng.
Quản lý tài chính cá nhân.
Quản lý tài chính hộ gia đình.
Quản lý tài khoản tiền mặt, tài khoản ngân hàng.
An toàn, không sợ bị lộ dữ liệu tài chính.
Dễ dàng thao tác mọi lúc mọi nơi.

* Ứng dụng của chúng tôi hoàn toàn miễn phí, chạy offline, trên ứng dụng chỉ có banner quảng cáo nhỏ của Google. Chúng tôi không thu thập dữ liệu người dùng, không cài cắm các phần mềm độc hại, không gây tốn pin,...

• Các nền tảng công nghệ hỗ trợ cho KHỞI NGHIỆP và CHUYỂN ĐỔI SỐ tiết kiệm, hiệu quả,...
• 5 lý do sở hữu một ứng dụng di động là cần thiết đối với doanh nghiệp vừa và nhỏ
• Hệ thống điều hành, tìm gọi và quản lý xe sử dụng công nghệ mới
• Khắc phục lỗi đăng nhập Windows 10, không thể login vào Windows 10
• Mạng xã hội là gì? Hiểu đầy đủ nhất về mạng xã hội
• IoT là gì? ứng dụng của IoT trong cuộc sống hiện đại
• Hướng dẫn cài ứng dụng, phần mềm cho Android trực tiếp bằng tập tin APK
• Ứng dụng bán hàng trên smartphone, smart TV, mạng xã hội...
• 100 Website đặt backlink miễn phí chất lượng
• Platform là gì?
• Cách đổi tên thiết bị Android
• Hệ thống order chuyên nghiệp cho quán ăn, cafe, nhà hàn
• Thông tin Du Lịch có ngay trong túi mọi người
• Phân hệ Quản lý Đội xe (Fleet Management) trong một hệ thống ERP thường có gì?
• Giải pháp cho dịch vụ bác sĩ gia đình
• Hệ thống chấm công từ xa thông minh SAttendance và hệ thống định vị STracking
• Phòng khám, bệnh viện thông minh
• Bác sĩ gia đình, chăm sóc sức khỏe tại nhà
• Kinh doanh vé xe, đặt vé xe, vé máy bay trên smartphone, Smart TV, Mạng xã hội
• Tìm bất động sản, tìm nhà đất, tìm phòng theo mô hình uber trên smartphone
• App hẹn lịch chăm sóc sắc đẹp, book vé spa, massage
• STracking ứng dụng chấm công nhân viên làm các công việc ngoài văn phòng công ty
• Nhà thuốc, dược trên smartphone và tablet
• VIP Finance Hệ Sinh Thái phân tích đánh giá cổ phiếu, trái phiếu, thị trường vàng, thị trường forex