Lợi ích của học viên


  • Tặng miễn phí 01 tài khoản trên Hệ thống quản lý học tập của MCI
  • Được support từ đội ngũ IT và CTO của MCI về công nghệ, dữ liệu lớn và hàng trăm job trên Workspace
  • Tham gia cộng đồng học viên sôi động, chia sẻ và hợp tác cùng hàng ngàn chuyên gia.
  • Nhận chứng chỉ sau khóa học – Ghi nhận kỹ năng và kiến thức đã học.
  • Miễn phí học lại không giới hạn – Luôn cập nhật với xu hướng mới nhất.
DWDL level 1

Big Data with Hadoop and Spark

Đây là khóa học Data Lake và Data Warehouse từ cơ bản, giúp cho học viên xây dựng nền tảng tư duy dữ liệu, nắm vững các công cụ và công nghệ quan trọng trong việc xử lý, quản lý và phân tích dữ liệu lớn, đồng thời phát triển kỹ năng thực hành cần thiết để triển khai các giải pháp dữ liệu hiệu quả. Hình thức đào tạo online và offline trong thời lượng 9 buổi học, mỗi buổi học từ 2.5 - 3 tiếng. Tên khóa học: Big Data with Hadoop and Spark (DWDL Level 1) Cơ hội nghề nghiệp nổi bật sau khi tốt nghiệp chương trình đào tạo này là các vị trí hot sau: • Data Analyst • Data Engineer • SQL Developer • ETL Developer • Data Analyst • Big Data Engineer • Cloud Data Engineer • BI Developer • Machine Learning Engineer

4.9 (387)

Đối tượng

Các bạn đang học tập và làm việc trong lĩnh vực Data, Software Engineer, có định hướng chuyển sang các vị trí Data Engineer

Yêu cầu đầu vào

Khóa học cho người mới bắt đầu

Bạn sẽ học những gì

• Học viên có thể thiết lập và sử dụng các nền tảng và phần mềm cần thiết cho xử lý dữ liệu lớn. • Hiểu và áp dụng các khái niệm cơ bản về Hadoop, HDFS và PySpark. • Sử dụng Python và Hadoop để truy xuất và quản lý dữ liệu. • Thiết lập và làm việc với cụm PySpark, thực hiện streaming dữ liệu với Spark. • Hiểu và triển khai Apache Kafka cho xử lý dữ liệu streaming. • Thực hiện quy trình ETL (Extract, Transform, Load) và áp dụng vào các tình huống thực tế. • Làm việc trên các trường hợp dữ liệu cụ thể, giải quyết các vấn đề thực tế. • Hoàn thành dự án cuối khóa, thể hiện khả năng triển khai luồng công việc dữ liệu hoàn chỉnh.

Nội dung khóa học

    Chủ đề:

    Setup các platform

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Setup các phần mềm như Python, SQL...
    - Giới thiệu về khóa học và chương trình học

    Case Study:

    2023-05-22 18:57:57.159958

    Chủ đề:

    Sử dụng Python/Hadoop cho việc truy xuất các nguồn dữ liệu

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Truy xuất dữ liệu theo các dạng số liệu liên tục và số liệu rời rạc
    - Cách xử lý số liệu trên Python

    Case Study:

    2023-05-22 18:57:57.159958

    Chủ đề:

    Hadoop và HDFS

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Giới thiệu về Hadoop
    - Ứng dụng Hadoop trong việc lấy và lưu trữ dữ liệu

    Case Study:

    2023-05-22 18:57:57.159958

    Chủ đề:

    PySpark và PySpark Cluster setup

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Giới thiệu về PySpark
    - Ứng dụng PySpark trong việc xử lý dữ liệu
    - Ứng dụng PySpark Cluster trong các trường hợp

    Case Study:

    2023-05-22 18:57:57.159958

    Chủ đề:

    Streaming dữ liệu với Spark

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Ứng dụng xử lý dữ liệu streaming

    Case Study:

    2023-05-22 18:57:57.159958

    Chủ đề:

    Kafka

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Khái niệm cơ bản về Kafka
    - Xử lý dòng dữ liệu thời gian thực
    - Am hiểu tính chất pub/sub và dữ liệu theo thời gian thực

    Case Study:

    2023-05-22 18:57:57.159958

    Chủ đề:

    ETL

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Sử dụng Python để thực hành quá trình ETL (Extract - Translate - Load) dữ liệu

    Case Study:

    2023-05-22 18:57:57.159958

    Chủ đề:

    ETL

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Sơ lược những trường hợp của ETL
    - ETL 2 lớp trước và sau Spark

    Case Study:

    2023-05-22 18:57:57.159958

    Chủ đề:

    Thực hành

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Xác định yêu cầu một bài toán cụ thể
    - Thực hiện các bước từ truy xuất dữ liệu thay đổi và chỉnh sửa giao tiếp dữ liệu và lưu trữ dữ liệu

    Case Study:

    2023-05-22 18:57:57.159958

    Chủ đề:

    Bài tập cuối khóa

    Mục tiêu:

    2023-05-22 18:58:23.245054

    Ứng dụng:

    - Bài tập lớn làm theo nhóm

    Case Study:

    2023-05-22 18:57:57.159958

Tại sao khóa học tại MCI phù hợp với bạn

1. Lộ trình khóa học thiết kế khoa học, theo quy trình làm việc thực tế giúp bạn tiếp thu và nắm chắc kiến thức theo trình tự khoa học 2. Giáo trình đào tạo theo chuẩn Quốc tế kết hợp giữa lý thuyết và thực hành qua các case study thực tế 3. 100% Giảng viên tại MCI là các chuyên gia tư vấn tại Big4 các tập đoàn lớn tại Việt Nam, có chứng chỉ đào tạo nghiên cứu quốc tế trong lĩnh vực lập trình và dữ liệu 4. Giảng viên hướng dẫn tận tay giúp bạn thành thạo Python, Power BI, SQL trong thời gian ngắn nhất 5. Cam kết chất lượng đào tạo, miễn phí học lại trọn đời nếu chưa nắm rõ kiến thức

Đội ngũ giảng viên


Do Duy Nam

1. Trình độ học vấn
Chuyên gia sở hữu Thạc sĩ Quản trị kinh doanh (MBA) từ Gloucestershire Business School (Vương quốc Anh). Chứng chỉ quốc tế bao gồm Microsoft Certified Excellence Solution Developer, IBM Certified Solution Expert, và Microsoft Certified: Data Analyst Associate (DA-100).

2. Kinh nghiệm làm việc
Hiện là Senior Data Specialist tại VNPAY, chuyên gia tham gia vào các bài toán dữ liệu lớn trong lĩnh vực thanh toán điện tử và tài chính. Trước đó, giảng viên là Giám đốc LiveZone Vietnam Consulting JSC, quản lý đội ngũ chuyên gia và triển khai thành công dự án Business Intelligence trị giá 1 triệu USD cho Công ty Lọc hóa dầu Bình Sơn (BSR). Thêm vào đó, chuyên gia còn có kinh nghiệm làm Senior Data Scientist tại ACOM Financial Institute (Nhật Bản) và Phó Giám đốc DSI Vietnam.

3. Kinh nghiệm giảng dạy
Giảng viên có phương pháp giảng dạy tập trung vào tư duy quản trị dựa trên dữ liệu và quản lý dự án tầm cỡ quốc tế. Học viên không chỉ học công cụ, mà còn học cách sử dụng dữ liệu để giải quyết bài toán kinh doanh và tối ưu hóa lợi nhuận. Các bài học từ kinh nghiệm thực chiến tại Việt Nam và Nhật Bản giúp học viên nhanh chóng thăng tiến trong nghề.

4. Văn bằng và hoạt động chuyên môn
Chuyên gia có kinh nghiệm sâu rộng trong Big Data & Data Science, thiết kế kiến trúc báo cáo quản trị thông minh và tối ưu hóa dữ liệu quy mô lớn. Kinh nghiệm từ việc quản trị các dự án dữ liệu lớn tại các tập đoàn quốc tế giúp chuyên gia mang lại giá trị thực tiễn cho học viên.

Các khóa học liên quan