Big Data Pipeline Master; Công cụ và kỹ thuật để đạt được thành công
Các bạn sẽ học về 4 giai đoạn của quá trình xử lý dữ liệu lớn [Thu thập dữ liệu ▶ Lưu trữ dữ liệu ▶ Phân tích dữ liệu ▶ Biểu diễn] theo phương pháp codelab kết hợp lý thuyết 30% + thực hành 70% một cách thú vị và có hệ thống hơn 🧑🏻🏫
Học theo cách thực hành, thực hành Làm chủ quy trình dữ liệu lớn!
lời cảm ơn đặc biệt đến các học sinh đáng yêu của tôi 👨🏻🎓* trân trọng, tin rằng bạn sẽ làm tốt ở bất cứ đâu👩🏻🎓
Lý thuyết và thực hành xử lý dữ liệu Cốt lõi của đường ống dữ liệu lớn !
Xin chào, tôi là J.PHIL 🙇🏻 Tận dụng cơ hội tuyệt vời này, Inflearn sẽ cung cấp bài giảng đầu tiên mang tên 'Lý thuyết và thực hành xử lý dữ liệu' cho những người mới bắt đầu quan tâm đến việc xây dựng và phân tích các hệ thống dữ liệu lớn.
Từ khóa trong nháy mắt
Làm chủ xử lý dữ liệu lớn: Công cụ và kỹ thuật để thành công
Hệ thống phân tán
Tia lửa Apache
HDFS
Tìm kiếm đàn hồi
Nhật ký
Kibana
Trình thu thập thông tin
Cạo
Selen
AWS S3
Node.js
Người lái tàu
Tại sao chúng ta tham gia khóa học này? Tôi có nên nghe không? 📚
Những tiến bộ nhanh chóng về công nghệ trong thập kỷ qua đã tạo ra nhiều nền tảng và dịch vụ khác nhau, cho phép nhiều đối tượng khách hàng khác nhau tận hưởng cuộc sống chất lượng cao. Trong số lượng dữ liệu đang được tạo ra hàng loạt, nhiều công ty đang khám phá và trích xuất dữ liệu có giá trị và thiết kế Mô hình kinh doanh (BM) để mang lại cho chúng ta cuộc sống có giá trị hơn.
Trong môi trường này, các kỹ sư👷🏻 của chúng ta cần chuẩn bị những gì và như thế nào nếu họ “dám dự đoán và ứng phó với tương lai”? Bạn cần phát triển khả năng quản lý và xử lý dữ liệu . Ngược lại, nếu bạn có thể xử lý dữ liệu tốt và diễn đạt nó tốt, bạn có thể đóng góp gì cho ngành?
Quyết định dựa trên dữ liệu
💡 Phân tích dữ liệu lớn cho phép các tổ chức đưa ra quyết định dựa trên dữ liệu, từ đó cải thiện kết quả kinh doanh.
Tăng hiệu quả và năng suất
💡 Phân tích dữ liệu lớn có thể giúp các tổ chức hợp lý hóa hoạt động, giảm chi phí và tăng năng suất.
Sự đổi mới
💡 Phân tích dữ liệu lớn có thể thúc đẩy sự đổi mới bằng cách cho phép các công ty phát triển sản phẩm và dịch vụ mới, cải thiện sản phẩm và dịch vụ hiện có và tạo ra các mô hình kinh doanh mới.
Vậy bài giảng này thế nào? Nó có được sáng tác không? 📑
📝
Kinh nghiệm viết bài báo cho Hội nghị Data Top-Tier
👨🏻💼
Kinh nghiệm quý báu trong việc xây dựng và phân tích các hệ thống dữ liệu lớn có được trong lĩnh vực này
🧑🏻🏫
Kinh nghiệm lâu năm trong việc bồi dưỡng sinh viên giỏi tại trường đại học
Dựa trên kinh nghiệm quý báu này, tôi đã xây dựng bài giảng thành một khóa học rộng nhưng nhiều thông tin kéo dài 14 tuần hoặc hơn về bốn giai đoạn của quy trình dữ liệu lớn để làm điểm khởi đầu tốt cho "bất kỳ ai quan tâm đến lĩnh vực này" 📚
Bạn sẽ tìm hiểu về thu thập dữ liệu ▶ lưu trữ dữ liệu ▶ phân tích dữ liệu ▶ biểu diễn dữ liệu bằng các công nghệ được giới thiệu ở trên theo định dạng phòng thí nghiệm mã hóa với 30% lý thuyết và 70% thực hành . Trong khoảng 6 năm, tôi đã nhận được phản hồi có giá trị từ những học viên xuất sắc của mình 💌 và suy ngẫm về những phản hồi đó để tạo ra các bài giảng dễ hiểu và chất lượng cao nhất có thể, vì vậy tôi chắc chắn rằng chúng sẽ rất hữu ích cho người mới bắt đầu.
à! Để bạn tham khảo, tài liệu bài giảng được viết bằng tiếng Anh nhiều nhất có thể để giúp bạn tìm kiếm nhiều tài liệu tham khảo khác nhau trong tương lai hoặc giúp bạn thăng tiến trong lĩnh vực nghiên cứu hoặc một công ty tốt hơn thông qua cơ hội này 🧗🏻♀️
Chúng ta học được gì ? 🧑🏻🏫
Dựa trên 4 bước xử lý dữ liệu lớn ở trên, chương trình giảng dạy được cấu trúc như sau. (Tham khảo video miễn phí tuần 1)
Bạn có quan tâm đến đường ống dữ liệu lớn không? Bất kỳ ai cũng có thể tham gia lớp học 🧑🏻🎓
Bất kỳ ai biết Python, lệnh Linux và kiến thức cơ bản về cơ sở dữ liệu đều có thể tham gia khóa học.
[Khuyến mãi] Chúng tôi hỗ trợ chi phí giảng dạy cho sinh viên và người tìm việc 💪
Dành cho sinh viên hoặc người tìm việc không có thu nhậpNó cung cấp mức giảm giá khoảng 20% . Vui lòng nộp đơn qua liên kết bên dưới để liên lạc thuận tiện. Để thực hiện việc này, vui lòng đảm bảo để lại thông tin đăng nhập trong tab yêu cầu trước khi đăng ký khóa học, chẳng hạn như "${Self-introduction} student/job seeker [promotion] applied" :)
[Khuyến mãi] Kỷ niệm +200 học viên, kéo dài thời gian khuyến mãi💪
Chúng tôi đang cung cấp chương trình khuyến mãi gia hạn miễn phí 3 tháng cho sinh viên mới, ngoại trừ những sinh viên đã nhận được quyền lợi khuyến mãi +100 người. Vui lòng đăng ký qua liên kết bên dưới :)
Nếu bạn chuẩn bị một môi trường thoải mái như hình dưới đây, bạn sẽ có thể theo học lớp học. (Cấu hình cụm thực tế sẽ được trình bày trong bài giảng lý thuyết [Người mới bắt đầu] hiện đang được triển khai 🙏🏻)
Hệ điều hành: Ubuntu hoặc Linux
Thông số kỹ thuật máy
Aws t2.medium 2 Core 4GB // ec2 free.tier có thể tham dự
Bạn có thể tham dự với hệ điều hành trên bằng cách sử dụng Virtualbox
[Khóa học DOCKER dành cho người mới bắt đầu] Sự kiện khuyến mãi 😄
Đối với những ai muốn tìm hiểu thêm về Docker, tôi thực sự khuyên bạn nên đọc cuốn [Làm chủ Docker và Dockerizing cho người mới bắt đầu]. [Big Data Pipeline Master] Chúng tôi đang có chương trình khuyến mãi* dành cho những người đã tham gia khóa học.
[Gói xây dựng cụm dữ liệu lớn] Sự kiện ra mắt khuyến mãi 🎓
Được khuyến nghị cho những ai muốn xây dựng cụm dữ liệu lớn có tính khả dụng cao bằng cách sử dụng phòng thí nghiệm mã vững chắc. Sau khi nhấp vào liên kết bài giảng ở bên cạnh, vui lòng để lại tin nhắn trong phần [ Yêu cầu trước khóa học ] với nội dung : “Tôi muốn đăng ký ID/email/thăng chức”.
Ai đã tạo ra khóa học này Giới thiệu J.PHIL ✒️
Khuyến nghị cho những người này
Khóa học này dành cho ai?
3,4 năm sinh viên đại học muốn học khóa học hệ thống xử lý dữ liệu lớn
Nhà phát triển không chuyên quan tâm đến sự nghiệp khoa học dữ liệu
Nhân viên phát triển cấp junior quan tâm đến việc thu thập, lưu trữ, phân tích và biểu diễn dữ liệu
Ứng viên chuẩn bị xin việc trước cuộc phỏng vấn về công việc dữ liệu lớn
Cần biết trước khi bắt đầu?
Lập trình cơ bản Python
Kiến thức cơ bản về lệnh Linux
Kiến thức cơ bản về cơ sở dữ liệu
Xin chào Đây là
451
Học viên
40
Đánh giá
50
Trả lời
4.9
Xếp hạng
2
Các khóa học
안녕하세요 J.PHIL 입니다 🧑🏻🎓
첫번째 강의로 [ 빅데이터 시스템 구축 및 분석에 관심있는 입문자 ] 를 위해 "Mastering Big Data Processing: Tools and Techniques for Success" 강의를 오픈 하였습니다.
'수업 및 프로필' 자세한 사항들은 수업 상세 페이지에 잘 작성했으니 참고 부탁드립니다 🙏🏻
Hello teacher!
I graduated from business administration and wanted to work on the field, so I have been studying development for over a year. I hear the words big data and big data processing a lot every day around me, so I want to know, but it is burdensome... Through this lecture, I covered each cycle in detail, so I think I learned a lot about data pipelines.
First of all, since the time given was not much, I listened as much as I could, but I will review it during the remaining period and proceed with my own project based on it~~~!!! Please give me a lot of advice. Thank you~~!!
Hello Mac,
As a non-major developer, you must have had a hard time at first, but thank you for taking the class despite the hardships. Thanks to you, I will also be inspired and work even harder to create better content. I hope that Mac will become a better developer in the future and show even more value.
Thank you.
Big data was something I had only vaguely felt, but after listening to the lecture, I began to understand the concept and imagine how to use it.
The instructor has good diction and the lecture curriculum flows well in sequence.
Thank you for the great lecture!
Hello, Developer Dev,
I am glad that you found it helpful as I have organized and lectured on the content that I have meaningfully experienced.
Please listen comfortably when you review later and let me know if you have any questions.
I am currently running an interior startup! In the past, I didn't need to know about server operation and data analysis, but recently, I thought I needed to know about the perspective and direction of data operation, so I happened to listen to it on the recommendation of an acquaintance. It is very helpful because the lecturer considers the other person's perspective. HDFS may be a big hurdle for me, so I am taking other lectures first. I should recommend it to my acquaintances. I hope you continue to launch good lectures and your business goes well!!!!!
Hello, Mr. Commania CEO,
Thank you for coming all this way to listen to my lecture. I know that you must have a lot to worry about while running a company, but it is not easy to take an interest in designing pipelines and get into practice. I hope we can get through this difficult time together. If there is anything I can help you with, please feel free to contact me or post a question here. Fighting!
I took this course because I had a vague curiosity about big data while working as a developer.
While taking the course, I was able to understand it more easily because it didn't just explain the theory, but also gave a general background lecture. It was also great because it led practical exercises in detail in between!!
If you still don't know what big data is and are starting out with a vague curiosity as a developer, I think this course will be very helpful!
Hello TY,
Thank you for your valuable feedback. I hope you will take the remaining lectures diligently and gain a lot from them! I will come back with an even better image in the future.
Instructor. Thank you for the fun lecture.
I haven't seen Inflearn lectures lately, but I'm watching the current lecture more interestingly than Mid.
I think it's a lecture that condenses the know-how that was packed into a small amount of time as much as possible.
If you make a more in-depth lecture next time (project-oriented, HDFS/Spark, AWS data analytics, etc.) it would be perfect.
The current lecture was also very helpful. I thought it would be boring, but it's fun.
I recommend this lecture to developers who want to know how to utilize the overall data platform.
I don't usually write articles like this, but I'm writing this because it was helpful.
Personally, one thing that's a bit disappointing is that the period is 4 months... I'm very disappointed that I can't watch it again when I want to. (I wonder if there's an extension event, Instructor Nam. -_-;;;)
I watch it in detail once and watch it again a few months later.
That way, it's imprinted in my head and I don't forget it.
Hello jason.king,
Thank you for your valuable and detailed course review. Since you said it was more fun than American dramas, I remember studying English on my own ten years ago by watching How I Met Your Mother.
The reason why it was set to 4 months was because it was initially set to one semester at the time of production, so that students could focus and listen. We are running a partial extension promotion for those who are diligently taking the lecture, so please let us know when the deadline is approaching or has passed.
Thank you for your feedback, I am glad that the lecture will be more widely known, and I hope you have a warm and enjoyable weekend.