2019

Nội dung

CTO Ebay có câu nói kinh điển: “Nếu bạn không chia được, bạn không thể mở rộng được”. Mở rộng hệ thống là yếu tố quyết định đối với các hệ thống lớn. Khi mở rộng hệ thống, thách thức lớn nhất là tích hợp để đảm bảo các thành phần hoạt động ổn định, dễ dàng mở rộng thêm các thành phần mới. Event Based Architecture là kiến trúc hệ thống xây dựng xoay quanh mô hình Event. Khác với mô hình service thông thường, các đường kết nối là các giao tiếp http/tcp đồng bộ, mô hình Event Based nhấn mạnh vào quá trình xử lý bất đồng bộ, tất cả các thành phần của hệ thống định nghĩa và publish event vào một event bus tập trung, qua đó các thành phần khác của hệ thống có thể chủ động consume, xử lý và xây dựng các nghiệp vụ của mình. Bằng cách đó, các thành phần của hệ thống sẽ hoạt động độc lập, dễ dàng thêm bớt các module mới, với các nghiệp vụ mới. Tại TIKI, quá trình xây dựng Event Based Architecture diễn ra như một sự tiến hoá tự nhiên của việc giải quyết các bài toán tích hợp. Bắt đầu từ 06/2017, TIKI bắt đầu tập trung các event thay đổi dữ liệu vào Kafka - một Event Bus tập trung cho toàn bộ hệ thống. Tiếp theo các module lớn như hệ thống quản lý sản phẩm Catalog được xây dựng theo mô hình Event Sourcing, publish tất cả các event có đánh version vào Event Bus. Tất cả các event này được publish đảm bảo thứ tự, persistent và với độ trễ chỉ milliseconds. Theo thời gian, các event được publish vào ngày càng nhiều ngữ nghĩa, dựa trên đó TIKI không chỉ giải quyết triệt để vấn đề tích hợp, mà còn xây dựng nên nhiều ứng dụng phức tạp khác để mở rộng hệ thống, handle lượng truy cập lớn và nhiều nghiệp vụ phức tạp mới mà kiến trúc truyền thống rất khó, hoặc thậm chí không thể giải quyết được tốt. Các giải pháp và công nghệ TIKI sử dụng: Kiến trúc tích hợp hệ thống, Event Bus: Kafka, Capture Data Changes: Kafka Connect, Apollo (in house development), Stream Technology: Kafka Stream, Dataflow, Flink…Các kết quả: Tích hợp ổn định toàn bộ hệ thống, với hàng triệu thay đổi dữ liệu mỗi ngày, Hệ thống đồng bộ dữ liệu sản phẩm với độ lag millisecond, Hệ thống API get thông tin sản phẩm handle hàng ngàn truy cập đồng thời, với response time milliseconds, Xây dựng hệ thống data warehouse cung cấp báo cáo near real time.

Nội dung

In this panel discussion, the speakers will discuss about their approaches, experiences, and the challenges they have encountered when applying DevOps principles in real-world projects to deliver the most effective software development, including but not limited to: Independent delivery teams/ Small code changes which cannot break the system/Daily deployments/ Feature toggles/ Short GIT branch lifetime/ Full-stack developers who can also do QA/ Customer focus when making decisions. Moreover, the speaker would also discuss about micro-service best practices, raise interesting techniques and tools related to Data and Containers, and possibly AWS services that assist with DevOps (e.g. CloudFormation, Code Pipeline).

Nội dung

Lessons learned during our long journey to brainstorm, implement and bring TikiNow (fast delivery) service to the next level. They might benefit your next product as well.

Nội dung

Trong buổi tham luận này, tác giả sẽ trình bày hai ứng dụng machine learning/deep learning cho việc chuyển đổi ảnh (image to image translation), tiêu biểu là bóc tách các kết nối của tế bào thần kinh trong não bộ để hiểu thêm được trí nhớ và giấc mơ được mã hoá như thế nào trong các giao tiếp này, và cách khôi phục nhanh từ dữ liệu cộng hưởng từ MRI bị thiếu sử dụng mạng tự sinh đối ngẫu.