Gặp gỡ Nguyễn Công Khỏa: Chuyên gia DevOps và chuyên gia thu thập dữ liệu với hơn 14 năm kinh nghiệm

Giới thiệu

Tại Glinteco, sự đổi mới và chuyên môn luôn song hành. Hôm nay, chúng ta hãy cùng tìm hiểu về Nguyễn Công Khoá, một Kỹ sư DevOps đa năng và chuyên gia thu thập dữ liệu chuyên nghiệp với hơn 14 năm kinh nghiệm. Được biết đến với tính cách chủ động, tỉ mỉ và chăm chỉ, Khoá không chỉ là bậc thầy về DevOps mà còn là chuyên gia lão luyện trong lĩnh vực thu thập dữ liệu, với nhiều thủ thuật để vượt qua việc phát hiện bot và các thử thách reCAPTCHA.

Bộ kỹ năng đa dạng

Tốt nghiệp Đại học Bách khoa Hà Nội với bằng chuyên ngành Toán ứng dụng và Tin học, Khoá đã có một sự nghiệp phong phú trải rộng qua DevOps, kiến trúc hệ thống và thu thập dữ liệu. Kinh nghiệm đa dạng đã biến anh thành một người giải quyết vấn đề xuất sắc, luôn thích thú khi giải quyết các thách thức kỹ thuật phức tạp.

Những điểm nổi bật trong chuyên môn của Khoá
 

• Thủ thuật DevOps: Thành thạo các công cụ như Docker, Ansible, Terraform, và GitLab.Github CI/CD để triển khai hệ thống hiệu quả.
   
• AWS và Dịch vụ Cloud: Có kỹ năng xây dựng pipeline, API và dịch vụ trong môi trường cloud.
   
• Chuyên gia thu thập dữ liệu: Phát triển các kỹ thuật tiên tiến để vượt qua các cơ chế phát hiện bot như reCAPTCHA, đảm bảo việc trích xuất dữ liệu hiệu quả và không bị phát hiện.

Đóng góp cho Glinteco

Kể từ khi gia nhập Glinteco, Khoá đã đóng vai trò quan trọng trong việc phát triển cả cơ sở hạ tầng DevOps và khả năng thu thập dữ liệu của chúng tôi. Sự hiểu biết sâu sắc về hệ thống backend và tư duy chủ động của anh đã rất hữu ích trong việc cung cấp các giải pháp mạnh mẽ cho khách hàng.

Thành tựu đáng chú ý tại Glinteco
 

• DSTax.com: Thiết kế và triển khai nền tảng tích hợp thuế dựa trên microservices, tối ưu hiệu suất với Kubernetes và Prometheus.
   
• Endeverus.com: Thiết kế pipeline CI/CD để triển khai tính năng mượt mà và tăng cường độ tin cậy của hệ thống. Xây dựng hệ thống tự động mở rộng Celery Worker và tích hợp ghi nhật ký với Datadog.
   
• STLPro.com: Thiết kế và triển khai các bot tiên tiến sử dụng Playwright, Selenium và Puppeteer để tự động hóa các tác vụ như tự động mua hàng, theo dõi vận chuyển, thực hiện đơn hàng và thông báo qua email trong cửa hàng Amazon.
   
• Hệ thống theo dõi Matomo: Thiết lập hệ thống theo dõi Matomo có khả năng mở rộng bằng Docker và Nginx, tự động mở rộng từ 1 đến 4 ứng dụng theo dõi web để xử lý 50 triệu hành động mỗi tháng. Cũng cấu hình GitHub CI/CD để triển khai tự động.
   
• Chuyên môn thu thập dữ liệu: Triển khai các chiến lược tinh vi để vượt qua reCAPTCHA và phát hiện bot cho các dự án yêu cầu thu thập dữ liệu quy mô lớn.

Mẹo hay từ Khoá: Tránh bị phát hiện là bot

Kinh nghiệm của Khoá trong việc thu thập dữ liệu đã trang bị cho anh những chiến lược tiên tiến để vượt qua những thách thức như phát hiện bot và reCAPTCHA. Dưới đây là một vài hiểu biết mà anh thường chia sẻ:
 

1. Luân phiên User-Agent động: Ngăn chặn việc phát hiện bằng cách bắt chước các thiết bị và trình duyệt khác nhau.
    
2. Quản lý Proxy: Sử dụng proxy luân phiên để phân phối các yêu cầu trên nhiều IP.
    
3. Trình duyệt không đầu: Tận dụng các công cụ như Selenium và Playwright để mô phỏng các tương tác giống như con người.
    
4. Cơ chế giải mã ngược: Áp dụng đoạn mã hacky để vượt qua các cơ chế CAPTCHA nâng cao.
    
5. Nhận thức về giới hạn tốc độ: Giữ tốc độ yêu cầu phù hợp với ngưỡng chấp nhận được để tránh kích hoạt cơ chế phòng vệ bot.

Con người đằng sau chuyên môn

Kỹ năng kỹ thuật của Khoá được bổ sung bởi những đặc điểm tính cách nổi bật: linh hoạt, trách nhiệm và trung thực. Cách tiếp cận tỉ mỉ của anh đảm bảo rằng mọi khía cạnh của dự án đều được tối ưu, trong khi tư duy chủ động thúc đẩy sự đổi mới trên diện rộng.

Kết luận

Chuyên môn kép về DevOps và thu thập dữ liệu của Nguyễn Công Khoá khiến anh trở thành một thành viên độc đáo và vô cùng quý giá của đội ngũ Glinteco. Cho dù đó là việc triển khai các hệ thống có khả năng mở rộng hay giải quyết các thách thức reCAPTCHA, kỹ năng và sự tận tâm của Khoá đã giúp anh nổi bật như một người lãnh đạo trong lĩnh vực của mình.

Tuyển dụng chuyên gia devop, quản trị viên chuyên nghiệp - Lên lịch gọi điện với chúng tôi