Jobs / 24h Jobs / Jobs IT - Software / IT at Ho Chi Minh City /

Recruitment DATA CRAWLER STAFF at Ho Chi Minh City - WEBIFY GROUP

12,000,000 - 18,000,000 VND 0 VND

Recruitment DATA CRAWLER STAFF at Ho Chi Minh City - WEBIFY GROUP

12,000,000 - 18,000,000 VND

Apply job

Thông tin việc làm
Thông tin công ty

Recruitment Information

Level

Employees

Deadline

06/04/2025

Amount of Vacancies

1 people

Gender

No gender requirement

Experiences

From 1 to 2 year

Degree

University

Workplace

Ho Chi Minh City

Industry

IT - Software / IT - IT Software

Job Description

1. Professional Scraping System Development

Technical Requirements:

System Architecture:

Design cross-platform Python crawling scripts
Build scalable systems
Develop parallel crawling solutions
Manage large, multi-threaded data streams

Technologies:

Scrapy, BeautifulSoup
Selenium
Asyncio, Multiprocessing
Proxy management
IP rotation techniques

2. Data Processing and Normalization

Processing Methods:

Develop API data cleaning processes
Data transformation algorithms
Integrity checks
Remove noisy data

Tools:

Pandas
Data validation techniques
Machine Learning preprocessing

3. Database Management

Specialized Skills:

Advanced SQL:

Complex queries
Performance optimization

4. Monitoring & Optimization

Strategy:

Manage scraping system operations.
Track scraping performance
Challenge handling:
IP blocking
Speed limiting
CAPTCHA
PROFESSIONAL REQUIREMENTS

Education

Bachelor's degree (GPA > 3.0)
Major:
Data science
Computer engineering
Data related fields
English: TOEIC > 700 of IELTS >5.5

Technical Skills

Python Ecosystem

Asyncio, Multiprocessing
Data cleaning techniques
Machine Learning preprocessing
Advanced error handling

Database & Big Data

SQL (Intermediate to Advanced)
NoSQL database management
PySpark
Data warehousing

In-depth Experience

Minimum 1-2 years
Project implementation:
Web scraping
Automatic data processing
Big data crawling

SOFT SKILLS

System analysis

Problem solving

Independent & team working

Time management

Logical thinking

NICE TO HAVE EXPERIENCES

Big Data experience

Data pipeline design

Working with diverse APIs

Professional certifications

Creativity and initiative in active ideas

Bắt đầu vào năm 2018, nhóm của chúng tôi chỉ có ba thành viên để giúp phát triển dịch vụ SEO doanh nghiệp này. Nhìn lại, chúng tôi không làm gì ngoài việc đầu tư đam mê và trau dồi kiến thức nhiều nhất có thể. Sau một vài dự án thành công là kết quả của những ngày và tháng dài gian khổ, chúng tôi tin rằng chúng tôi có thể giúp nhiều doanh nghiệp thành công hơn trong tương lai. Mục tiêu của chúng tôi là trở thành một đội trẻ trung và nhiệt huyết nhất với những kỹ năng đặc biệt mà không ai có thể bỏ qua! Cho đến nay, nhiều thành viên hơn đã được chào đón vào Webify, cả trong văn phòng và làm việc từ xa. Tất cả chúng tôi đã làm việc cùng nhau để tạo ra một ngôi nhà cho bất kỳ ai có chung sứ mệnh và tầm nhìn của chúng tôi. [Vietnamese] Bắt đầu vào năm 2018, nhóm của chúng tôi chỉ có ba thành viên để giúp phát triển dịch vụ SEO doanh nghiệp này. Nhìn lại, chúng tôi không làm gì ngoài việc đầu tư đam mê và trau dồi kiến thức nhiều nhất có thể. Sau một vài dự án thành công là kết quả của những ngày và tháng dài gian khổ, chúng tôi tin rằng chúng tôi có thể giúp nhiều doanh nghiệp thành công hơn trong tương lai. Mục tiêu của chúng tôi là trở thành một đội trẻ trung và nhiệt huyết nhất với những kỹ năng đặc biệt mà không ai có thể bỏ qua! Cho đến nay, nhiều thành viên hơn đã được chào đón vào Webify, cả trong văn phòng và làm việc từ xa. Tất cả chúng tôi đã làm việc cùng nhau để tạo ra một ngôi nhà cho bất kỳ ai có chung sứ mệnh và tầm nhìn của chúng tôi.

Xem thêm