Find Jobs
Hire Freelancers

Write a parallel processing program in Python

$30-250 USD

ปิดแล้ว
โพสต์ มากกว่า 6 ปีที่ผ่านมา

$30-250 USD

ชำระเงินเมื่อส่งงาน
Suppose I have a lot of zip files, and each zip file contains a folder which has tens of thousands files in it. I need to process those files in all of the zip files, and extract the content to save into a MongoDB collection. I need your help to write in Python, a parallel program which can open 4 or 5 threads (configurable) to process the files within the folder of a zip file. Requirements: 1. The threads work together to process one zip file. If one process finishes its task while the others are still working, it will be on hold and do nothing. 2. Only when all threads finish processing the files in a zip file, they will start working on a new zip file. The zip files should be processed in a sequential order. The file names of the zip files contain dates. 3. Each thread reads files, extracts the content, and saves it to Mongo. I have the code to do this work and I can share it with you. Please demonstrate you have the expertise to finish this work when you bid the project. I'll send you a few zip files once you are awarded with the project. thanks, Richard
รหัสโปรเจกต์: 15649127

เกี่ยวกับโปรเจกต์

16 ข้อเสนอ
โปรเจกต์ระยะไกล
ใช้งานอยู่ 6 ปีที่ผ่านมา

กำลังมองหาการสร้างรายได้ใช่ไหม?

ประโยชน์ของการประมูลกับ Freelancer

กำหนดงบประมาณและกรอบเวลาของคุณ
รับเงินจากการงานของคุณ
อธิบายข้อเสนอของคุณในภาพรวม
ลงทะเบียนและเสนอราคาฟรี
16 ฟรีแลนซ์กำลังเสนอราคาโดยเฉลี่ย $192 USD สำหรับงานนี้
รูปอวาตาร์ของผู้ใช้
Hello, I'd be glad to implement the parallel processing script for you .To have an idea about my experience in python, i invite you to take a look on my previous project feedbacks on my profile page Relevant Skills and Experience Python Proposed Milestones $255 USD - upon completion looking forward to chat with you soon for more details. Best regards,
$255 USD ใน 3 วัน
5.0 (195 รีวิว)
7.9
7.9
รูปอวาตาร์ของผู้ใช้
Hi I checked the requirements carefully. I have rich experiences of multi-threading and multi-processing. I am confident with this job. I am ready to start the work. Best, Zhang Relevant Skills and Experience python, multi-threading, multi-processing Proposed Milestones $200 USD - making the script for extracting the data and saving into mongodb.
$200 USD ใน 3 วัน
4.9 (125 รีวิว)
7.6
7.6
รูปอวาตาร์ของผู้ใช้
Hello sir, to be very specific, i can write a program which will first extract zip file and divide the files in parallel threads and every thread is responsible for processing set of files. Relevant Skills and Experience every thread will also responsible for saving data in mongodb and my program will take care of the sequential order of zip files and work accordingly. Thanks Proposed Milestones $246 USD - final milestone
$246 USD ใน 7 วัน
5.0 (77 รีวิว)
7.2
7.2
รูปอวาตาร์ของผู้ใช้
Hello I am glad to see such a project here, involving both Python & parallel programming seems to be good fit from my background, your objective seems clear to me so I feel comfortable to take the job. Feel free to contact me and share the code that saves content in Mongo Thanassis
$155 USD ใน 3 วัน
4.9 (136 รีวิว)
6.8
6.8
รูปอวาตาร์ของผู้ใช้
I am a parallel programmer, and know how to handle threading. Relevant Skills and Experience Python, parallel processing Proposed Milestones $140 USD - final milestone
$140 USD ใน 4 วัน
4.9 (68 รีวิว)
5.5
5.5
รูปอวาตาร์ของผู้ใช้
Sir/Madam, I am an experienced Python developer with familiarity with OOPS concept and core Python with multiprocessing. I have worked on projects involving complex data structures. I can write highly optimized code for you. Looking forward to working with you on this project. Yash
$222 USD ใน 5 วัน
5.0 (43 รีวิว)
5.2
5.2
รูปอวาตาร์ของผู้ใช้
Hi, I should be able to help you with this. Relevant Skills and Experience Have years of experience with Python and multi threading/processing programming. Proposed Milestones $50 USD - Upon the delivery of the script. $116 USD - Pay the rest after testing it yourself. I have a couple of questions, please reach me through chat.
$166 USD ใน 2 วัน
5.0 (3 รีวิว)
3.4
3.4
รูปอวาตาร์ของผู้ใช้
I will need some more details about the OS to be run on, and the kind of data to be processed, and I will do it asap Relevant Skills and Experience I've already made a lot of projects using python, that contains threads and multiprocessing Proposed Milestones $222 USD - Finish the task
$222 USD ใน 10 วัน
4.4 (5 รีวิว)
2.6
2.6
รูปอวาตาร์ของผู้ใช้
A proposal has not yet been provided
$150 USD ใน 5 วัน
5.0 (2 รีวิว)
2.4
2.4
รูปอวาตาร์ของผู้ใช้
Hi, I can help you with distributed/parallel processing of these zipped files and importing them into MongoDB with your rules regarding the threads sequence and zip file sequence. Relevant Skills and Experience I am an expert Python Developer and i have experience with multiprocessing module and parallel programming in Python. I am also experienced with MongoDB. Proposed Milestones $388 USD - Delivery of the Processing Script Additional Services Offered $150 USD - MongoDB optimizations $100 USD - Linux server setup Let's discuss some more details about the file structure and their equivalent collection in MongoDB
$388 USD ใน 6 วัน
5.0 (1 รีวิว)
1.8
1.8
รูปอวาตาร์ของผู้ใช้
Hey ! I'm SAYAN PROGRAMMER I've reviewed your complete job description, and I fulfill all the qualifications required for this project. I always try to provide good quality work to my clients. I have more than 15 years of experience in this field. I have completed 200 projects with clients 100% satisfaction and I am sure if you will respond me then I will be able to explain my skills as well. My key skills are: Python, C #, C + +, C programming ,JAVA, Software Development, Software Architecture, PHP, Java script, Software Engineering, and much more. Looking forward to work with you on this project. THANKS Regards SAYAN PROGRAMMER
$30 USD ใน 2 วัน
0.0 (0 รีวิว)
0.0
0.0
รูปอวาตาร์ของผู้ใช้
A proposal has not yet been provided
$166 USD ใน 4 วัน
0.0 (0 รีวิว)
0.0
0.0
รูปอวาตาร์ของผู้ใช้
HI, one year ago I coded threads for parallel processing of images comparison ( using libs from Anaconda). Now I'm seeing at that code, in wich i pass as parameter a # of threads to run at same time.. Relevant Skills and Experience ..I run it to process thousands of images and worked very very well. In the threads were included access to files and database with no conflicts. skills: Python during the last 3 years. See my resume Proposed Milestones $10 USD - define where to store temp unzipped files for processing $50 USD - Define Threads classes to process info and main algorithm $30 USD - Process sample zips showing ouputs as to save to Mongo $65 USD - Work done with your approval Additional Services Offered $1 USD - Anything you need from functional analysis to develoment I think everything is well defined. So no additional questions. Thank You.
$155 USD ใน 3 วัน
0.0 (0 รีวิว)
0.0
0.0
รูปอวาตาร์ของผู้ใช้
Hello I am a master student in computer science with some experience in python, java and C++. I am specializing in machine learning and use especially Python. Therefore I think this task is perfect for me. Bests Hugues
$244 USD ใน 6 วัน
0.0 (0 รีวิว)
0.0
0.0

เกี่ยวกับลูกค้า

ปักธงของ UNITED STATES
Herndon, United States
5.0
29
ยืนยันวิธีการชำระเงินแล้ว
เป็นสมาชิกตั้งแต่ ก.ค. 7, 2012

การยืนยันลูกค้า

ขอบคุณ! เราได้ส่งลิงก์สำหรับเครดิตฟรีให้คุณทางอีเมลแล้ว
เกิดข้อผิดพลาดขณะส่งอีเมลของคุณ กรุณาลองอีกครั้ง
โลโก้ Freelancer Thailand / ภาษาไทย ช่วยเหลือและสนับสนุน FreelancerประเภทโปรเจคการประกวดFreelancerองค์กรแพ็กเกจสมาชิกโครงการ Freelancer ชั้นแนวหน้าการจัดการโปรเจคงานในพื้นที่Photo Anywhereหน้าจัดแสดงผลงานAPI สำหรับนักพัฒนาได้รับการยืนยันDesktop App เกี่ยวกับเกี่ยวกับเราวิธีใช้งานความปลอดภัยนักลงทุนแผนผังเว็บไซต์เรื่องราวข่าวออกสื่อทีมรางวัลข่าวประชาสัมพันธ์ร่วมงานกับเรา ข้อกำหนดนโยบายความเป็นส่วนตัวข้อกำหนดและเงื่อนไขนโยบายลิขสิทธิ์ข้อพึงปฏิบัติค่าธรรมเนียมและค่าบริการหุ้นส่วนEscrow.comLoadshiftWarrior Forum แอปโลโก้ Apple App Store โลโก้ Google Play
ไม่สามารถคัดลอกไปยังคลิปบอร์ดได้ โปรดลองอีกครั้งหลังปรับเปลี่ยนการอนุญาต
คัดลอกไปยังคลิปบอร์ดแล้ว
ผู้ใช้ที่ลงทะเบียน งานที่มีการโพสต์ทั้งหมด
Freelancer ® is a registered Trademark of Freelancer Technology Pty Limited (ACN 142 189 759)
Copyright © 2024 Freelancer Technology Pty Limited (ACN 142 189 759)
กำลังโหลดตัวอย่าง
ได้รับอนุญาตสำหรับตำแหน่งทางภูมิศาสตร์
เซสชั่นการเข้าสู่ระบบของคุณหมดอายุและคุณได้ออกจากระบบแล้ว กรุณาเข้าสู่ระบบอีกครั้ง