Find Jobs
Hire Freelancers

Need Node.JS / Database / Amazon AWS expert to help with Data Collection project

$250-750 USD

ปิดแล้ว
โพสต์ มากกว่า 5 ปีที่ผ่านมา

$250-750 USD

ชำระเงินเมื่อส่งงาน
Hi, I need an expert in Node.JS, Amazon AWS, and Database management to help with a data collection project. Project Overview: We have created a script which queries a third-party API, using a specific keyword, and returns JSON data related to that keyword. Task #1: We need that script to run once every 60 seconds. Task #2: We need a Database set up to store the JSON data. From speaking with experts, it sounds like this should be a relational database such as MySQL. Task #3 (hard part): We need to duplicate this automated script for approximately 5,000 different keywords, all running queries every 60 seconds and storing their data in the main Database. Problems: This presents a few issues, on which we need advice. Problem #1: The third-party API has a rate limit of 60 seconds per request. Presumably, this means we need to create 5,000 different scripts, all running from different IP addresses (need advice). From our research, some people have had success doing this on a smaller scale using Amazon’s Lambdas service. We need advice on how to run all of these API queries concurrently, efficiently, and at the lowest cost. Recommendations on services and solutions are welcome. Note: This is not an attempt to avoid paying for API access - it is a public API that has a rate limit. Problem #2: These queries are very quickly going to create a very large database. We need advice on the best Database service / solution to use, for maximum performance at the lowest cost. Problem #3: The goal for this data is to send it to a Front-End which will be able to present the Data in real time. We are still building that Front-End, but have a general idea of what it will look like and how the data will be presented. We need advice on the best way to Collect, Process, Analyze, Store, and Present this data in a real-time environment. From our research, there are various services and solutions for this type of problem. For example, Amazon Kinesis seems like it could be a solution? Need advice. If you are interested, please get in touch and we can chat further. Thank you for your time.
รหัสโปรเจกต์: 18275227

เกี่ยวกับโปรเจกต์

12 ข้อเสนอ
โปรเจกต์ระยะไกล
ใช้งานอยู่ 5 ปีที่ผ่านมา

กำลังมองหาการสร้างรายได้ใช่ไหม?

ประโยชน์ของการประมูลกับ Freelancer

กำหนดงบประมาณและกรอบเวลาของคุณ
รับเงินจากการงานของคุณ
อธิบายข้อเสนอของคุณในภาพรวม
ลงทะเบียนและเสนอราคาฟรี
12 ฟรีแลนซ์กำลังเสนอราคาโดยเฉลี่ย $500 USD สำหรับงานนี้
รูปอวาตาร์ของผู้ใช้
Hello, Dear How are you? I am very interested in your project and am ready for discussing with you about project for now. I have experienced in developing Amazon Web Services, Data Processing, Elasticsearch, MySQL, node.js. I will work very hard and best for you. Best Regards
$500 USD ใน 10 วัน
5.0 (62 รีวิว)
7.9
7.9
รูปอวาตาร์ของผู้ใช้
I am expert who understands the value of time. I pride myself in my attention to detail. I am very hard working and aim to deliver in less time than quoted. I want to make you, my employer happy without changing my bid or playing games. If you are looking for a true Freelancer, I am the Right person for you. I am available almost 24-7 and am very responsive. I feel proud that I am a trusted Freelancer who pleases almost every single client. You can rest assure, your work will be delivered well in advance of others, with passion and accuracy. I guarantee you instant communication & responses when you need me. Why choose me? I think every client is the reason for my success. I only take projects which I am sure I can do quickly and at my FIRST BID. I promise to deliver 100% Satisfaction.I have more than 5 year of experience in Amazon Web Services, Data Processing, Elasticsearch, MySQL, node.js. Please ping me for more discussion.
$500 USD ใน 6 วัน
4.9 (228 รีวิว)
7.7
7.7
รูปอวาตาร์ของผู้ใช้
⭐⭐⭐⭐ i will finish your project very quickly. ⭐⭐⭐⭐⭐⭐ I read through the job details extremely carefully and I am absolutely sure that I can do the project very well. * 4+ years experience in web design and development and site build with node.js. Timely delivery 24 hours communication Hope to get your early response Thanks ⭐⭐⭐⭐⭐⭐⭐⭐⭐⭐
$250 USD ใน 10 วัน
4.9 (84 รีวิว)
6.9
6.9
รูปอวาตาร์ของผู้ใช้
Dear simmelgroup! Thanks for giving me the opportunity to discuss your project. Best regards,
$275 USD ใน 7 วัน
5.0 (73 รีวิว)
6.5
6.5
รูปอวาตาร์ของผู้ใช้
Hi. Thank you for posting. I have good experiences in Node.js and database management. Also I am very familiar with Rest API and Amazon AWS. I can meet your requirements fully. Looking forward to work with you soon. Thank you.
$555 USD ใน 10 วัน
4.7 (56 รีวิว)
7.1
7.1
รูปอวาตาร์ของผู้ใช้
Hello? I am a expert in node.js framework/MySQL(or NOSQL)/AWS cloud. I have checked your description with 3 points, and very clear to me. So, I will clarify my opinions. 1. setInterval(function(){ },60000); 2. I recommend AWS RDS. It is easy to operate CRUD in that. Please check my profile and contact me to progress your project. I am ready to start immediately your project. Regards. From <Yongde>
$700 USD ใน 10 วัน
4.8 (58 รีวิว)
6.9
6.9
รูปอวาตาร์ของผู้ใช้
Greetings! I`m ready to help you with Data Collection project. I`m a professional node.js developer and I have a team of web developers and system admins with more than 17 years experience in each sphere. Besides, we have a huge experience in AWS and database development. We have completed more than 100 projects and we`ll be glad to work with you. Drop me a line and we shall discuss everything.
$555 USD ใน 10 วัน
4.9 (25 รีวิว)
6.4
6.4
รูปอวาตาร์ของผู้ใช้
Hi, I'm very much interested in this project. I have good experience in Database / Amazon Data Collection expert. I ensure you, sir, I will provide you with better quality work than others. I'm able to send a sample please message me. I will be paid after your satisfaction. Thanks Habibullah B
$250 USD ใน 10 วัน
4.8 (29 รีวิว)
4.9
4.9
รูปอวาตาร์ของผู้ใช้
Hi there, I am reading your all tasks, would you please come on the chat to discuss? Waiting your reply! Thanks
$555 USD ใน 10 วัน
4.9 (14 รีวิว)
4.4
4.4
รูปอวาตาร์ของผู้ใช้
hi, i'm professional and want to work with you. v\hi, i'm professional and want to work with you. hi, i'm professional and want to work with you. \thanks
$555 USD ใน 10 วัน
4.9 (7 รีวิว)
3.0
3.0

เกี่ยวกับลูกค้า

ปักธงของ UNITED STATES
Kansas City, United States
0.0
0
เป็นสมาชิกตั้งแต่ ธ.ค. 1, 2018

การยืนยันลูกค้า

ขอบคุณ! เราได้ส่งลิงก์สำหรับเครดิตฟรีให้คุณทางอีเมลแล้ว
เกิดข้อผิดพลาดขณะส่งอีเมลของคุณ กรุณาลองอีกครั้ง
โลโก้ Freelancer Thailand / ภาษาไทย ช่วยเหลือและสนับสนุน FreelancerประเภทโปรเจคการประกวดFreelancerองค์กรแพ็กเกจสมาชิกโครงการ Freelancer ชั้นแนวหน้าการจัดการโปรเจคงานในพื้นที่Photo Anywhereหน้าจัดแสดงผลงานAPI สำหรับนักพัฒนาได้รับการยืนยันDesktop App เกี่ยวกับเกี่ยวกับเราวิธีใช้งานความปลอดภัยนักลงทุนแผนผังเว็บไซต์เรื่องราวข่าวออกสื่อทีมรางวัลข่าวประชาสัมพันธ์ร่วมงานกับเรา ข้อกำหนดนโยบายความเป็นส่วนตัวข้อกำหนดและเงื่อนไขนโยบายลิขสิทธิ์ข้อพึงปฏิบัติค่าธรรมเนียมและค่าบริการหุ้นส่วนEscrow.comLoadshiftWarrior Forum แอปโลโก้ Apple App Store โลโก้ Google Play
ไม่สามารถคัดลอกไปยังคลิปบอร์ดได้ โปรดลองอีกครั้งหลังปรับเปลี่ยนการอนุญาต
คัดลอกไปยังคลิปบอร์ดแล้ว
ผู้ใช้ที่ลงทะเบียน งานที่มีการโพสต์ทั้งหมด
Freelancer ® is a registered Trademark of Freelancer Technology Pty Limited (ACN 142 189 759)
Copyright © 2024 Freelancer Technology Pty Limited (ACN 142 189 759)
กำลังโหลดตัวอย่าง
ได้รับอนุญาตสำหรับตำแหน่งทางภูมิศาสตร์
เซสชั่นการเข้าสู่ระบบของคุณหมดอายุและคุณได้ออกจากระบบแล้ว กรุณาเข้าสู่ระบบอีกครั้ง