วิธีการดูข้อมูลอนุกรมเวลาขนาดใหญ่แบบโต้ตอบ?

ฉันมักจะจัดการกับข้อมูลอนุกรมเวลาที่มีขนาดพอสมควรจำนวน 50-200 ล้านคู่กับการประทับเวลาที่เกี่ยวข้องและต้องการเห็นภาพเหล่านั้นแบบไดนามิก

มีซอฟต์แวร์ที่มีอยู่ให้ทำอย่างมีประสิทธิภาพหรือไม่ ห้องสมุดและรูปแบบข้อมูลเป็นอย่างไร Zoom-cacheเป็นตัวอย่างหนึ่งของการมุ่งเน้นไปที่อนุกรมเวลาขนาดใหญ่ ในซูมแคชข้อมูลสรุปที่ความละเอียดหลายอย่างเพื่อให้ง่ายต่อการดูที่ความละเอียดที่แตกต่างกัน

แก้ไข: หากมีที่อื่นฉันควรถามคำถามนี้หรือค้นหาคำตอบโปรดแจ้งให้เราทราบ

มีชุดเครื่องมือการวิจัยที่เรียกว่าTimeSearcher 1--3ซึ่งมีตัวอย่างของวิธีจัดการกับชุดข้อมูลอนุกรมเวลาขนาดใหญ่ ด้านล่างนี้คือตัวอย่างรูปภาพจาก TimeSearcher 2 และ 3

ขออภัยสำหรับโฆษณาด้วยตนเอง แต่ Thunderplot (thunderplot.com) จะเป็นตัวเลือกที่ดีสำหรับมัน ฉันเขียนมันเพื่อการพล็อตชุดข้อมูลขนาดใหญ่แบบโต้ตอบ ฉันไม่ได้ทดสอบด้วยชุดข้อมูลแถว 200KK แต่ใช้ได้กับแถว ~ 10KK นอกจากนี้ยังมีคุณสมบัติ "อ่านทุกแถวที่ NTH" เพื่อให้คุณสามารถลดปริมาณข้อมูลเพื่อจัดเก็บ / แสดงภาพได้ ฉันสามารถส่งรหัสลงทะเบียนเพื่อแลกเปลี่ยนไปยังหนึ่งในชุดข้อมูลขนาดใหญ่เหล่านั้น :-)

โพสต์การส่งเสริมตนเองอื่นเพราะฉันทำงานให้กับ บริษัท นี้ แต่ SensorCloud (sensorcloud.com) ใช้อัลกอริทึมอัจฉริยะเพื่อสร้างกราฟชุดข้อมูลขนาดใหญ่อย่างรวดเร็ว เดิมได้รับการออกแบบโดยคำนึงถึงเซ็นเซอร์ทางกายภาพของเรา แต่มีตัวอัปโหลด CSV เพื่อจัดการข้อมูลไทม์รีใด ๆ

ตัวอย่างเช่นเราอัปโหลดชุดข้อมูลที่มีจุดข้อมูล 100 พันล้านจุด (มากกว่า 1 เทราไบต์ของค่าการประทับเวลา + ข้อมูล) และคุณสามารถสร้างกราฟและโต้ตอบกับมันได้อย่างรวดเร็ว

นี่คือลิงก์สาธารณะไปยังชุดข้อมูลนั้น: https://sensorcloud.microstrain.com/SensorCloud/data/Z3MFURATHIB8A032/

ลิงค์ด้านบนใช้โปรแกรมดูแฟลชของเรา หากคุณไม่ต้องการใช้แฟลชนี่คือโปรแกรมดู javascript: https://sensorcloud.microstrain.com/SensorCloud/data/Z3MFURATHIB8A032/js/

ใช้ล้อเลื่อนหรือ Shift + คลิกซ้ายเพื่อซูมเข้า