Ventara

/Case study

Microsoft Fabric'da medallion ombor

Boshdan-oyoq tahlil platformasi: operatsion manbalardan yig'ish, PySpark'da qatlamli transformatsiya va tahlilchilar to'g'ridan-to'g'ri so'rov yuboradigan hisobot modeli. Ish Itransition'ning tijorat data engineering dasturi doirasida bajarilgan.

INTERFACEPower BISERVICESMicrosoft FabricPySparkDATAInfluxDBSQLARCHITECTURE
  • Microsoft Fabric
  • PySpark
  • Power BI
  • InfluxDB
  • SQL

/Muammo

Operatsion ma'lumot bir nechta manbadan kelardi: tiplar mos emas, kalitlar takrorlanadi, obyektlarning umumiy ta'rifi yo'q. To'g'ridan-to'g'ri hisobot qurish har bir savol raqamlarning ma'nosi haqidagi bahsdan boshlanishini anglatardi.

/Yondashuv

Medallion arxitekturasi: bronza qatlam qanday kelgan bo'lsa shundayligicha saqlanadi va tahrirlanmaydi; kumush qatlamda tiplar majburlanadi va dublikatlar hal qilinadi; oltin qatlam esa donadorligi e'lon qilingan yulduz sxemasi. Transformatsiyalar PySpark'da bajariladi va qayta hosil qilinadi, shuning uchun yomon natija qatorlarni tuzatish bilan emas, qatlamni qayta ishga tushirish bilan hal bo'ladi. InfluxDB'dagi vaqt qatorlari bir xil o'lchovlarga keltiriladi, shunda ular relyatsion faktlar yonida ko'rsatilishi mumkin.

/Natija

Hisobot qatlamiga manba tizimlarni bilmasdan so'rov yuborish mumkin bo'lgan ombor va alohida eksportlarga emas, kelishilgan o'lchovlarga qurilgan Power BI hisobotlari. Itransition'ning "Commercial Software Development: Data Engineering" dasturi doirasida bajarilgan, 2026.