тЗх | هندسة البيانات

ابي اقول نصيحة وانشروها لعلها تفيد ناس تجهلها نصيحة قبل ما توقع اي عقد استخدم الذكاء الاصطناعي سواءً شات جبتي ولا جيميناي ولا اي شي عشان يوضح لك البنود الي في العقد واطلب له يوضح لك ايش العقود الي ممكن تضرك وماتكون واقفه في صالحك نصيحه نصيحه كثير ناس ماتفهم بالبنود والعقود واحيان نفس الكلام يكون صعب ولا يفهمه الا شخص قانوني وفاهم هنا يجي دور الذكاء الاصطناعي وبيفيدكم مره خذوها مني والله ان الذكاء الاصطناعي بيوضح لك كل شي وشكرا

@saeed0ss المختص بياخذ مبلغ كبير وهاذا حل قبل التوجه لمختص لأن ليش المختص ياخذ مبلغ كبير على استشاره اذا وضحها الذكاء الاصطناعي خلاص الامور طيبه

الذكاء الاصطناعي يفيدك ولكن المختص هو المقصد وهذي نصيحة جوهرية لأن المختص أدرى بتحديثات الأنظمة والقوانين..

من اكثر المفاهيم اهمية في ال Data warehouse هو slowly changing dimensions (SCDs)

هندسة البيانات افضل مجال ممكن تتعلمه اذا تحب البرمجة

Huge news! After 38 years, C++23 finally removes Garbage Collection from C++

يارب سنة جميلة وكلها انجازات وكل واحد يحقق الي نفسه فيه فرصه جديدة والي فات مات بتكون سنة قوية وسنة كلها ابداع سنة ٢٠٢٥ كانت سنة خير بالنسبة لي بصراحة كثير اشياء حلوة صارت فيها وكم شي صاروا ماتوقعت انه تصير لكن الحمد الله دائم خليكم فخورين بكل شي حققتوه وكل انجاز بسيط

This week we wrapped up our @databricks series! We covered: 1. Importing Data from flat files and connecting to Data Sources 2. Analyzing data using SQL Editor and Notebooks 3. Visualizing and Creating Dashboards 4. Using AI to code and talk with our Databases You can learn all of this for Free in this series using Databricks Free Edition! I plan on adding to the Databricks Series in the future! Check out the playlist below! Link: youtube.com/playlist?list=…

كل مرحله نتعلم منها شي حتى لو كانت صعبه ومو كل شي يجي على ما نتمنى بس حط ببالك كل شي فيه خيره بالموضوع يمكن انت ماتشوفها بالبداية بس بعدين بتفهم ليه صار معك كذا

يا صباح الخير

اغلب الشركات الكبار صارت تستخدم Apache Iceberg وبدأت تستخدمه ليش؟ لأنه مفتوح المصدر، ما يربطك بشركة، تقدر تنقل بياناتك أي مكان، وتعدل الجداول بدون ما تكتب البيانات من جديد. Iceberg = مستقبل الـ Data Lakehouse

ورقة Databricks في 2021 كانت الشرارة اللي طلعت مفهوم Lakehouse للعالم. من بعدها تغير مجال البيانات بالكامل وصار الاتجاه واحد منصة تجمع قوة الـ Warehouse مع مرونة الـ Lake. رابط الورقة: cidrdb.org/cidr2021/paper…

Spark has a similar programming model to MapReduce but extends it with a data-sharing abstraction called “resilient distributed datasets,” or RDDs.

@ii4_8u شي تسوينه لأول مره بس ماتعيدينه

تجربة ما ابغى اعيدها : الجامعة الغربة الجامعة عشان لو ما كانت الاولى مقنعة

ورقة علمية من Databricks عن محرك Photon وكيف قدروا يرفعون أداء query execution باستخدام Vectorized Execution لو مهتم بالأداء عالي جداً في الداتا — هذي لازم تقراها. رابط الورقة: people.eecs.berkeley.edu/~matei/papers/…

الفرق بين الي يكتب query عادي والي يكتب query ممتاز يوم تجيبهم الاثنين على بيانات كبيرة جدا بتشوف الفرق الممتاز بيفكر كيف ومتى وليه يعرف كيف يسوي optimization للكويري ويعرف يستخدم ال partition و انواع الjoin وبدل مايستخدم بس select ممكن يخرن الresult في CTE عشان يحسن من اداء الكويري وممكن يخزن الريزولت على الميموري عشان مو كل مره تاخذ وقت البيانات Cash select هاذي كلها اشياء لازم تكون في بالك لما تتعامل مع بيانات كبيرة بالملاين والمليارات من الrows

إذا كنت تقني وراتبك الأساسي أكثر من 6000 ﷼ وتعمل في شركة تقنية غالبا أنت تستحق مكافأة 86,000 ﷼ إذا استمريت مع نفس الشركة 18 شهر، (يعني متوسط شهري 4800 ﷼ بالإضافة إلى راتبك) تعرّف على برنامج "تمكين" التابع لـ "البرنامج الوطنى لتنمية تقنية المعلومات"

موقع databricks عندهم مقالات كثير ممتازة وتشرح مفاهيم مهمة جدا في هندسة البيانات وبطريقة واضحة ومرتبة شغل متعوب عليه مدري ويني عنها من زمان databricks.com/blog