Оё зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад?

Оё зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад?

Ҷавоби кӯтоҳ: Зеҳни сунъӣ муҳандисони додаҳоро комилан иваз намекунад; он корҳои такроршавандаро ба монанди тартиб додани SQL, сохтмони лӯлаҳои қубур, санҷишҳо ва ҳуҷҷатгузорӣ автоматӣ мекунад. Агар нақши шумо асосан кори камсавод ва коре бошад, ки ба чипта асос ёфтааст, он бештар ошкор аст; агар шумо соҳиби эътимоднокӣ, таърифҳо, идоракунӣ ва вокуниш ба ҳодисаҳо бошед, зеҳни сунъӣ асосан шуморо зудтар мекунад.

Хулосаҳои асосӣ:

Моликият : Ба масъулият барои натиҷаҳо афзалият диҳед, на танҳо барои таҳияи зуди код.

Сифат : Санҷишҳо, мушоҳидашавандагӣ ва шартномаҳоро анҷом диҳед, то қубурҳо боэътимод боқӣ монанд.

Идоракунӣ : Махфият, назорати дастрасӣ, нигоҳдорӣ ва аудити пайгирӣ, ки ба инсон тааллуқ доранд, нигоҳ дошта шавад.

Муқовимат ба истифодаи нодуруст : Натиҷаҳои зеҳни сунъӣ ҳамчун нақшаҳо баррасӣ кунед; онҳоро аз назар гузаронед, то аз хатогиҳои боэътимод пешгирӣ кунед.

Тағйири нақш : Барои чоп кардани қолаб камтар ва барои тарроҳии системаҳои пойдор бештар вақт сарф кунед.

Оё зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад? Инфографика

Агар шумо беш аз панҷ дақиқа дар гурӯҳҳои додаҳо вақт гузаронида бошед, шумо ин наққошро шунидаед - баъзан пичиррос мезананд, баъзан дар саросари ҷаласа мисли як гардиши сюжет садо медиҳанд: Оё зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад?

Ва... ман мефаҳмам. Сеҳри сунъӣ метавонад SQL-ро тавлид кунад, лӯлаҳоро созад, пайгирии стекҳоро шарҳ диҳад, моделҳои dbt-ро тартиб диҳад, ҳатто схемаҳои анборро бо эътимоди ноором пешниҳод кунад. GitHub Copilot барои SQL Дар бораи моделҳои dbt GitHub Copilot
Ин мисли тамошо кардани он аст, ки чӣ тавр як мошини борбардор чӣ гуна бояд ҳаракат кунад. Таъсирбахш, каме нигаронкунанда аст ва шумо пурра боварӣ надоред, ки ин барои кори шумо чӣ маъно дорад 😅

Аммо ҳақиқат нисбат ба сарлавҳа камтар тозаву озода аст. Соҳиби зеҳни сунъӣ муҳандисии додаҳоро комилан тағйир медиҳад. Он қисмҳои дилгиркунанда ва такроршавандаро автоматӣ мекунад. Он лаҳзаҳои "ман медонам, ки чӣ мехоҳам, аммо синтаксисро дар ёд надорам"-ро суръат мебахшад. Он инчунин намудҳои нави бесарусомониро ба вуҷуд меорад.

Пас, биёед онро дуруст шарҳ диҳем, бе хушбинии дастӣ ё воҳимаи ногувор.

Мақолаҳое, ки шумо метавонед баъд аз ин хонед, инҳоянд:

🔗 Оё зеҳни сунъӣ ҷойгузини радиологҳо хоҳад шуд?
Чӣ гуна тасвирҳои зеҳни сунъӣ ҷараёни кор, дақиқӣ ва нақшҳои ояндаро тағйир медиҳанд.

🔗 Оё зеҳни сунъӣ муҳосибонро иваз мекунад?
Бубинед, ки кадом вазифаҳои баҳисобгирии зеҳни сунъӣ автоматӣ мекунанд ва кадомаш инсонӣ боқӣ мемонад.

🔗 Оё зеҳни сунъӣ бонкдорони сармоягузориро иваз мекунад?
Таъсири зеҳни сунъиро ба муомилот, таҳқиқот ва муносибатҳои муштариён дарк кунед.

🔗 Оё зеҳни сунъӣ агентҳои суғуртаро иваз мекунад?
Бифаҳмед, ки чӣ гуна зеҳни сунъӣ андеррайтинг, фурӯш ва дастгирии муштариёнро тағйир медиҳад.

Чаро саволи "Зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад" дубора ба миён меояд 😬

Тарс аз як нуқтаи хеле мушаххас бармеояд: муҳандисии додаҳо корҳои зиёди такроршаванда дорад .

  • Навиштан ва аз нав фаъол кардани SQL

  • Сохтани скриптҳои воридкунӣ

  • Харитасозии майдонҳо аз як схема ба схемаи дигар

  • Эҷоди санҷишҳо ва ҳуҷҷатҳои асосӣ

  • Ислоҳи хатогиҳои лӯла, ки… каме пешгӯишавандаанд

Зеҳни сунъӣ дар намунаҳои такроршаванда хеле хуб аст. Ва як қисми муҳандисии додаҳо маҳз ҳамин аст - намунаҳо дар болои намунаҳо ҷамъ карда шудаанд. Пешниҳодҳои рамзи GitHub Copilot

Ғайр аз ин, экосистемаи асбобҳо аллакай мураккабиро "пинҳон" мекунад:

Пас, вақте ки зеҳни сунъӣ пайдо мешавад, он метавонад мисли пораи охирин эҳсос шавад. Агар стек аллакай абстрактӣ шуда бошад ва зеҳни сунъӣ метавонад рамзи часпакро нависад... чӣ боқӣ мемонад? 🤷

Аммо як чизе ҳаст, ки одамон аз он сарфи назар мекунанд: муҳандисии додаҳо асосан чопкунӣ нест . Чопкунӣ қисми осон аст. Қисми душвор ин аст, ки воқеияти норавшан, сиёсӣ ва тағйирёбандаи тиҷоратиро мисли як системаи боэътимод рафтор кунад.

Ва зеҳни сунъӣ то ҳол бо ин норавшанӣ мубориза мебарад. Одамон низ мубориза мебаранд - онҳо танҳо беҳтар импровизатсия мекунанд.

Муҳандисони додаҳо дар асл тамоми рӯз чӣ кор мекунанд (ҳақиқати нохушоянд) 🧱

Биёед ростқавлона бигӯем - унвони вазифаи "Муҳандиси додаҳо" чунин ба назар мерасад, ки шумо муҳаррикҳои мушакиро аз рӯи математикаи холис месозед. Дар амал, шумо эътимодро .

Рӯзи маъмулӣ камтар аз "алгоритмҳои нав ихтироъ кардан" ва бештар аз он иборат аст:

  • Музокирот бо дастаҳои болооб дар бораи таърифҳои маълумот (дардовар, вале зарурӣ)

  • Таҳқиқи сабаби тағйирёбии метрика (ва оё он воқеӣ аст)

  • Идоракунии гардиши схемаҳо ва "касе нисфи шаб сутун илова кард" -и ғайричашмдоштҳо

  • Таъмини он, ки қубурҳо идемпотент, барқароршаванда ва мушоҳидашаванда бошанд

  • Эҷоди панҷараҳои муҳофизатӣ, то таҳлилгарони поёноб тасодуфан панелҳои идоракунии бемаъниро насозанд

  • Идоракунии хароҷот, то анбори шумо ба оташи пул табдил наёбад 🔥

  • Сиёсатҳои таъмини дастрасӣ, аудит, риояи қоидаҳо, нигоҳдорӣ Принсипҳои GDPR (Комиссияи Аврупо) Маҳдудияти нигоҳдорӣ (ICO)

  • Сохтани маҳсулоти додаҳо, ки одамон метавонанд воқеан бидуни фиристодани DM ба шумо истифода баранд 20 савол

Қисми зиёди кор иҷтимоӣ ва амалӣ аст:

  • «Ин миз соҳиби кӣ аст?»

  • «Оё ин таъриф ҳоло ҳам эътибор дорад?»

  • «Чаро CRM нусхаҳои такрориро содир мекунад?»

  • «Оё мо метавонем ин метрикаро бе хиҷолат ба роҳбарон фиристем?» 😭

Албатта, зеҳни сунъӣ метавонад дар баъзе қисматҳои ин кор кумак кунад. Аммо иваз кардани пурраи он... як кори душвор аст.

Чӣ версияи қавии нақши муҳандисии додаҳоро ташкил медиҳад? ✅

Ин бахш муҳим аст, зеро сӯҳбат дар бораи ивазкунӣ одатан фикр мекунад, ки муҳандисони додаҳо асосан "созандагони лӯла" мебошанд. Ин мисли он аст, ки фарз кунем, ки ошпазҳо асосан "сабзавотҳоро реза мекунанд". Ин қисми кор аст, аммо ин кор нест.

Версияи қавии муҳандиси додаҳо одатан маънои онро дорад, ки онҳо метавонанд аксари инҳоро иҷро кунанд:

  • Тарҳрезӣ барои тағйирот
    . Маълумот тағйир меёбад. Гурӯҳҳо тағйир меёбанд. Асбобҳо тағйир меёбанд. Муҳандиси хуб системаҳоеро месозад, ки ҳар дафъае, ки воқеият атса мезанад, фурӯ намераванд 🤧

  • Шартномаҳо ва интизориҳоро муайян кунед.
    "Муштарӣ" чӣ маъно дорад? "Фаъол" чӣ маъно дорад? Вақте ки сатр дер мерасад, чӣ мешавад? Шартномаҳо нисбат ба рамзи зебо бештар аз бесарусомонӣ пешгирӣ мекунанд. Стандарти шартномаҳои маълумоти кушода (ODCS) ODCS (GitHub)

  • Мушоҳидапазириро дар ҳама чиз
    на танҳо "кор кард", балки "дуруст кор кард" низ ҷойгир кунед. Тароват, аномалияҳои ҳаҷм, таркишҳои сифрӣ, тағйироти тақсимот. Мушоҳидапазирии маълумот (Dynatrace) Мушоҳидапазирии маълумот чист?

  • Мисли як калонсол, мувозинат кунед.
    Суръат ва дурустӣ, арзиш ва таъхир, чандирӣ ва соддагӣ. Ҳеҷ гуна роҳи ҳалли комил вуҷуд надорад, танҳо роҳи ҳалли мушкилоте, ки шумо метавонед бо онҳо зиндагӣ кунед.

  • Эҳтиёҷоти тиҷориро ба системаҳои устувор табдил диҳед.
    Одамон метрикаро мепурсанд, аммо он чизе ки ба онҳо лозим аст, маҳсулоти додаҳост. Соҳиби зеҳни сунъӣ метавонад рамзро тартиб диҳад, аммо он наметавонад минаҳои тиҷориро ба таври ҷодугарӣ бидонад.

  • Маълумотро хомӯш нигоҳ доред.
    Таърифи баландтарин барои платформаи додаҳо ин аст, ки касе дар ин бора гап намезанад. Маълумоти бефоида маълумоти хуб аст. Мисли сантехникӣ. Шумо онро танҳо вақте пай мебаред, ки он ноком мешавад 🚽

Агар шумо ин корҳоро анҷом диҳед, саволи "Оё зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад?" каме нодуруст садо медиҳад. Зеҳни сунъӣ метавонад вазифаҳоро , на моликиятро .

Дар ҷое, ки зеҳни сунъӣ аллакай ба муҳандисони додаҳо кӯмак мекунад (ва ин воқеан олӣ аст) 🤖✨

Сеҳри сунъӣ танҳо маркетинг нест. Агар хуб истифода шавад, он як зарбкунандаи воқеии қувва аст.

1) Корҳои зудтари SQL ва табдилдиҳӣ

  • Пайвандҳои мураккаби кашидан

  • Навиштани функсияҳои тиреза, ки шумо намехоҳед дар бораи онҳо фикр кунед

  • Табдил додани мантиқи забони оддӣ ба скелетҳои дархостҳо

  • Рефакторинги дархостҳои нохуш ба CTE-ҳои хондашаванда GitHub Copilot for SQL

Ин хеле бузург аст, зеро он таъсири "саҳифаи холӣ"-ро коҳиш медиҳад. Шумо ҳоло ҳам бояд тасдиқ кунед, аммо шумо аз 70% ба ҷои 0% сар мекунед.

2) Ислоҳи хатогиҳо ва решаҳои нодир

AI дар ин корҳо хуб аст:

  • Шарҳи паёмҳои хатогӣ

  • Пешниҳод кунед, ки ба куҷо нигоҳ кунед

  • Тавсия дода мешавад, ки қадамҳои навъи "санҷиши номувофиқатии схема" GitHub Copilot
    Ин мисли доштани муҳандиси ҷавони хастанашаванда аст, ки ҳеҷ гоҳ намехобад ва баъзан бо боварӣ дурӯғ мегӯяд 😅

3) Ҳуҷҷатгузорӣ ва бойгардонии каталоги маълумот

Худкор тавлидшуда:

  • Тавсифи сутун

  • Хулосаҳои модел

  • Шарҳҳои насаб

  • «Ин ҷадвал барои чӣ истифода мешавад?» ҳуҷҷатҳои dbt-ро

Ин комил нест, аммо лаънати лӯлаҳои беҳуҷҷатро мешиканад.

4) Санҷиши сохтмон ва санҷишҳо

AI метавонад пешниҳод кунад:

Боз ҳам - шумо ҳоло ҳам қарор медиҳед, ки чӣ муҳим аст, аммо ин қисмҳои муқаррариро суръат мебахшад.

5) Рамзи "часпак"-и лӯла

Шаблонҳои конфигуратсия, сохторҳои YAML, лоиҳаҳои оркестрии DAG. Ин чизҳо такроршавандаанд ва зеҳни сунъӣ барои наҳорӣ такроран мехӯрад 🥣 Apache Airflow DAGs

Ҷое, ки зеҳни сунъӣ то ҳол бо мушкилот рӯбарӯ аст (ва ин асоси он аст) 🧠🧩

Ин қисматест, ки аз ҳама муҳимтар аст, зеро он ба саволи ивазкунӣ бо матни воқеӣ ҷавоб медиҳад.

1) Таърифҳои номуайян ва тағйирёбанда

Мантиқи тиҷоратӣ кам ба таври возеҳ аст. Одамон дар миёнаи ҷумла фикри худро дигар мекунанд. «Корбари фаъол» ба «корбари фаъоли пардохткунанда» табдил меёбад ва ба «корбари фаъоли пардохткунанда, ба истиснои баргардонидани маблағ, ба истиснои баъзан» табдил меёбад... шумо медонед, ки ин чӣ гуна аст.

Сеҳри зеҳн наметавонад ин номуайяниро соҳиб шавад. Он танҳо метавонад тахмин кунад.

2) Ҳисоботдиҳӣ ва хатар

Вақте ки лӯлаи барқ ​​​​канда мешавад ва панели идоракунии иҷроия бемаънӣ нишон медиҳад, касе бояд:

  • триаж

  • таъсир расонидан

  • онро ислоҳ кунед

  • пешгирии такроршавӣ

  • пас аз марг навиштан

  • қарор диҳед, ки оё тиҷорат то ҳол метавонад ба рақамҳои ҳафтаи гузашта эътимод кунад

Сеҳри зеҳн метавонад кумак кунад, аммо он наметавонад ба таври пурмазмун ҳисоботдиҳанда бошад. Ташкилотҳо бо эҳсосот кор намекунанд - онҳо бо масъулият кор мекунанд.

3) Тафаккури системавӣ

Платформаҳои додаҳо экосистемаҳо мебошанд: воридкунӣ, нигоҳдорӣ, табдилдиҳӣ, оркестратсия, идоракунӣ, назорати хароҷот, SLA-ҳо. Тағйирот дар як қабат мавҷҳои гуногунро ба вуҷуд меорад. Консепсияҳои Apache Airflow

Зеҳни сунъӣ метавонад беҳсозии маҳаллиро пешниҳод кунад, ки дарди умумиҷаҳониро ба вуҷуд меорад. Ин мисли он аст, ки дарро бо кушодани он таъмир кунед 😬

4) Амният, махфият, риояи қоидаҳо

Ин ҷоест, ки хаёлоти ивазкунанда мемиранд.

Соҳиби зеҳни сунъӣ метавонад сиёсатҳоро таҳия кунад, аммо татбиқи бехатари онҳо муҳандисии воқеӣ аст.

5) «Шахсони номаълум»

Ҳодисаҳои додаҳо аксар вақт пешгӯинашавандаанд:

  • API-и фурӯшанда семантикаро хомӯшона тағйир медиҳад

  • Тағйири фарзияи минтақаи вақт

  • Пуркунии қафо қисмро такрор мекунад

  • Механизми кӯшиши такрорӣ боиси ду маротиба навиштан мегардад

  • Хусусияти нави маҳсулот намунаҳои нави чорабиниҳоро муаррифӣ мекунад

Вақте ки вазъият як намунаи маълум набошад, зеҳни сунъӣ заифтар аст.

Ҷадвали муқоисавӣ: дар амал чӣ кам мекунад 🧾🤔

Дар зер назари амалӣ оварда шудааст. На «асбобҳое, ки одамонро иваз мекунанд», балки абзорҳо ва равишҳое, ки вазифаҳои муайянро кам мекунанд.

Асбоб / равиш Шунавандагон Фазои нархҳо Чаро он кор мекунад
Нусхабардории рамзи зеҳни сунъӣ (ёварони SQL + Python) Нусхабардории GitHub Муҳандисоне, ки бисёр код менависанд Аз ройгон то пулакӣ Дар сохтмони скелетҳо, рефакторҳо, синтаксис аъло аст... баъзан бо роҳи хеле мушаххас худписандӣ мекунад
Пайвасткунакҳои ELT-и идорашаванда Fivetran Дастаҳо аз ворид кардани маводи ғизоӣ хаста шудаанд Обуна-y Дарди фурӯбарии фармоиширо бартараф мекунад, аммо роҳҳои нави шавқоварро ба вуҷуд меорад
Платформаҳои мушоҳидашавандагии маълумот Мушоҳидашавандагии маълумот (Dynatrace) Ҳар касе, ки дорои SLA аст Миёна то корхона Аномалияҳоро барвақт муайян мекунад - ба монанди сигнализатсияҳои дуд барои қубурҳо 🔔
Чаҳорчӯбаҳои табдилдиҳӣ (моделсозии декларативӣ) dbt Гибридҳои таҳлил + DE Одатан, асбоб + ҳисобкунӣ Мантиқро модулӣ ва санҷидашаванда мегардонад, камтар спагетти
Каталогҳои додаҳо + қабатҳои семантикӣ dbt Қабати семантикӣ Органҳо бо нофаҳмиҳои метрикӣ Вобаста аст, дар амал Як бор "ҳақиқат"-ро муайян мекунад - баҳсҳои беохири метрикиро кам мекунад
Оркестратсия бо шаблонҳо Apache Airflow Дастаҳои ба платформа нигаронидашуда Арзиши кушода + амалиёт Ҷараёнҳои кориро стандартӣ мекунад; камтар DAG-ҳои барфпӯшак
Ҳуҷҷатҳои бо ёрии зеҳни сунъӣ тавлиди ҳуҷҷатҳои dbt Гурӯҳҳое, ки аз навиштани ҳуҷҷатҳо нафрат доранд Арзон то миёна Ҳуҷҷатҳои "ба қадри кофӣ хуб"-ро месозад, то дониш аз байн наравад
Сиёсатҳои идоракунии автоматӣ Чаҳорчӯбаи махфияти NIST Муҳитҳои танзимшаванда Корхона-y Ба татбиқи қоидаҳо мусоидат мекунад - аммо барои тарроҳии қоидаҳо ба одамон ниёз дорад

Ба он чизе, ки намерасад, диққат диҳед: сатре, ки мегӯяд "барои нест кардани муҳандисони маълумот тугмаро пахш кунед". Бале... ин сатр вуҷуд надорад 🙃

Пас... оё зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад ё танҳо нақшро иваз мекунад? 🛠️

Ин аст ҷавоби ғайриоддӣ: зеҳни сунъӣ қисмҳои ҷараёни корро иваз мекунад, на касбро.

Аммо он мекунад . Ва агар шумо инро нодида гиред, шумо фишорро эҳсос хоҳед кард.

Чӣ тағйир меёбад:

  • Вақти камтари навиштани қолаб

  • Вақти камтар барои ҷустуҷӯи ҳуҷҷатҳо

  • Вақти бештар барои баррасӣ, тасдиқ ва тарроҳӣ

  • Вақти бештари муайян кардани шартномаҳо ва интизориҳои сифат Стандарти шартномаҳои маълумоти кушода (ODCS)

  • Вақти бештар барои шарикӣ бо маҳсулот, амният ва молия

Ин тағйироти нозук аст: муҳандисии додаҳо камтар ба «сохтани лӯлаҳо» ва бештар ба «сохтани системаи боэътимоди маҳсулоти додаҳо» табдил меёбад

Ва дар як гардиши ором, ин арзишмандтар аст, на камтар.

Ҳамчунин - ва ман инро мегӯям, ҳатто агар ин хеле ҷолиб садо диҳад - зеҳни сунъӣ шумораи одамонеро, ки метавонанд артефактҳои додаҳоро тавлид кунанд , зиёд мекунад, ки ниёз ба касеро барои нигоҳ доштани тамоми чиз дар ҳолати солим афзоиш медиҳад. Натиҷаи бештар маънои нофаҳмиҳои эҳтимолии бештарро дорад. GitHub Copilot

Ин мисли он аст, ки ба ҳама як пармаи барқӣ диҳед. Олӣ! Акнун касе бояд қоидаи "лутфан, ба қубури об парма накунед"-ро риоя кунад 🪠

Маҷмӯаи нави маҳоратҳо, ки арзишманд боқӣ мемонад (ҳатто бо зеҳни сунъӣ дар ҳама ҷо) 🧠⚙️

Агар шумо рӯйхати санҷиши амалии "барои оянда"-ро хоҳед, он чунин ба назар мерасад:

тарзи фикрронии тарроҳии система

  • Моделсозии додаҳо, ки аз тағйирот эмин мемонад

  • Мутобиқати гурӯҳӣ ва ҷараёнӣ

  • Тафаккури таъхир, арзиш ва эътимоднокӣ

Муҳандисии сифати маълумот

Меъмории идоракунӣ ва эътимод

Тафаккури платформавӣ

  • Шаблонҳои такроран истифодашаванда, роҳҳои тиллоӣ

  • Нақшаҳои стандартишуда барои воридкунӣ, табдилдиҳӣ ва санҷиш Санҷишҳои маълумоти Fivetran

  • Асбобҳои худхизматрасонӣ, ки об намешаванд

Муошират (бале, дар ҳақиқат)

  • Навиштани ҳуҷҷатҳои равшан

  • Ҳамоҳангсозии таърифҳо

  • Боадабона, вале қатъӣ гуфтани «не»

  • Шарҳ додани муомилаҳо бе садо додани робот 🤖

Агар шумо ин корро карда тавонед, саволи "Оё зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад?" камтар таҳдидкунанда мегардад. Зеҳни сунъӣ ба экзоскелети шумо табдил меёбад, на ҷойгузини шумо.

Сенарияҳои воқеӣ, ки дар онҳо баъзе нақшҳои муҳандисии додаҳо коҳиш меёбанд 📉

Хуб, санҷиши зуди воқеият, зеро ин ҳама нури офтоб ва конфетти эмодзи нест 🎉

Баъзе нақшҳо бештар ошкор карда мешаванд:

  • Нақшҳои танҳо барои воридкунии холис, ки дар он ҳама чиз пайвасткунакҳои стандартӣ аст, пайвасткунакҳои Fivetran

  • Гурӯҳҳое, ки асосан лӯлаҳои гузоришдиҳии такрориро бо нозукиҳои ҳадди ақали домен анҷом медиҳанд

  • Созмонҳое, ки дар онҳо муҳандисии додаҳо ҳамчун "маймунҳои SQL" баррасӣ мешавад (сахтгир, вале дуруст)

  • Нақшҳои дорои моликияти паст, ки дар он кор танҳо чиптаҳо ва нусхабардорӣ-часбондан аст

Асбобҳои зеҳни сунъӣ ва идорашаванда метавонанд ин ниёзҳоро кам кунанд.

Аммо ҳатто дар он ҷо, ивазкунӣ одатан чунин ба назар мерасад:

  • Одамони камтар кори такрории якхеларо иҷро мекунанд

  • Таваҷҷӯҳи бештар ба моликияти платформа ва эътимоднокӣ

  • Гузариш ба самти "як шахс метавонад лӯлаҳои бештарро дастгирӣ кунад"

Пас, бале - тарзи шумораи кормандон метавонад тағйир ёбад. Нақшҳо тағйир меёбанд. Унвонҳо тағйир меёбанд. Ин қисм воқеӣ аст.

Бо вуҷуди ин, версияи дорои эътимоди баланд ва моликияти баланд боқӣ мемонад.

Хулосаи ниҳоӣ 🧾✅

Оё зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад? На ба тарзе, ки одамон тасаввур мекунанд.

Сеҳри зеҳнӣ (AI) чунин хоҳад кард:

  • вазифаҳои такроршавандаро автоматӣ кунед

  • суръат бахшидан ба рамзгузорӣ, ислоҳи хатогиҳо ва ҳуҷҷатгузорӣ GitHub Copilot барои ҳуҷҷатгузории dbt

  • кам кардани хароҷоти истеҳсоли қубурҳо

Аммо муҳандисии додаҳо асосан ба инҳо дахл дорад:

Сеҳри зеҳн метавонад дар ин кор кумак кунад... аммо он онро "соҳиб" нест.

Агар шумо муҳандиси додаҳо бошед, ин кор оддӣ аст (на осон, балки оддӣ):
ба моликият, сифат, тафаккури платформавӣ ва муошират такя кунед. Бигзор зеҳни сунъӣ вазифаҳои асосиро идора кунад, дар ҳоле ки шумо қисмҳои муҳимро идора мекунед.

Ва бале - баъзан ин маънои калонсол будан дар ҳуҷраро дорад. На зебо. Аммо оромона ва пурқувват 😄

Оё зеҳни сунъӣ муҳандисони додаҳоро иваз мекунад?
Он баъзе вазифаҳоро иваз мекунад, зинапояро аз нав месозад ва беҳтарин муҳандисони додаҳоро боз ҳам арзишмандтар мегардонад. Ин қиссаи воқеӣ аст.

Саволҳои зиёд такрормешуда

Оё зеҳни сунъӣ муҳандисони додаҳоро пурра иваз мекунад?

Дар аксари ташкилотҳо, зеҳни сунъӣ эҳтимоли бештар дорад, ки вазифаҳои мушаххасро ба ӯҳда гирад, на ин ки нақшро пурра аз байн барад. Он метавонад таҳияи SQL, сохтмони лӯлаҳо, гузаришҳои аввалини ҳуҷҷатгузорӣ ва эҷоди санҷишҳои асосиро суръат бахшад. Аммо муҳандисии додаҳо инчунин моликият ва масъулиятро дар бар мегирад, илова бар ин, кори ноҷолиб барои ба амал овардани воқеияти бесарусомони тиҷоратӣ мисли як системаи боэътимод. Ин қисмҳо то ҳол аз одамон талаб мекунанд, ки муайян кунанд, ки "дуруст" чӣ гуна аст ва ҳангоми вайрон шудани корҳо масъулиятро ба дӯш гиранд.

Кадом қисмҳои муҳандисии додаҳоро зеҳни сунъӣ аллакай автоматӣ мекунад?

Соҳиби зеҳни сунъӣ дар корҳои такроршаванда беҳтарин натиҷаҳоро медиҳад: тартиб додан ва аз нав коркард кардани SQL, тавлиди скелетҳои модели dbt, шарҳ додани хатогиҳои маъмулӣ ва таҳияи контурҳои ҳуҷҷатгузорӣ. Он инчунин метавонад санҷишҳоро ба монанди санҷиши сифр ё беназирӣ анҷом диҳад ва рамзи "часпак"-и шаблонро барои абзорҳои оркестрӣ тавлид кунад. Бурд дар импулс аст - шумо ба ҳалли корӣ наздиктар мешавед - аммо шумо бояд дурустиро тасдиқ кунед ва боварӣ ҳосил кунед, ки он ба муҳити шумо мувофиқат мекунад.

Агар зеҳни сунъӣ тавонад SQL ва қубурҳоро нависад, барои муҳандисони додаҳо чӣ боқӣ мемонад?

Бисёр чизҳо: муайян кардани шартномаҳои додаҳо, коркарди гардиши схемаҳо ва таъмини он, ки лӯлаҳои додаҳо комилан номунтазам, мушоҳидашаванда ва барқароршаванда бошанд. Муҳандисони додаҳо вақтро барои таҳқиқи тағйироти метрикӣ, сохтани деворҳои муҳофизатӣ барои корбарони поёноб ва идоракунии муомилоти арзиш ва эътимоднокӣ сарф мекунанд. Кор аксар вақт ба эҷоди эътимод ва "ором" нигоҳ доштани платформаи додаҳо вобаста аст, яъне он қадар устувор аст, ки ҳеҷ кас набояд ҳар рӯз дар ин бора фикр кунад.

Чӣ гуна зеҳни сунъӣ кори ҳаррӯзаи муҳандиси додаҳоро тағйир медиҳад?

Он одатан қолаби қолабӣ ва "вақти ҷустуҷӯ"-ро кам мекунад, аз ин рӯ шумо вақти камтарро барои чопкунӣ ва вақти бештарро барои баррасӣ, тасдиқ ва тарроҳӣ сарф мекунед. Ин тағйирот нақшро ба сӯи муайян кардани интизориҳо, стандартҳои сифат ва намунаҳои такроран истифодашаванда ба ҷои рамзгузории дастӣ ба сӯи он тела медиҳад. Дар амал, шумо эҳтимолан корҳои шарикии бештарро бо маҳсулот, амният ва молия анҷом медиҳед - зеро эҷоди натиҷаҳои техникӣ осонтар мешавад, аммо идора кардан душвортар мешавад.

Чаро зеҳни сунъӣ бо таърифҳои норавшани тиҷоратӣ ба монанди "корбари фаъол" мубориза мебарад?

Азбаски мантиқи тиҷорат статикӣ ё дақиқ нест - он дар миёнаи лоиҳа тағйир меёбад ва аз ҷониби ҷонибҳои манфиатдор фарқ мекунад. Смарт-зеҳн метавонад тафсиреро таҳия кунад, аммо вақте ки таърифҳо таҳаввул меёбанд ё низоъҳо ба миён меоянд, он наметавонад соҳиби қарор бошад. Муҳандисии додаҳо аксар вақт гуфтушунид, ҳуҷҷатгузории фарзияҳо ва табдил додани талаботи норавшан ба шартномаҳои пойдорро талаб мекунад. Ин кори "ҳамоҳангсозии инсонӣ" сабаби асосии аз байн нарафтани нақш ҳатто бо беҳтар шудани абзорҳо мебошад.

Оё зеҳни сунъӣ метавонад идоракунии маълумот, махфият ва риояи қонунҳоро бехатар идора кунад?

Зеҳни сунъӣ метавонад дар таҳияи сиёсатҳо ё пешниҳоди равишҳо кӯмак расонад, аммо татбиқи бехатар ҳанӯз ҳам муҳандисии воқеӣ ва назорати бодиққатро талаб мекунад. Идоракунӣ назорати дастрасӣ, коркарди PII, қоидаҳои нигоҳдорӣ, пайгирии аудит ва баъзан маҳдудиятҳои истиқоматро дар бар мегирад. Инҳо соҳаҳои хавфи баланд мебошанд, ки дар онҳо "қариб дуруст" қобили қабул нест. Одамон бояд қоидаҳоро тарҳрезӣ кунанд, иҷрои онҳоро тафтиш кунанд ва барои натиҷаҳои риояи онҳо масъул бошанд.

Ҳангоми беҳтар шудани зеҳни сунъӣ кадом малакаҳо барои муҳандисони додаҳо арзишманд боқӣ мемонанд?

Малакаҳое, ки системаҳоро устувор мегардонанд: тафаккури тарроҳии система, муҳандисии сифати маълумот ва стандартикунонии ба платформа нигаронидашуда. Шартномаҳо, мушоҳидашавандагӣ, одатҳои вокуниш ба ҳодисаҳо ва таҳлили сабабҳои решаи интизомӣ вақте муҳимтар мешаванд, ки одамони бештар метавонанд артефактҳои додаҳоро зуд тавлид кунанд. Муошират инчунин ба фарқкунанда табдил меёбад - мутобиқ кардани таърифҳо, навиштани ҳуҷҷатҳои равшан ва шарҳ додани муомилаҳо бидуни драма қисми муҳими нигоҳ доштани эътимоднокии маълумот мебошад.

Кадом нақшҳои муҳандисии додаҳо аз ҷониби зеҳни сунъӣ ва абзорҳои идорашаванда бештар зери хатар қарор доранд?

Нақшҳое, ки ба таври маҳдуд ба воридкунии такрорӣ ё қубурҳои гузоришдиҳии стандартӣ нигаронида шудаанд, бештар фош мешаванд, хусусан вақте ки пайвасткунакҳои ELT-и идорашаванда аксари манбаъҳоро фаро мегиранд. Кори дорои моликияти кам ва кор бо чипта метавонад коҳиш ёбад, зеро зеҳни сунъӣ ва абстраксия талошро барои ҳар як қубур кам мекунанд. Аммо ин одатан ба назар чунин мерасад, ки шумораи камтари одамон вазифаҳои такрориро иҷро мекунанд, на "муҳандисони додаҳо". Нақшҳои дорои моликияти баланд, ки ба эътимоднокӣ, сифат ва эътимод нигаронида шудаанд, пойдор боқӣ мемонанд.

Чӣ тавр ман бояд абзорҳоеро ба монанди GitHub Copilot ё dbt бо зеҳни сунъӣ бидуни эҷоди бесарусомонӣ истифода барам?

Натиҷаи зеҳни сунъиро ҳамчун лоиҳа, на ҳамчун қарор баррасӣ кунед. Онро барои тавлиди скелетҳои дархостҳо, беҳтар кардани хондан ё сохтани санҷишҳо ва ҳуҷҷатҳои dbt истифода баред, сипас онро дар муқоиса бо маълумоти воқеӣ ва ҳолатҳои канорӣ тасдиқ кунед. Онро бо конвенсияҳои қавӣ ҷуфт кунед: шартномаҳо, стандартҳои номгузорӣ, санҷишҳои мушоҳидавӣ ва амалияҳои баррасӣ. Ҳадаф интиқоли зудтар бидуни қурбон кардани эътимоднокӣ, назорати хароҷот ё идоракунӣ мебошад.

Адабиёт

  1. Комиссияи Аврупо - Шарҳи ҳифзи маълумот: принсипҳои GDPR - commission.europa.eu

  2. Дафтари Комиссари иттилоот (ICO) - Маҳдудияти нигоҳдорӣ - ico.org.uk

  3. Комиссияи Аврупо - Маълумотро чӣ қадар вақт нигоҳ доштан мумкин аст ва оё навсозии он зарур аст? - commission.europa.eu

  4. Институти миллии стандартҳо ва технология (NIST) - Чаҳорчӯбаи махфият - nist.gov

  5. Маркази захираҳои амнияти компютерии NIST (CSRC) - SP 800-92: Дастур оид ба идоракунии сабтҳои амнияти компютерӣ - csrc.nist.gov

  6. Маркази амнияти интернет (CIS) - Идоракунии сабти аудит (CIS Controls) - cisecurity.org

  7. Ҳуҷҷатҳои Snowflake - Сиёсатҳои дастрасӣ ба сатрҳо - docs.snowflake.com

  8. Ҳуҷҷатҳои Google Cloud - Амнияти сатҳи сатри BigQuery - docs.cloud.google.com

  9. BITOL - Стандарти шартномаи маълумоти кушода (ODCS) v3.1.0 - bitol-io.github.io

  10. BITOL (GitHub) - Стандарти шартномаи маълумоти кушода - github.com

  11. Apache Airflow - Ҳуҷҷатгузорӣ (устувор) - airflow.apache.org

  12. Apache Airflow - DAGs (мафҳумҳои асосӣ) - airflow.apache.org

  13. Ҳуҷҷатҳои озмоишгоҳҳои dbt - dbt чист? - docs.getdbt.com

  14. Ҳуҷҷатҳои озмоишгоҳҳои dbt - Дар бораи моделҳои dbt - docs.getdbt.com

  15. Ҳуҷҷатҳои dbt Labs - Ҳуҷҷатҳо - docs.getdbt.com

  16. Ҳуҷҷатҳои озмоишгоҳҳои dbt - Санҷишҳои маълумот - docs.getdbt.com

  17. Ҳуҷҷатҳои озмоишгоҳҳои dbt - Қабати семантикии dbt - docs.getdbt.com

  18. Ҳуҷҷатҳои Fivetran - Оғоз - fivetran.com

  19. Fivetran - Пайвасткунакҳо - fivetran.com

  20. Ҳуҷҷатҳои AWS - Дастури таҳиягари AWS Lambda - docs.aws.amazon.com

  21. GitHub - Нусхаи GitHub - github.com

  22. Ҳуҷҷатҳои GitHub - Гирифтани пешниҳодҳои рамз дар IDE-и худ бо GitHub Copilot - docs.github.com

  23. Microsoft Learn - GitHub Copilot барои SQL (васеъкунии VS Code) - learn.microsoft.com

  24. Ҳуҷҷатҳои Dynatrace - Мушоҳидашавандагии маълумот - docs.dynatrace.com

  25. DataGalaxy - Мушоҳидашавандагии маълумот чист? - datagalaxy.com

  26. Ҳуҷҷатҳо дар бораи интизориҳои бузург - Шарҳи мухтасари интизориҳо - docs.greatexpectations.io

Навтарин зеҳни сунъиро дар мағозаи расмии ёвари зеҳни сунъӣ пайдо кунед

Дар бораи мо

Бозгашт ба блог