Թեմայի վերաբերյալ հրապարակումներ 'data-engineering'
Իրական ժամանակի մշակում Apache Flink-ում — PyFlink Մաս 3
Նախորդ բլոգում մենք քննարկել ենք խմբաքանակի մշակումը Apache flink-ում , այս մեկում մենք կանդրադառնանք, թե ինչպես է Apache flink-ը գործնականում մշակում իրական ժամանակի տվյալները:
Սկսենք
Իրական ժամանակի մշակումը տվյալների մշակման ժամանակակից համակարգերի կարևոր բաղադրիչն է: Տվյալները մշակվում են իրական ժամանակում, երբ դրանք մտնում են համակարգ, և արդյունքները ստացվում են գրեթե ակնթարթորեն:
Apache Flink-ը բաց կոդով հոսքերի մշակման հզոր շրջանակ է՝ իրական ժամանակի մշակման..
Բացահայտելով տվյալների ճարտարագիտության հրաշալիքները
Ես ոգեշնչվեցի գրել այս ստեղծագործությունը՝ ազդվելով մի քանի մասնագիտական սցենարներից, իմ անձնական փորձառություններից, լայնածավալ ընթերցումներից և բազմաթիվ քննարկումներից: Տվյալների ճարտարագիտության վերաբերյալ այս հաղորդագրության մեջ երկու միջադեպ ծառայեցին որպես կատալիզատոր.
Միջադեպ_1. Համայնքի գործառույթի ժամանակ: Մասնագիտությանս ու աշխատանքիս մասին հարցնելու մասին։ Ես զվարճացրի միջոցառման մենեջերին՝ ներկայանալով որպես «Տվյալների ինժեներ»: Տեսնելով նրա շփոթմունքը՝ ես..
Ինչպես կարդալ աղյուսակների / excel-ի ցանկացած ձևաչափեր՝ օգտագործելով Pandas [CSV, XLSX, XLS, TXT…]
Այս բլոգում ես ցանկանում եմ օգնել ձեզ հեշտությամբ ներմուծել excel ֆայլեր ցանկացած ֆայլի ընդարձակմամբ: Ավելի կոնկրետ, օգտագործեք միայն մեկ գործառույթ՝ ցանկացած excel ձևաչափ կարդալու համար (ներառյալ ավտոմատ կերպով ստանալ անջատիչ/սահմանազատիչ, որն օգտագործվում է ներսում):
Պահանջվող փաթեթներ՝
պանդաներ ՝ python բաց կոդով տվյալների վերլուծության և մանիպուլյացիայի գործիք: https://pandas.pydata.org/ xlrd . գրադարան՝ Excel ֆայլերից տվյալների ընթերցման և ֆորմատավորման համար պատմական..
Նոր նյութեր
Օգտագործելով Fetch Vs Axios.Js-ը՝ HTTP հարցումներ կատարելու համար
JavaScript-ը կարող է ցանցային հարցումներ ուղարկել սերվեր և բեռնել նոր տեղեկատվություն, երբ դա անհրաժեշտ լինի: Օրինակ, մենք կարող ենք օգտագործել ցանցային հարցումը պատվեր ներկայացնելու,..
Տիրապետել հանգստության արվեստին. մշակողի ուղեցույց՝ ճնշման տակ ծաղկելու համար
Տիրապետել հանգստության արվեստին. մշակողի ուղեցույց՝ ճնշման տակ ծաղկելու համար
Ինչպե՞ս հանգստացնել ձեր միտքը և աշխատեցնել ձեր պրոցեսորը:
Ինչպես մնալ հանգիստ և զարգանալ ճնշման տակ...
Մեքենայի ուսուցում բանկային և ֆինանսների ոլորտում
Բարդ, խելացի անվտանգության համակարգերը և հաճախորդների սպասարկման պարզեցված ծառայությունները բիզնեսի հաջողության բանալին են: Ֆինանսական հաստատությունները, մասնավորապես, պետք է առաջ մնան կորի..
Ես AI-ին հարցրի կյանքի իմաստը, այն ինչ ասում էր, ցնցող էր:
Այն պահից ի վեր, երբ ես իմացա Արհեստական ինտելեկտի մասին, ես հիացած էի այն բանով, թե ինչպես է այն կարողանում հասկանալ մարդկային նորմալ տեքստը, և այն կարող է առաջացնել իր սեփական արձագանքը դրա..
Ինչպես սովորել կոդավորումը Python-ում վագրի պես:
Սովորելու համար ծրագրավորման նոր լեզու ընտրելը բարդ է: Անկախ նրանից, թե դուք սկսնակ եք, թե առաջադեմ, դա օգնում է իմանալ, թե ինչ թեմաներ պետք է սովորել: Ծրագրավորման լեզվի հիմունքները, դրա..
C++-ի օրական բիթ(ե) | Ամենաերկար պալինդրոմային ենթաշարը
C++ #198-ի ամենօրյա բիթ(ե), Ընդհանուր հարցազրույցի խնդիր. Ամենաերկար պալինդրոմային ենթատող:
Այսօր մենք կանդրադառնանք հարցազրույցի ընդհանուր խնդրին. Ամենաերկար palindromic substring...
Kydavra ICAReducer՝ ձեր տվյալների ծավալայինությունը նվազեցնելու համար
Ի՞նչ է ICAReducer-ը:
ICAReducer-ն աշխատում է հետևյալ կերպ. այն նվազեցնում է նրանց միջև բարձր փոխկապակցված հատկանիշները մինչև մեկ սյունակ: Բավականին նման է PCAreducer-ին, չնայած այն..