Talend Tutorial – mikä on Talend ETL Tool?
Prafulla Ranadive
Talend opetusohjelman yhteenveto
Tässä Talend-opetusohjelmassa opit kaikki käsitteet tyhjästä. Tämä opetusohjelma kattaa perus- ja edistykselliset aiheet, kuten Mikä on talend, talend-työkalun historia, talend big data, talend-työkalun avulla tapahtuvan tiedon integroinnin edut, avoimen studion arkkitehtuuri ja talend avoimen studion laajennukset. Tämä talend-opetusohjelma on täysin ilmainen.
Mikä on Talend?
Talend on avoimen lähdekoodin ohjelmistoalusta, joka tarjoaa tiedon integrointi- ja tiedonhallintaratkaisuja. Talend on erikoistunut big datan integrointiin. Tämä työkalu tarjoaa ominaisuuksia, kuten pilvi, big data, yrityssovellusten integrointi, tiedon laatu ja perustietojen hallinta. Se tarjoaa myös yhtenäisen arkiston metatietojen tallentamista ja uudelleenkäyttöä varten.
Se on saatavana sekä avoimen lähdekoodin että premium-versiona. Se on yksi parhaista työkaluista pilvilaskentaan ja big data yhdentymistä.
Talendin historia
| Vuosi | Virstanpylväs |
|---|---|
| 2002 | T & K- |
| 2005 | Yrityksen perustaminen – Ensimmäinen rahoituskierros AGF private equity & Galle Partners |
| 2006 | Open Studio V1.0 – käynnisti Us-toiminnan |
| 2007 | Integraatiopaketti / suljettu toinen rahoituskierros |
| 2008 | Avaa Profiler/ Data Quality |
| 2009 | Integration Suite RTx/MPx/MDM hankinta |
| 2010 | IDM Community Edition / MDM Enterprise Edition |
| Avoin studio V | |
| 2014 | OW2 paras projekti |
| 2015 | Tunnustettu trendejä luova tuote |
| 2016 | DBTA 100 |
| 2017 | Gartner Magic Quadrant tietojen integrointityökaluille |
| 2021 | Natiivi ompeleen integrointi Amazon Redshift-konsoli |
Talend Product Suite
Talend Product Suites koostuu kolmesta päätuotteesta, kuten alla on käsitelty:
Talend Big Data
Talend-työkalu voi helposti automatisoida ison datan integroinnin graafisten työkalujen ja ohjattujen toimintojen avulla. Tämä antaa organisaatiolle mahdollisuuden kehittää ympäristön, jossa se voi helposti työskennellä Apache Hadoopin kanssa, Sparkja NoSQL-tietokantoja pilvi- tai paikallisiin töihin.
Nykyään monet yritykset käyttävät Hadoopia kustannussäästöihin ja suorituskyvyn parantamiseen. Usein yritykset käyttävät kallista laskenta-aikaa yritysratkaisuissa. Hadoopin avulla dataa voidaan muuntaa puhdistettuna, rikastutettuna ja integroida korkeampaa analyyttistä työmäärää varten.
Talend Sandbox sisältää neljä käyttökoteloa
- Tietovaraston optimointi
- Clickstream Analytics
- Sosiaalisen median tunneanalyysi
- Apache-blogianalyysi.
Voit luoda omia monimutkaisia käyttötapauksia.
Edut Talend for Big Data Hadoop
- Paranna big data -työsuunnittelun tehokkuutta järjestämällä ja konfiguroimalla graafinen käyttöliittymä.
- Lisää tiedon laatua, skaalautuvuutta ja hallintatoimintoja
- MapReduce-ominaisuus mahdollistaa nopeamman rinnakkaistietojen käsittelyn
- Jaettu tietovarasto ja etäkäyttöönotto
- Tietojen laatu ja profilointi Data Cleansingin avulla
- Parantaa big data -töiden suunnittelun tehokkuutta graafisen käyttöliittymän avulla
- Alkuperäinen tuki HBase, HDFS, Pesä, SqoopPig
- Upotettu Hortonworks Data Platformiin
Tietojen integrointi
Talend tietojen integrointiohjelmisto työkalulla on avoin, skaalautuva arkkitehtuuri. Se mahdollistaa nopeamman vastauksen yritysten pyyntöihin. Työkalu tarjoaa tietojen integrointitöiden kehittämisen ja käyttöönoton käsin koodaamista nopeammin.
Sen avulla voit helposti integroida kaikki tietosi muihin tietovarastoihin tai synkronoida tietoja järjestelmien välillä. Tietojen integrointi tarkoittaa eri lähteisiin tallennettujen tietojen yhdistämistä ja käyttäjille yhtenäisen näkemyksen tarjoamista näistä tiedoista. Sen avulla voit hallita erilaisia ETL-töitä ja antaa käyttäjille mahdollisuuden yksinkertaiseen itsepalvelutietojen valmisteluun.
Edut Talend for Data Integration
Ketterä integrointi: Vastaa nopeammin yrityspyyntöihin kirjoittamatta koodia yli 1000:lla valmiilla liittimellä, Eclipse-pohjaiset graafiset työkalut ja suorituskykyyn optimoitu koodigeneraattori.
Joukkueen tuottavuus: Tee yhteistyötä tehokkaan versioinnin, vaikutusanalyysin, testauksen ja virheenkorjauksen sekä metatietojen hallinnan avulla.
Helppo hallinta: Työkalu tarjoaa edistyneitä ajoitus- ja valvontaominaisuuksia. Se tarjoaa reaaliaikaisen tietojen integroinnin kojelaudoilla ja keskitetyn ohjauksen nopeaa käyttöönottoa varten useissa solmuissa.
Pysy kilpailussa edellä: Jos käytät tätä työkalua, sinun ei tarvitse odottaa uusimpien ja tyylikkäimpien tietojen integrointiominaisuuksien käyttöä.
Maksa alin hinta omistuksesta: Talend-työkalu tarjoaa tilauspohjaisen hinnoittelumallin. Sinun on maksettava Talend Studiota käyttävien kehittäjien määrästä, mikä säästää rahaa verrattuna kiinteään lisensointiin.
Integraatiopilvi
Voit nopeuttaa pilvi- ja paikallisten tietojen integrointiprojekteja käyttämällä erittäin skaalautuvaa ja turvallista pilviintegraatioalustaa palveluna (iPaaS). Talend-integraatiopilvityökalu tarjoaa liitettävyyden, sisäänrakennetun tiedonlaadun ja alkuperäisen koodin luomisen.
Talend on suojattu pilviintegraatioalusta, jonka avulla IT- ja yrityskäyttäjät voivat muodostaa yhteyden sekä jaettuun verkkoon että paikan päällä. Se vapauttaa pilvisuunnittelutyön tehon, koska se voi hallita, valvoa ja ohjata pilvessä.
Seuraavaksi tässä esimerkkejä sisältävässä Talend-opetusohjelmassa opimme Talend-integraatiopilven eduista muihin työkaluihin verrattuna.
Integroinnin pilvi edut
| Talend Integration Cloud | Muut työkalut |
|---|---|
| Yli 900 vedä ja pudota -komponenttia | Käsin koodaus, joka on tuottamatonta |
| Luo optimoidun koodin | Tarvitaan erikoisosaamista |
| Yhteistyö ja hallinta | Vaikea ylläpitää |
| Kultatuki (SLA) | Rajoitettu tuki |
Mikä on Talend Open Studio?
Talend Open Studio on avoin arkkitehtuuri tietojen integrointiin, datan profilointiin, big dataan, pilviintegraatioon ja muuhun.
Se on GUI-ympäristö, joka tarjoaa yli 1000 valmiiksi rakennettua liitintä. Tämän ansiosta tiedostojen muuntaminen, tietojen lataaminen, tiedostojen siirtäminen ja uudelleennimeäminen on helppoa. Sen avulla jokainen komponentti voi määritellä monimutkaisia prosesseja.
Integrointityöt luodaan Talend-komponenteista, jotka on määritetty koodauksen sijaan. Lisäksi töitä voidaan ajaa kehitysympäristöstä tai ne voidaan suorittaa itsenäisinä komentosarjoina.
Talend Open studion käytön edut
- Se lyhentää integraation kehittämiseen kuluvaa aikaa viikoista ja kuukausista päiviin tai jopa tunteihin.
- Se muuntaa ja päivittää tietoja eri lähteistä.
- Valvo ja hallitse vaikeita käyttöönottoja helposti
- Sinulla voi olla minkä tahansa ratkaisun alhaisimmat omistuskustannukset
- Talend Open Source voi helposti yhdistää, muuntaa ja päivittää eri lähteistä saatavilla olevia tietoja.
- Talend Open Source -työkalu Perii ohjelmointialustan mahdollisen tehon.
- Laaja valikoima lähde-/kohdeliittimiä tekee siitä alan parhaan valinnan.
- Mukana vahva usean skeeman lokitiedoston / täsmäytysraportin ominaisuus (tietovirran jälkeinen/siirto)
| Vanha ETL | Talend |
|---|---|
| Oikeudenmukainen moottori | avoin |
| Vaikea skaalata Big Dataa | Luo alkuperäisen koodin |
| Kallis | Alhainen TCO |
Talend Open Studio- Archirakenne
Nyt tässä Talend Open Studio -opetusohjelmassa opimme Talend avoimen studion arkkitehtuurista. Seuraavassa on Talend Open Studion 3 avainkomponenttia Archirakenne
Asiakkaat
Asiakkaat-lohko sisältää yhden tai useamman Talend Studion ja Web-selaimen, jotka käyttävät samaa tai eri koneita. Talend Studion avulla voit suorittaa tietojen integrointiprosesseja tietomäärien tasosta ja prosessin monimutkaisuudesta riippumatta.
Talend-palvelin
Talend-palvelin on toinen tärkeä lohko, joka sisältää web-pohjaisen sovelluspalvelimen. Se mahdollistaa kaikkien hankkeiden hallinnon ja ylläpidon. Se sisältää käyttäjätilit, käyttöoikeudet ja projektin käyttöoikeudet hallintatietokannassa.
tietokanta
Tietokannat-komponentti sisältää tietokantojen hallinnan, auditoinnin ja valvonnan. Tämä komponentti auttaa hallitsemaan käyttäjätilejä, käyttöoikeuksia ja projektin käyttöoikeuksia. Audit-tietokanta auttaa arvioimaan Jobsin eri puolia ideaalisen prosessilähtöisen päätöksenteon tukijärjestelmän kehittämiseksi.
Työtila
Talendissa työtila on hakemisto, johon tallennat kaikki projektikansiot. Tätä varten tarvitset kuitenkin vähintään yhden työtilahakemiston yhteyttä (arkistoyhteys) kohti. Talend mahdollistaa yhteyden muodostamisen eri työtilahakemistoihin siltä varalta, että et halua käyttää oletushakemistoja.
säilytyspaikka
Tietovarasto on tallennusalue, jota TOS-työkalu käyttää tietojen keräämiseen liiketoimintamallien selittämiseen tai työtehtävien suunnitteluun.
Talend Open Studio -laajennukset
Nyt tässä Talend ETL -opetusohjelmassa opimme Talendin avoimen studion laajennuksista:
- Talend Integration Suite
- Talend On Demand
- Talend Data Quality
- Talend ESB
- Talend Big Data Integration
Yhteenveto
- Talend on avoimen lähdekoodin ohjelmistoalusta, joka tarjoaa tiedon integrointi- ja tiedonhallintaratkaisuja
- Talend-ohjelmisto voi helposti automatisoida ison datan integroinnin graafisten työkalujen ja ohjattujen toimintojen avulla
- Talend Product Suite koostuu kolmesta päätuotteesta 3) Talend Big Data 1) Data Integration 2) Integration Cloud
- Talend tarjoaa datan eheyden, datakartoituksen ja eräkäsittelyn suurdataa ja datan integrointia varten.
- Talend ETL työkalu parantaa big data -työn suunnittelun tehokkuutta järjestämällä ja konfiguroimalla graafiseen käyttöliittymään
- Talend-tietojen integrointiohjelmistotyökalulla on avoin, skaalautuva arkkitehtuuri. Se mahdollistaa nopeamman vastauksen yritysten pyyntöihin.
- Talend-integraatiopilvityökalu tarjoaa liitettävyyden, sisäänrakennetun tiedonlaadun ja alkuperäisen koodin luomisen.
- Talend Open Studio on avoin arkkitehtuuri tietojen integrointiin, datan profilointiin, big dataan, pilviintegraatioon ja muuhun.
- Viisi Talend-studiolaajennusta ovat: Talend Integration Suite, Talend On Demand, Talend Data Quality, Talend Seanad Talend Big Data Integration
