Introduksjon om Talend Tools

Talend open studio har mer enn 700 komponenter i områder som big data, databaser, sky, etc. Talend open studio kan deles inn i mange som Talend open studio for Data Integration og Talend open studio for big data, etc. I denne artikkelen vil se de forskjellige verktøyene for talent i detalj.

Talend Open Studio Components / Tools

Talend Open Studio for dataintegrasjon dekker følgende områder / teknologier med noen innebygde komponenter som hjelper til med prosessering enkelt.

  • Big Data-komponenter
  • Virksomhetskomponenter
  • Business Intelligence-komponenter
  • Skykomponenter
  • Tilpassede kode komponenter
  • Datakvalitetskomponenter
  • Databaser - tradisjonelle komponenter
  • Databaser - apparater / datavarehuskomponenter
  • Databaser - andre komponenter
  • DotNET-komponenter
  • ELT-komponenter
  • ESB-komponenter
  • Filkomponenter
  • Internett-komponenter
  • Logger og feil-komponenter
  • Diverse gruppekomponenter
  • Orkestrasjonskomponenter
  • Behandler komponenter
  • Systemkomponenter
  • Talend MDM-komponenter
  • Tekniske komponenter
  • XML-komponenter

Her skal vi diskutere noen få komponenter fra Talend Open Studio for Data Integration.

1. tS3Connection: Denne komponenten brukes til å koble til med amazon s3. Komponenter kan bruke denne tilkoblingen for enkel konfigurering av tilkobling til amazon s3.

2. tS3Input: Dette brukes til å lese en fil fra S3-filsystemet. Den har noen funksjoner som ligner på tfileinputdelimited, men bruker Amazon Simple Storage-tjenesten.

3. tS3Output: Dette brukes til å skrive data til et S3-filsystem. Den har noen funksjoner som ligner på tfileoutputdelimited, men bruker Amazon Simple Storage-tjenesten.

4. ts3Put: Dette brukes til å sette en fil i et S3-filsystem fra et lokalt system.

5. ts3Get: Denne komponenten brukes til å hente en fil fra S3 inn i et lokalt system.

6. tS3BucketCreate: Denne komponenten brukes til å lage en bøtte på S3.

7. tS3BucketDelete: Denne komponenten brukes til å slette en bøtte på S3.

8. tS3BucketExist: Denne komponenten brukes til å sjekke om den gitte bøtta eksisterer på S3. Det returnerer resultatet i ekte eller falsk boolesk verdi som kan brukes som et globalt kart.

9. tS3BucketList: Denne komponenten brukes til å liste opp alle bøttene på S3.

10. tS3Copy: Denne komponenten brukes til å kopiere S3-objektet fra en bøtte til en annen bøtte. Det ligner tFileCopy.

11. tS3Delete: Denne komponenten brukes til å slette S3-objektet fra en bøtte. Det ligner tFileDelete.

12. tS3Close: Denne komponenten brukes til å lukke S3-tilkoblingen som opprettes med tS3Connection.

13. tCreateTemporaryFile: Denne komponenten oppretter en midlertidig fil som tFileOutputDelimited, men denne midlertidige filen kan enten slettes automatisk etter at jobben er fullført, eller den kan beholdes.

14. tFileArchive: Denne komponenten brukes til å lage en komprimert fil fra en eller flere filer. Kryptering kan også brukes i komprimering.

15. tFileCompare: Denne komponenten brukes til å sammenligne to filer og returnerer sammenligningsdata.

16. tFileUnarchive: Denne komponenten brukes til å komprimere en zip-fil.

17. tFileCopy: Denne komponenten brukes til å kopiere en fil eller mappe til en målkatalog.

18. tFileDelete: Denne komponenten brukes til å slette en fil eller mappe.

19. tFileExist: Denne komponenten brukes til å sjekke om det finnes en fil eller ikke. Det returnerer resultatet i ekte eller falsk boolesk verdi som kan brukes som global kart.

20. tFileInputExcel: Denne komponenten brukes til å lese en Excel-fil basert på skjemaet som er definert.

21. tMsgBox: Denne komponenten brukes til å vise en dialogboks med en OK-knapp.

22. tRowGenerator: Denne komponenten brukes til å lage et hvilket som helst antall rader med kolonner som har spesifikke verdier eller tilfeldige verdier. Det brukes mest til testformål og til å lage prøvefiler.

23. tIterateToFlow: Den brukes til å transformere en liste over strømmer til hovedstrømmen som betyr iterate-> rad-> main.

24. tFlowToIterate: Den brukes til å transformere hovedstrømmen til en liste over strømmer som betyr hoved-> rad-> iterat.

25. tLoop: Den brukes til å sløyfe en bestemt oppgave.

26. tReplicate: Det brukes til å gjenskape det innkommende skjemaet i to utstrømmer .

27. tRunJob: Den brukes til å kjøre en annen talentjobb i den nåværende jobben etter subjob ok.

28. tSleep: Den brukes til å gjøre stillingen til jobben eller bestemt subjob pause i en gitt tid på sekunder.

29. tWaitForFile: Den vil se på en bestemt katalog og vil utløse den neste komponenten basert på tilstand.

30.tMysqlBulkExec: Denne komponenten brukes til å tilby gevinst i ytelse mens du utfører Insert-operasjonene i en Mysql-database.

31. tMysqlClose: Denne komponenten brukes til å lukke mysql-tilkoblingen som er opprettet av tMysqlConnection.

32. tMysqlRow: Denne komponenten brukes til å kjøre SQL-spørringen direkte på MySQL-databasen.

33. tMysqlTableList: Denne komponenten brukes til å liste opp navnene på en tabell.

34. tMysqlColumnList: Denne komponenten brukes til å iterere alle kolonnene i en tabell.

35. tMysqlCommit: Denne komponenten brukes til å begå endringene som er gjort i Mysql-databasen.

36. tMysqlLastInsertId: Denne komponenten brukes til å få den siste innsatte nøkkelverdien

37. tMysqlOutputBulk: Denne komponenten brukes til å skrive en fil med kolonner basert på avgrenseren

38. tMysqlOutputBulkExec: Denne komponenten brukes til å skrive en fil med kolonner basert på avgrenseren og deretter kjører filen i Mysql-database.

39. tContextLoad: Denne komponenten brukes til å laste inn verdier i kontekst fra en inngangsstrøm. Kontekstvariablene bør opprettes før du legger inn verdiene i kontekstvariabler. Hvis kontekstvariablene ikke opprettes, vil det vise en advarsel.

40. tHiveClose: Denne komponenten brukes til å lukke forbindelsen opprettet ved hjelp av tHiveConnection.

41. tHiveConnection: Denne komponenten brukes til å opprette en Hive-tilkobling og kan gjenbrukes av andre Hive-komponenter.

42. tHiveRow: Denne komponenten brukes til å kjøre Hive-spørsmål direkte.

Konklusjon

  • HDFS-komponenter kan sees i Talend open studio for Big data.
  • thdfsinput, thdfsoutput er noen av komponentene, og de ligner på filkomponenter.
  • tHDFSInput - Leser fil lokalisert på et gitt Hadoop distribuert filsystem (HDFS). Den har noen funksjoner som ligner på tfileinputdelimited, men bruker et Hadoop distribuert filsystem.
  • tHDFSOutput- Skriver fil til Hadoop distribuert filsystem (HDFS).
  • Den har noen funksjoner som ligner på tfileoutputdelimited, men bruker et Hadoop distribuert filsystem.
  • tHDFSPut- Dette brukes til å sette en fil i HDFS-filsystem fra et lokalt system.
  • tHDFSGet- Denne komponenten som ble brukt til å hente en fil fra HDFS til et lokalt system.

Anbefalte artikler

Dette er en guide til Talend Tools. Her diskuterer vi introduksjon og talend åpne studiokomponenter eller verktøy for dataintegrasjon som inkluderer, tS3Connection, tS3Input, tS3Output, og ts3Put, etc. Du kan også se på følgende artikler for å lære mer -

  1. Talend Data Integration
  2. Gratis verktøy for dataanalyse
  3. Talend vs Mulesoft
  4. Typer datavisualisering
  5. Datavarehusdesign
  6. Typer og håndteringsfeil i JavaScript
  7. Hva er dataintegrasjon?

Kategori:

Stor Data