Microsoft parla de la integració d'Azure Data Lake i Hadoop

Azure Data Lake, com a U-SQL, permet als usuaris combinar codi definit a mida en SQL. La seva capacitat de consulta distribuïda escalable permet una anàlisi eficient de les dades emmagatzemades a tots els servidors SQL d'Azure, Azure SQL Database i Azure SQL Data Warehouse.

  • Azure HDInsight, un servei de clúster d'Apache Hadoop gestionat que utilitza motors d'anàlisi de codi obert com Hive, Spark, HBase i Storm. HDInsight ara està disponible als clústers gestionats a Linux.
  • Raghu Ramakrishnan, membre tècnic de les plataformes de dades de Microsoft, ha aprofitat l'oportunitat d'avui descriu com aquests serveis van arribar a ser amb una mena de sinceritat entre bastidors.
    Ramakrishnan era un antic empleat de Yahoo que va treballar en profunditat amb Hadoop i moltes altres eines de codi obert. Apache Hadoop és un marc de programari de codi obert d'emmagatzematge i processament distribuït de conjunts molt grans de dades. Es basa en el supòsit que els sistemes o clústers únics poden fallar, i el marc ha de gestionar-ho automàticament.
    Quan Ramakrishnan va arribar a Microsoft, es va dedicar a integrar Hadoop a l'estratègia de big data de Microsoft. Això va ser després de veure que els enginyers i analistes de Microsoft feien servir de manera productiva eines com Cosmos i Scope per gestionar, processar i analitzar fàcilment les grans dades en entorns escalables massius. Aleshores, estava convençut que volia combinar la productivitat avançada que va trobar a Microsoft amb la vibrant obertura i flexibilitat que es troba a l'ecosistema Hadoop.
    I ho va aconseguir. HDInsight, Azure Data Lake, Azure Data Lake Store i diversos altres serveis d'Azure ofereixen una integració estreta d'Hadoop.
    El tema central de les anècdotes de Ramakrishnan és el nou compromís de Microsoft de contribuir al codi obert. A més de ser un gran col·laborador del projecte Apache Hadoop i el seu element principal, HDFS, l'empresa continua sent un gran contribuent a Fil d'Apache projecte. La pròpia companyia està incorporant activament Hadoop i YARN als seus fluxos de treball de big data. Això requereix que Microsoft faci créixer les capacitats de YARN per adaptar-se millor a les necessitats de l'empresa; addicions que després retorna a la comunitat de codi obert.
    Algunes de les contribucions significatives de Microsoft a YARN inclouen:



    • Suport per a la preempció per conservar el treball (YARN-45).
    • Rayon (YARN-1051), un component de reserva de recursos que s'envia amb la versió Hadoop 2.6.
    • Mercury (YARN-2877) i Tetris (YARN-2745), ambdós milloren el programador YARN.
    • REEF (Retainable Evaluator Execution Framework) un marc que s'executa a la part superior de YARN que facilita els treballs basats en l'aprenentatge automàtic.

    Altres contribucions destacades fora de YARN inclouen

    • Hardoop a Azure i Windows
    • Rusc i ORC
    • Suport OAuth2 a WebHDFS
    • Spark Kernel per a Jupyter

    El pivot de l'empresa cap a la bondat de codi obert també s'estén molt més enllà de les seves ofertes al núvol. Com hem informat anteriorment, Microsoft ha de codi obert diversos components tradicionalment propietaris, com ara el CoreCLR , el Compilador Rosyln , i Escriptor en viu . També ha creat projectes de codi obert completament nous, com ara la seva eina de portació d'iOS, Facebook SDK, WinJS , i TypeScript .
    Els productes i serveis de Microsoft estan canviant ràpidament per ser el més inclusius possible amb altres productes, fins i tot competidors, tot per atendre millor les necessitats úniques dels seus clients. Azure Data Lake i la seva integració amb l'ecosistema Hadoop és l'última prova de la nova estratègia a llarg termini de Microsoft.







    Articles D'Interès

    Els usuaris d'escriptori d'Skype tenen una llista de converses i de xat paral·lelament

    Atenent als comentaris dels usuaris, l'equip de Skype de Microsoft està treballant per recuperar els panells de xat durant les trucades amb la seva darrera vista prèvia de Skype Insider.

    Mouse Computer vol llançar Windows 10 Mobile phablet al Japó

    Mouse Computer, un fabricant de maquinari japonès, està planejant el seu propi dispositiu Windows 10 Mobile, el phablet MADOSMA Q601.

    WPC14: Windows 9 (Threshold) serà un gran sistema operatiu empresarial de classe mundial

    Durant la Worldwide Partner Conference (WPC) d'avui, el COO de Microsoft, Kevin Turner, va parlar sobre l'empresa i els seus productes empresarials. Turner també breument

    Craig Mundie de Microsoft parla del futur de les tauletes

    Des del llançament de l'iPad original l'any passat, les tauletes en forma de pissarres han guanyat increïbles

    Resum de notícies de Xbox: l'aplicació Kodi es llança a Xbox One, Games for Gold es llança abans i molt més

    Fes una ullada a la nostra sèrie setmanal de notícies de Xbox, on repassem les històries més destacades de la setmana passada al món de Xbox.

    Microsoft ofereix una actualització de Windows 8 Pro als estudiants per 69,99 dòlars a partir de l'1 de febrer

    Amb l'oferta d'actualització de Windows 8 que s'acabarà aviat, aquells que encara no hagin premut el disparador per passar a Windows 8 acabaran pagant 199,99 dòlars per l'actualització de Windows 8 Pro. Per als estudiants, Microsoft ofereix una oferta especial sobre l'actualització per 69,99 dòlars que finalitza el 19 de març.

    L'aplicació PayPal Here a la botiga de Windows pot ajudar a fer del Surface Pro 3 una alternativa de TPV legítima

    El joc d'aplicacions semblant a un talp tant a Window Store com a Windows Phone està arribant a un ritme vertiginós últimament. Algunes aplicacions s'estan retirant o perdent

    Valve està treballant en un ordinador de joc portàtil basat en Linux

    Les guerres de consoles poden tenir aviat un participant tardà a Valve, ja que apareixen rumors que aquesta empresa està treballant en la seva pròpia peça de maquinari.

    No, gent, el Microsoft Surface no va costar als Patriots una aparició al Super Bowl

    N'hi ha prou amb dir que no va ser una avaria temporal dels dispositius Surface de Microsoft el que va provocar la pèrdua dels Patriots.

    Com instal·lar una instal·lació d'inici nou de Windows 10

    La seguretat de Windows (anteriorment coneguda com a Centre de seguretat de Windows Defender) és un bon començament per veure que el vostre dispositiu Windows 10 funciona correctament. Sota Windows

    El vídeo b-roll HoloLens de Microsoft indica els usos potencials de la realitat augmentada

    Destinat a periodistes de radiodifusió, aquest metratge amb qualitat de transmissió destaca Microsoft HoloLens. Microsoft HoloLens és el primer del món totalment sense connexió

    WWE 2K20, The Elder Scrolls Online i Monster Energy Supercross 3 es poden jugar gratis amb Xbox Live Gold aquest cap de setmana

    Des d'ara fins diumenge, WWE 2K20, The Elder Scrolls Online Tamriel Unlimited i Monster Energy Supercross 3 estan disponibles a Xbox One.

    Prepareu-vos per reservar Shantae i Trackmania Turbo a Xbox One

    Dos nous videojocs ja estan disponibles per a la comanda i la baixada prèvia a la consola Xbox One de Microsoft, Trackmania Turbo i Shantae And The Pirate's Curse.

    Com activar o desactivar Adobe Flash Player a Microsoft Edge

    Per a aquells de vosaltres que utilitzeu Windows 10 i voleu desactivar Adobe Flash a Microsoft Edge, aquí teniu un consell ràpid per activar o desactivar Flash. Flash d'Adobe

    SkyDrive ara té URL curts amb SDRV.MS, també afegeix compatibilitat amb OpenGraph

    Microsoft ha fet disponibles alguns canvis nous al seu servei SkyDrive. SkyDrive ara inclou un 40%

    El vídeo conceptual Xbox 2042 de Microsoft mostra vídeos de 32K, 240 FPS, hologrames i molt més

    Microsoft va publicar ahir a la nit un vídeo força genial i, al principi aparentment aleatori, al canal oficial de YouTube de Xbox que presenta una àmplia gamma de emocionants

    La bossa per portàtil Bolt Crossbody de Waterfield Designs és una bossa compacta perfecta per a la vostra Surface

    La bossa per a portàtils Bolt Crossbody d'estil vertical s'adapta a la necessitat d'una bossa compacta si només voleu portar l'equip essencial.

    L'actualització d'octubre de 2018 de Xbox One està disponible amb nous avatars de Xbox, suport Dolby Vision i integració d'Alexa

    L'última actualització del sistema per a Xbox One ofereix diverses funcions noves, com ara els avatars Xbox Live redissenyats i una nova habilitat de Xbox per a Alexa i Cortana.

    Microsoft obrirà un altre centre tecnològic, aquesta vegada a prop de casa a Bellevue, WA

    Microsoft obre avui un nou centre tecnològic a Bellevue, WA per permetre als clients empresarials locals conèixer més sobre la creixent cartera de solucions empresarials de la companyia.

    Microsoft Wallet guanya suport per a dos bancs nous, PNC i US Bank

    Microsoft Wallet, la nova aplicació de Windows 10 Mobile de la companyia dissenyada per a pagaments mòbils i recollida de targetes de fidelització, està rebent suport per a dos bancs nous als EUA, el banc dels EUA i el PNC.

    Far Cry 4 per a Xbox One i Windows PC rebrà l''Actualització del títol 5' el 4 de febrer

    Demà, els fans de Far Cry 4 tenen alguna cosa emocionant per esperar. Ubisoft està preparat per llançar 'Actualització del títol 5' per a totes les plataformes, incloses Xbox One i PC.

    El nou Surface Pro X Unboxing i primeres impressions (vídeo)

    Avui farem una ullada ràpida a tot això i desempaquetarem el Surface Pro X i compartirem algunes impressions inicials abans de la nostra revisió completa durant les properes setmanes.

    El nou centre d'administració d'Office 365 ja està disponible de manera general i obté un nou tauler de control de salut del servei

    Microsoft està millorant la funcionalitat de les eines d'administració, inclosa la versió general del Centre d'administració d'Office 365 i un nou tauler de control de salut del servei.

    S'han anunciat nous ordinadors portàtils HP Stream amb Windows 10

    HP ha presentat ahir la seva nova família d'ordinadors portàtils Stream basats en Windows, aportant diverses funcions noves i millores a la gamma de portàtils ja molt assequibles.

    Quin navegador web he d'utilitzar al meu PC amb Windows 10?

    El vostre navegador web és una de les vostres aplicacions més utilitzades, per la qual cosa és important triar la que us convingui millor. En aquest article, en repassarem alguns