- Data Hackers Newsletter
- Posts
- Quais empregos que serão substituídos por IA? 💼
Quais empregos que serão substituídos por IA? 💼
Big Data Serverless: para de esperar o cluster subir!
Fala, Data Hackers! Já estava com saudades de escrever mais uma news para vocês!Essa news tem como destaque um dos episódios MAIS DIVERTIDOS E DESCONTRAÍDOS já gravados por nós: Conversamos sobre quais serão os empregos substituídos por IA.Será que Coach vai continuar existindo? E o Despachante? Trouxemos várias referências legais, algumas muito polêmicas, de empregos que podem estar com os dias contados.E tem muito mais:
Seja em Terminator ou em Cyberpunk 2077, o que mais vemos é robôs substituindo o ser humano nas atividades mundanas: de motorista até a medicina. Mas, longe das telinhas, vemos a cada dia o quanto, não só a robótica, mas sistemas de Inteligência Artificial estão fazendo atividades com excelência muito maior que nós. Quais os empregos que já estão atualmente?É isso que eu, Gabriel Lages e Paulo Vasconcellos trouxemos esse bate-papo ULTRA DIVERTIDO e com várias referências legais. Não perca!
Pra levantar centenas de milhões de linhas no Pandas, tem que malhar muuuuito kkkk. Nesse post, o Data Pythonista Marc Garcia mostra como subir esse volume todo de dados no Pandas sem ter problemas de memória, numa máquina padrão, que qualquer um de nós pode ter em casa.
Não só isso, ele traz um comparativo de performance com o nosso parrudo PyArrow e também traz referências de como fazer em outras linguagens Julia e C++
Speech recognition
é um importante desafio para IA: com esse tipo de solução, podemos evoluir muito na inclusão de pessoas com deficiência, além de aumentar nossa capacidade de processar dados, já que processar texto para IA é bem mais fácil. A OpenAI, para ajudar o mundo a resolver esse problema, decidiu abrir essa semana o Whisper, um algoritmo de reconhecimento de voz robusto e eficiente, não só em Inglês.
O paper
e o
. A performance em Português é incrível, muito próxima da de Inglês. (em Inglês)
Ah, se no meu tempo de faculdade existisse esse site, eu tinha repetido muito menos matérias kkkk Esse site compila os algoritmos mais comuns e complexos do mundo da Computação: da Busca Binária até o Desafio dos Palíndromos. E não só em C ou Pascal, mas em diversas linguagens, deixando tudo mais intuitivo.
Quer aprender o Quicksort? Tem lá. Quer saber a solução em Programação Dinâmica para o problema do Caixeiro Viajante? Tem também! Site perfeito para perder alguns minutos relembrando (talvez com um pouco de masoquismo) dos tempos de faculdade kkkk
(em Inglês)
O mestre Cícero Moura - Coordenador de Professional Services da Dadosfera e AWS Community Builder - fez esse post mega completo mostrando como usar todo o poder Serverless também para Engenharia de Dados. Usando AWS EMR Serverless e Airflow, Cícero mostra como fazer a forma mais prática de processar Big Data na nuvem atualmente. (em Português)
Trabalhar com muitas dimensões é o Caos. Precisa-se de grande poder de processamento e pode piorar a performance de alguns modelos. Mas, como tratar isso se você tem uma grande disponibilidade de dados e não quer desperdiçar nenhuma característica importante para sua análise? O Data Hacker Jonys Arcanjo traz nesse artigo o princípio da Navalha de Occam para mostrar como podemos enfrentar esse desafio. (em Português)
Fazendo uma Nuvem de Palavras no PythonDo Galvão Bueno aos professores de português, todo mundo gosta de nuvens de palavras né?! kkkk há controvérsias. Mesmo assim, nesse vídeo o mestre Leon Silva do Let's Data traz um guia rápido e prático de como criar uma nuvem de palavras diferente, que pode ser uma peça bem legal num artefato de análise descritiva de dados. Veja aí! (em Português)
VAGAS DA SEMANA
Superior em Computação, Estatística, Matemática, ou áreas afins;
Conhecimentos de Estatística e Machine Learning;
Data viz: Tableau ou Power BI;
Experiência com SQL;
Experiência com Cloud Computing (AWS);
Git, Data Lake e DW;
Exp. processamento de dados distribuídos como HDFS, S3, NoSQL, Hadoop, Spark, Hive, Oozie e Airflow em produção;
Exp. prática em distribuições Hadoop baseadas em MapR, Cloudera e/ou nuvem;
Exp. com definições de políticas de Segurança e Governança de Dados
Contribuição open-source e na comunidade
Forte comunicação e habilidade com a cliente, com capacidade de trabalhar em um ambiente de consultoria;
"Como o cliente descreve que estão seus dados""Como eles realmente estão!"Quem trabalha com consultoria aí? kkkkk dica do Victor Sotero
Flights departing Moscow and St. Petersburg today. The @AP is reporting international flights departing Russia have either sold out or skyrocketed in price after Putin announced a mobilization of reservists.
Search SVO, VKO, DME for Moscow airports and LED for St. Petersburg.
— Flightradar24 (@flightradar24)
4:55 PM • Sep 21, 2022
Essa visualização do perfil do Twitter do Flight Radar mostrando todos os vôos partindo de Moscow - e depois de São Petersburgo - no dia 21 de Setembro, dada a demanda gigantesca após o anúncio de Vladimir Putin da mobilização das forças reservistas para a Guerra da Ucrânia. Importante destacar que voos vindo da Rússia atualmente não podem passar pelo espaço aéreo da UE desde o início das sanções. (Em Inglês)