Differences

This shows you the differences between two versions of the page.

Link to this comparison view

Both sides previous revisionPrevious revision
Next revision		Previous revision
work:2024-6 [2024/02/06 02:11] – magsilvawork:2024-6 [2024/02/06 19:01] (current) – [Pesquisa] magsilva
Line 28: Line 28:
       * valid_dataset = load_dataset("kevinjesse/ManyRefactors4C", split="validation")       * valid_dataset = load_dataset("kevinjesse/ManyRefactors4C", split="validation")
       * test_dataset  = load_dataset("kevinjesse/ManyRefactors4C", split="test")       * test_dataset  = load_dataset("kevinjesse/ManyRefactors4C", split="test")
 +  * Com um pouco de atraso, mas li o email da Open AI sobre o AI2 LLM framework e o OLMo - Open Language Model (conteúdo completo em https://blog.allenai.org/olmo-open-language-model-87ccfc95f580).  O AI2 LLM framework é um framework para criar LLM, totalmente open source, abrangendo desde dataset e o código fonte utilizado para criar o modelo. 
 +    * OLMo - Open Language Model: https://allenai.org/olmo 
 +    * Dolma, que é o corpus aberto utilizado para criar o LLM: https://arxiv.org/abs/2402.00159 e https://github.com/allenai/dolma