Weekly kaggle News登録しました

WeeklykaggleNews登録しましたhttps://www.getrevue.co/profile/upura闇雲にコンペに登録をしていても要領が得られないので登録。明日から新たに一つコンペが始まるようです名刺管理サービスを展開するSansan株式会社のデータを用いる「Sansan×atmaCup#6」コンペが10月19〜31日に開催されます。応募期間は10月4日までで、抽選で100人程度が参加できるとのことです。kagglelistも情報が取れるそうですがとりあえずTwitterのアカウントを作ってKaggleのアカウントをフォローしたWeeklykaggleNews登録しました

NLP With Disaster Tweets Prediction - BERT

今のところ一番gpuが高かったですファイルを読み込み欠損値を確認まずツイートの分類を確認していますそしてキーワードと投稿地について確認不必要な列と判断。行列から削除していますこのあとはテキストの補正を行なっています。ツイートのいくつかが繰り返し投稿されており誤分類されているため文字列補正を行なっていますこうした繰り返し文字列の削除ですidtexttarget56418044wowo--===12000Nigerianrefugeesrepatriated...056208018wowo--===12000Nigerianrefugeesrepatriated...160918698thathorriblesinkingfeelingwhenyou‰Ûªvebe...161238739thathorriblesi...NLPWithDisasterTweetsPrediction-BERT

Basic EDA,Cleaning and GloVe

Inthiscompetition,you’rechallengedtobuildamachinelearningmodelthatpredictswhichTweetsareaboutrealdisastersandwhichone’saren’t.この競争では、あなたは、どのツイートが本当の災害についてであるか、そして、どちらがそうであるか予測するモデルがそうでないということを知っているモデルを作るよう要求されます。まずはファイルを読み込んでいますtrain.csvidとkeyWord,location,text欠損値も多いです5列あるものが7613行4列あるものが3263行ありますidkeywordlocationtexttarget1OurDeedsaretheReasonofthis#earthqua...BasicEDA,CleaningandGloVe

災害時のツイートを解析しよう

RealorNot?NLPwithDisasterTweetsどのツイートが実際の災害に関するもので、どのツイートがそうでないか予測します。機械学習の入門的コンペ。賞金はないTitanicの次になんとなく面白そうだなと思い挑戦。まずは賢者の皆さんが作成したNotebooksを参照して勉強人気のNoteBookから選択精度としてはこんな感じ選択NoteBook各NoteBookについて簡単なコメントBasicEDA,CleaningandGloVe0.77658人気としては一番高かったが精度としてはイマイチ。これからみなさん追加をしていくようRealorNot?NLPwithTwitterDisasterTweets0.7916更新としては新しかったので参考にNLPWithDisasterTweetsPredic...災害時のツイートを解析しよう

はじめまして

kaggleに挑戦しています。なんだそれ？となってしまった人はまず本を一冊買ってゆっくり読んでみると良いと思います。簡単にいえば、kaggleとは世界中的な統計学、機械学習のコンペです コンペに参加して勉強していくのは勿論なのですが自分で解析勉強した内容を今後のためも含め忘備録として書いていこうと思います。ある程度勉強をし、実際にkaggleに挑戦している人を対象に書いています。 https://ja.wikipedia.org/wiki/Kagglehttps://www.kaggle.comKaggleは企業や研究者がデータを投稿し、世界中の統計家やデータ分析家がその最適モデルを競い合う、予測モデリング及び分析手法関連プラットフォーム及びその運営会社である。モデル作成にクラウドソーシング手法が採用される理由...はじめまして