- はじめに - データ分析、機械学習という仕事柄、csvやtsvを見る機会が多い。処理する時は大体はpythonのpandasで読み込んで〜とするのだが、コンソール上で作業する時、どうしても「このcsvなんだっけ…」という事が発生する。 cat hoge.csv | head 等とし…

- はじめに - 以下、MANABIYA techなるイベント内のAIセッションにて登壇させて頂きました。manabiya.tech大きなスペースでフザけたタイトルで発表するという最悪さでしたが、満員になり立ち見状態でした。 ありがとうございました。 正当な方向性でいけば登…

- はじめに - xonshで作業をしているとつい時間を忘れてしまうので、時間を表示してやるメモ。POWERLINEで良くみるやつをxonshrcで実装。 - timeを表示する - コンソール上の右側に表示するにはこんな感じ from time import strftime $RIGHT_PROMPT = lambda…

- はじめに - Qiitaは、プログラミングに関する知識を記録・共有するためのサービスです。Qiitaアカウントには企業情報が紐付いている場合があり、Qiitaの様々な記事から情報を取得し分析する事で「機械学習を記事を多くストックしている勉強熱心な会社はこ…

- はじめに - 本を読んで筆者に媚を売る記事シリーズです。「人工知能プログラミングのための数学がわかる本」という書籍を筆者の石川 聡彦（Aidemy）@akihiko_1022さんから譲り受けました。人工知能プログラミングのための数学がわかる本作者: 石川聡彦出版…

- はじめに - この記事の起点となったのは、2018年1月25日、共同通信が配信した「山中氏、科学誌創刊に深く関与か」というタイトルの記事が、同日午後8時頃「山中所長が給与全額寄付」というタイトルの記事に書き換えられていた件である。下記ツイートの通り…

- はじめに - Python APIを備えた自動車運転シミュレータである「CARLA: An Open Urban Driving Simulator」を動かすまでの記事です。CARLAはConference on Robot Learning 2017でも発表された、Unreal Engine 4を使ったシミュレータパッケージです。 自動運…

- はじめに - この記事は、Xonsh Advent Calendar 2017 - Qiita 21日目の記事です。xonshには.xonshrcに加えて、staticなjson形式のconfigファイルで設定するパラメータがある。本記事では、config.jsonの書き方について記載する。 xonshrcについては以下 va…

- はじめに - この記事は、Xonsh Advent Calendar 2017 - Qiita 18日目の記事です。Pythonのmoduleのloadを実際に利用する前に遅延してやろうというTipsです。加えて、xonshのxonshrcに記載する事で、xonshの起動も早くしようという話を書いています。 アジ…

- はじめに - この記事は、Xonsh Advent Calendar 2017 - Qiita 25日目最終日の記事です。本記事では、PythonスクリプトでHatenaブックマークのホットエントリのリストを取得、xonshへ表示する内容を記載します。 - Hatenaホットエントリの取得 - はてなには…

- はじめに - この記事は、Xonsh Advent Calendar 2017 - Qiita 23日目の記事です。遅れ気味ですが、Python Prompt Toolkit (以下、ptk)を利用して、対話型のセレクタ(上下矢印で回答を選択できるやつ)を作りたいなと思います。名前が分からないんですが、se…

- はじめに - この記事は、Xonsh Advent Calendar 2017 - Qiita 16日目の記事です。前日のxonshのExceptionを見やすくする記事で手こずって遅れ気味です。本記事では、Xonshの大事なCore Eventsについてまとめます。 アジェンダ - はじめに - - xonshのCore …

- はじめに - この記事は、Xonsh Advent Calendar 2017 - Qiita 15日目の記事です。完全に遅刻しています。3日間xonsh本家のコードを読みながら「あーでもないこーでもない」とやっており遅れました。結論を先に述べてから、後半でその経緯も話します。 Xont…

- はじめに - PythonでOSSパッケージ等を利用していると、Exceptionが発生した際に表示されるTraceback(正確にはスタックトレース)がかなり長い場合がある。例えば、以下の簡易なコード実行で表示されるTracebackの行数は30近くなる。 import pandas as pd d…

- はじめに - この記事は、Xonsh Advent Calendar 2017 - Qiita 14日目の記事です。xonshにおけるいわゆる拡張機能であるところのxontribについて書いていきます。「オススメXontrib！」と行きたい所ですが、そもそも2017年末時点で公開されているxontribは…

- はじめに - この記事は、Xonsh Advent Calendar 2017 - Qiitaの9日目の記事です。1日目にXonshを勧める記事を書いて「アドベントカレンダーでxonshrcのオススメ設定が出揃う」と言ったものの、なかなかそれらしい記事が出てこないので書いておきます。 Pyt…

- はじめに - この記事は、Xonsh Advent Calendar 2017 - Qiitaの6日目の記事です。せっかくxonshではMatplotlibが使えたりするので、Command履歴の分析等の補助をする関数を書いてメモしておきたいと思います。 - xonshのhistory - xonshの過去の入力履歴は…

- はじめに - この記事はXonsh Advent Calendar 2017 4日目の記事です。Xonshの中にはxontribというメソッド群が存在します。 その中のmplhooksは、画像の描画をサポートしてくれます。本記事では以下について記述します xontrib.mplhooksを利用したxonshコ…

- はじめに - この記事は Webスクレイピング Advent Calendar 2017 - Adventar の1日目の記事です。近年では、Pythonが様々な場面で使われるようになりました。 Webからデータを取ってくる際のスクリプトとして利用し、そのままデータを機械学習における学習…

- はじめに - この記事は Xonsh Advent Calendar 2017 1日目 の記事です。タイトルが煽りです。なんとなく贈るという単語が12月っぽいです。内容は、Pythonで動くShellである「xonsh」の勧めを書く記事です。 - xonshとは - xonshは、Pythonで作られたクロス…

- はじめに - シンガポールで行われているInternational Conference on Information and Knowledge Management (CIKM) 2017に参加した。workshop day + main conference day (3day) の合計4日間。 メモはその場で書いたものを少し編集しただけで、論文を詳し…

- はじめに - シンガポールで行われているInternational Conference on Information and Knowledge Management (CIKM) 2017に参加した。workshop day + main conference day (3day) の合計4日間。 メモはその場で書いたものを少し編集しただけで、論文を詳し…

- はじめに - 以下を読んで、筆者ら (@chezou, @tokoroten, @hagino3000) ともTwitterで相互フォローだし、いっちょ媚び売るために感想記事でも書いとくかみたいな記事。www.oreilly.co.jp私は「企業で機械学習プロジェクトをいくつか経験している」「書に載…

- はじめに - 端的にやりたい事を画像で説明すると以下 データ標本から確率密度関数を推定する。 一般的な方法としては、正規分布やガンマ分布などを使ったパラメトリックモデルを想定した手法と、後述するカーネル密度推定(Kernel density estimation: KDE)…

- はじめに - GithubのPull Requestを大体1日以内に処理するルールだったのだが、Repositoryが増えて全然管理できなくなったりしたので、Reviewerに入っていてApprovedしてないものだけSlackに通知しようとこねくり回したGoogle Apps Script。Lambdaとかを使…

- はじめに - 業務で社内SNSとしてWorkplaceを使っていた。デフォルトのWorkplaceは「人気の投稿」や「チャット」が常に画面内に表示されており、見辛く辛い部分が多いので、それらを解決するTipsを書いておく。Workplaceユーザ向け。 - Chrome拡張を導入す…

- はじめに - 弊社では、WorkplaceなるFacebookを模した社内SNSを利用している。 1年弱使ったが、非常に出来が良くなりつつある社内ツールである。見やすく扱いやすくするTipsも書いたくらい使っている。 vaaaaaanquish.hatenablog.com WorkplaceにはGraph A…

- はじめに - Webから文章を取得して、自然言語処理かけた後に機械学習にかけるみたいな事はままある。大体Docker使えば良いんだけど、そうじゃないんだよなという時のための個人的なメモ。Ubuntu 16.04でPython3.xなら大体インストールできるはず。 - スク…

- はじめに - 正直今時AWS LambdaがSlackサポートしていてポチポチやってスクリプト数行でbotが出来るし、フレームワークも充実しているので、何故今更GASなのかと思ったらブラウザバックした方が良い。 hubotもAWSも実質サーバ代がかかるけど `GASは無料` …

- はじめに - Pythonで機械学習スクリプトを回して終了した際にSlack通知欲しい場合がある。SlackへPostする方法はいくつかある。多分Incoming WebHooksで設定するのが一番楽。数分でできるメモ - Slack側の設定 - 自分が参加しているhogehogeチャンネルのcu…