shobylogy

叩けシンプルの杖

政府統計から市区町村ごとの空室率を出す

不動産の分析において重要なのが空室率です。 空室率を見ることで、そのエリアの不動産の需給バランスが適切かどうかを判定することができます。 今回は、住宅・土地統計調査という政府の統計データから、市区町村ごとの空室率を出す方法をご紹介します。 住…

不動産データを抱えるレインズとは何か

前回、不動産テックのためのデータはどこにあるのかを調査したところ、レインズというサービスが出てきました。 今回は、多くの不動産データを抱えるレインズというサービスについて調べた結果をお伝えします。 レインズとは レインズのデータについて レイ…

不動産テックのためのデータセットはどこにあるのか

近年、不動産テックといった文脈で「不動産ビッグデータ」や「不動産AI」といった話をよく聞きます。 とは言え、そんな分析に使えるデータセットはどこにあるのでしょうか。 結論としては「都合の良いデータセットはない」という話になってしまうのですが、…

不動産価格推定サービスと精度まとめ

近年、USで不動産価格推定サービスが盛り上がっているおかげで、日本でも不動産テックや不動産価格推定といった言葉をよく聞くようになりました。 個人的に気になったため、巷でよく聞く不動産価格推定サービスの推定精度をまとめました。 海外 Zillow https…

Redashを用いたデータの民主化を進めやすくするための工夫

エンジニア、データサイエンティストの皆さん、こんにちは。 事業におけるデータの重要性が増した昨今、皆さんはビジネスサイドからの「こんなデータを出して欲しい!」といった要望に忙殺されていませんか? 往々にして、データ抽出作業は専門家による聖域…

Redashでユーザーのpasswordをリセットする

Redash 4.0.0以降の場合、admin権限があれば管理画面から任意のユーザーのpasswordを再発行することができる。 Redash 4.0.0未満、もしくはadminユーザーのpasswordが分からなくなった場合、サーバーに入ることができれば、cliからpasswordをリセットするこ…

Amazon AthenaでCSVに含まれていない情報をS3のフォルダ名から取得する

Amazon AthenaでCSVに含まれていない情報をS3のフォルダ名から取得する場合に苦労したため、解決方法を紹介しておきます。 結論から言うと、partition分割を使い、フォルダ毎にpartitionとして読み込むことで、AthenaのSQLからフォルダ名を参照することでき…