DNNの新しいモデル圧縮手法。フィルタの冗長性を排除するために、個々のフィルタ重みの重要度を見るのではなく、重みの相関が大きいペアを反復的に同定して各ペアから１つずつ削除していく。削除の前に各ペアの相関を高めるような最適化をし情報の損失を抑え…

自発的な笑顔を認識するためのEnd2Endのアーキテクチャの提案。手動でのランドマークのアノテーションや特徴量の操作が必要ない。従来技術と異なり様々な長さの動画を扱うことができる。ネットワークもコンパクトでリアルタイムを達成するのに十分な速さ。ht…

最近のDLベースのInverse Renderingの論文をまとめた（光源推定、Intrinsics分離）https://t.co/QkHocpVBD3— Teppei Kurita (@kuritateppei) 2020年11月30日 ソニー「αアカデミー」のカメラ講座がオンラインで無料公開 - デジカメ Watch https://t.co/mVQedr…

5つの異なるデータセットで8つのNASの性能を評価するコード。https://t.co/jYPOdk6m3o— Teppei Kurita (@kuritateppei) 2020年10月20日 最近地味に感心したこと。 pic.twitter.com/DqnINNqAeL— Teppei Kurita (@kuritateppei) 2020年10月19日 近年の単眼Dept…

数枚の撮影画像からSVBRDFを再構成する。従来は様々な正則化Priorを利用してきたが、ここではStyleGAN2をベースとしたMaterialGANを提案。SVBRDFパラメータの相関関係を学習し、材料についての強力なPriorとして機能することを示している。Limitation:オブジ…

やっかいな式の非線形関数近似が一瞬で出来た、ありがたい。。Pythonで非線形関数モデリング https://t.co/r06QTmfNFt #Qiita— Teppei Kurita (@kuritateppei) 2020年9月28日 逆にアルゴリズム開発とかでswitch文書くとき、下手に気を使ってdefault書いたせ…

非常に高速な処理が要求される場合、Depthの境界や急伸な変化がある画素のみにバイラテラルフィルタをかけることがDepth Refinementとしてコスパ良いですよという話。https://t.co/ygWEEPxdkl— Teppei Kurita (@kuritateppei) 2020年9月30日 単一画像のBlind…

1000000000(10億)FPSで絶縁破壊を捉えた映像。https://t.co/Tyjgi9QGIv— Teppei Kurita (@kuritateppei) 2020年8月23日 0.004～0.009ルクスでも視認性の高いRGB画像が取得可能。Image Sensors World: Dahua Cameras with Sony Starvis Sensors Provide Co...…

透明物体(窓、瓶…)のセグメンテーションは難しいが、既存のデータセットのデータサイズは小さかった。そこで1万枚以上からなる大規模な透明物体のデータセットを提案。更に最先端の手法(DeepLabV3+)でも困難なセグメンテーションを可能にする境界を意識した…

画像から画像に変換するタスクにおいて、教師あり教師なし共に統一的に扱えるシンプルなネットワークの提案。簡単に言うとpix2pixとCycleGANのような操作が同じネットワークとロス関数(Cycle-Consistency不要)で可能になるということ。しかも性能が高い。ECC…

PyTorch1.6、これが気になるNew profiling tools providing tensor-level memory consumption information;https://t.co/GcBzKyM03X— Teppei Kurita (@kuritateppei) 2020年7月31日 これ滅茶苦茶わかりやすいな。最近のイケてる（CIS, SPAD, Quanta）イメー…

torch.kthvalueはnumpyのpercentile的にTensor中の上位数%の値を抽出したい場合に使えて便利。https://t.co/w64lB920bU— Teppei Kurita (@kuritateppei) 2020年6月27日 放射束は単位時間あたりの特定領域を通過するフォトン数のことだが、基本的なシーンは光…

極端な低解像度の顔の画像と、音声を入力として、高精細な顔の画像を生成する。普通に学習させると、2つの入力信号のモダリティのギャップが大きく、音声情報が上手く使われない。そこで両者委の信号が共通の潜在表現にマッピングされるように個別のエンコー…

NN環境照明推定 Deep Outdoor Illumination Estimation (CVPR2017) Adobe 屋外 使用データセット：Sun360 Dataset 論文概要：https://github.com/tkuri/papers/issues/107 Learning to Predict Indoor Illumination from a Single Image (SIGGRAPH ASIA 2017…

最新版以外のライブラリ Package Version Latest Type ------------------------ ------------ ----------- ----- albumentations 0.1.12 0.4.5 sdist beautifulsoup4 4.6.3 4.9.1 wheel bokeh 1.4.0 2.0.2 sdist boto3 1.13.13 1.13.16 wheel botocore 1.16…

sRGB迷子になってたところに良い記事が。ガンマ補正のうんちく https://t.co/vbP66RoriC #Qiita— Teppei Kurita (@kuritateppei) 2020年6月1日 知らないことが多くて勉強になった。意外と奥が深い、HDFの世界（Python・h5py入門） https://t.co/yLaZKZ9Wla #…

画像から物体の反射率・形状・照明条件を推定する。教師ありでまず分解を学習しておいて、元画像に戻すように自己教師あり転移学習で再合成誤差を最小化する、転移学習中は元のラベルつきのデータをミニバッチの半分だけ混ぜることで解が単純化されるのを防…

なるほど。自分が買おうとしている色温度4000KのLEDが12Wで、5000KのLEDが15Wなので、これは明るさじゃなくてそのまま消費電力を表しているということで素直に解釈して良さそうということがわかりました。ありがとうございます！— Teppei Kurita (@kuritatep…

機械学習ベースのオートフォーカスの最新手法。スマホを同期させMVSで得られたDepthとフォーカルスタック49枚を対応させた大規模なデータセットを作ったのがキモ。MobileNetV2でスマホ上で32.5msで動作、単一画像入力、フォーカルスタック入力どちらでも動作…

Mitsuba2の微分可能レンダリングの原理・アプリケーションとサンプルコードを動かすまでを書きました。次は偏光レンダリングの話を書く予定です。最新物理ベースレンダラー Mitsuba2を触ってみる (3) 微分可能レンダリング編 https://t.co/T0mNsiIgR6— Teppe…

影画像と影なし画像のペアじゃないデータから学習し、影除去する初の試み。基本CycleGANなのだが、入力の影画像から影マスクの生成を学習し、そのマスクを利用し影なし画像から影画像を生成することでCycle-Consistencyを維持する。結構、汎用的な考え方なの…

母さん…僕サブピクセルのずれも許さずにはじめての鳥瞰図変換できたよ…。やはりこういう基本アルゴリズムをやるときは真値が得られるCGで練習するのが絶対正義ですね…。あとは補間とか面白い課題が残ってる、CNN使っても良いなー。 pic.twitter.com/M6H642ib…

Imecのイメージング技術についての資料。個人的には70ページくらいからのGlobal Shutterやハイフレ技術について、素人でもわかるように簡潔にサマリが述べられていて参考になった。https://t.co/NTDyyfCwBz— Teppei Kurita (@kuritateppei) 2020年2月25日 "C…

自転車を店前に置いてたら、鍵とブレーキがバッキバキに壊されていた。ここがLAだということを忘れていた。— Teppei Kurita (@kuritateppei) 2020年10月19日 等色関数、世界中の人間が使う色の基準が、被験者17人の平均値で決められたって今考えるとヤバすぎ…

英語について。少し更新した。これからの時代の英語との付き合いかたについて｜kurilab @kuritateppei #note https://t.co/4GFydufMI8— Teppei Kurita (@kuritateppei) 2020年12月10日 CV+偏光の論文についてまとめてる。最近流行っているがそもそも結構ニッ…

PyTorchの便利な学習済みモデルたち。https://t.co/GJ442pEvG7pip install pretrainedmodels#Qiitaに書くまでもないメモ— Teppei Kurita (@kuritateppei) 2020年1月31日 書きました。PyTorch1.4での新機能 Schedulerのchainingを試す https://t.co/5B57RZcDS…

読んだ論文：9本 技術記事引用：1本 Imecの新しいHyperspectralカメラはInGaAsでSWIRまでの波長をカバー。アプリケーションは水分、脂質、タンパク質含有量などの分析。２種類のデモザイクにより3x3と4x4の波長感度が異なる配列を生成、アプリケーションで使…