Blog - LINE ENGINEERING

TAG ARCHIVES: Kubernetes

【インターンレポート】Istioの導入によるKubernetesクラスタの可観測性の向上
Yuki Endo2022-10-05
AIプロダクト開発2チーム
はじめまして、LINEのエンジニア就業型インターンに参加させていただいた、横浜国立大学大学院環境情報学府情報環境専攻情報学プログラム修士1年の遠藤祐輝です。普段はIoTマルウェアの通信に関する研究を行っています。今回、AI開発室のAIプロダクト開発2チームにサーバサイドエンジニアとして配属され、当チームで運用しているKubernetesクラスタへのIstioの導入およびIstioを利用した既存アプリケーションの改善に取り組みました。本レポートでは、Istioの導入背景や取り組んだ内容についてご紹介します。背景と目的 AIプロダクト開発2チームでは、CLOVA SpeechなどのAIに関連する様々なプロダクトを開発・運用しています。提供しているプロダクトの多くはマイクロサービスアーキテクチャに近い設計となっていて、複数のサービスがネットワークを介して連携しています。そこで、当チームではインフラとしてLINEのプライベートクラウド（Verda）が提供するマネージドなKubernetesクラスタを利用しています。また、計算機資源の最適化や運用の効率化のため、1つのKubernete
仮想ルータクラスタを自動でローリングアップデートする仕組みの検討と実装
Yamato Sugawara2022-01-21
はじめにこんにちは．2021年の4月からITSC Verda室のネットワーク開発チームでアルバイトをしている菅原大和(@drumato)と申します．本記事では，約半年間私が取り組んできたタスクである，｢SDNによって自動的に仮想ルータクラスタをメンテナンス，ローリングアップデートする仕組みの検討と実装｣についての成果をご紹介します．また，ここまでの活動で現在の実装が抱える問題点もわかったので，それも合わせて共有します．最後に，今後の私達のSDNシステムに必要な機能について取り上げます．背景 KloudNFVプロジェクトについて LINEのほとんどのサービスは，自社で開発/運用されているプライベートクラウドのVerda上で開発/ホスティングされています．その中には，ネットワーク的かつセキュリティ的に高い要件を持つサービスが存在します．これに対し私達は著名なパブリッククラウドにおけるVPCと同等の機能を提供する必要があります．ここでのVPCとは，隔離されたネットワークと，NATやNetwork ACLなどのNFVサービスを連携して提供するものです．このうち前者に関しては，インハウスで開
【インターンレポート】Kubernetes OperatorによるVerda Cloudの構成管理
Manaya Sasaki2021-10-25
はじめにこんにちは、電気通信大学学部3年生の佐々木です。8/16から約6週間、技術職就業型コースのインターンシップに参加しました。私は、VRE(Verda Reliability Engineering)チームに配属され、Verda Resource Operatorの実装に取り組みました。 VerdaとVREチームについて VerdaとはLINEがもつPrivate Cloudのことです。Verdaでは、物理サーバーをOpenStackによって管理し、様々なサービスをLINEの開発者に提供しています。提供するサービス毎にチームが存在し、Kubernetes as a Serviceを提供しているチームもいれば、LoadbalancerやNATを提供しているチームもあります。VREチームでは、そういったチームが開発や運用を効率化するための施策を横断的に行っています。より詳細な話はこちらの記事に詳しく載っているので、興味のある方は是非ご覧ください。https://gihyo.jp/dev/serial/01/line2021/0008?page=1 Verdaのリソース管理に
【インターンレポート】タスクキューを用いたタイムラプス作成等の高負荷な処理の高速化
Sora Takashima2021-09-17
はじめに初めまして！LINEの2021年度夏季インターンシップ「技術職就業型コース」に、8月から9月の計6週間で参加させていただいた高島空良と申します。私は現在、東京工業大学情報理工学院情報工学系の修士1年で、大学では大規模データセットを用いた並列分散深層学習についての研究に勤しんでいます。今回のインターンシップでは、LINE株式会社のAIカンパニー/AI開発室という部署に所属し、メンターとして同部署所属の四倉晋平さんにご指導していただきました。「AI開発室」というゴリゴリにAIの研究開発をしている部署ですが、私がインターンで取り込んだ内容はAIそのものの研究開発ではなく、既存AIを活用したアプリケーションやシステムを構築する上で必要な技術要素の開発で、職種としてはいわゆる機械学習エンジニアではなくインフラ/サーバーサイドエンジニアに近しいことをやりました。今回のインターンでは、タイムラプス作成等の動画像処理や機械学習関連の処理のような「長時間を要する高負荷な処理」を複数同時に扱う大規模なサービスを提供するために、複数処理を複数サーバーに並列分散して高速化できるシステムを開発し
- Kubernetes
- line-intern-ja
【Team & Project】OpenStackとKubernetesを用いたVerda Platformを開発しているチームを紹介します
LINE Engineering2020-04-24
LINE Engineering Blog official account
LINEの開発組織のそれぞれの部門やプロジェクトについて、その役割や体制、技術スタック、今後の課題やロードマップなどを具体的に紹介していく「Team & Project」シリーズを開始します。第一回目である今回は、インフラ領域を統括するITサービスセンターでPrivate Cloud「Verda」を企画・開発・運用するVerda室において、OpenStackとKubernetesを用いたVerda Platformを開発しているVerda Platform開発チームを紹介します。 Verda Platform開発チームのzoom会議の様子 Verdaは、LINEの共通インフラ基盤であるプライベートクラウドです。LINEでは、厳密なセキュリティポリシーとプライバシーポリシーがあるため、そのモデルに適用させるには既存クラウドでは難しく、セキュリティ、規模、プラットフォームの成熟性、コストを考慮して、社内でプライベートなクラウドプラットフォームを構築しました。現在、LINEグループ内の全ての社員向けに提供されています。そしてプライベートクラウド自体は、60名ほどのインフラエンジ

1