728x90 반응형 Bigdata12 alembic.util.exc.CommandError: Can't locate revision identified by '22ed7efa9da2' airflow db upgrade를 실행 하다가 다음과 같은 에러가 발생하였습니다.alembic.util.exc.CommandError: Can't locate revision identified by '22ed7efa9da2'여기 저기 뒤져보니..머머를 삭제하면 된다고 했지만,저는 alembic을 초기화하니 해결 되었습니다.alembic init alembic 그리고 alembic.ini 파일 sqlalchemy.url 값을 수정하였습니다.sqlalchemy.url = mysql+pymysql://user:pass@localhost/dbname편의상 airflow-venv 위치에 했습니다. 2024. 8. 23. Class org.apache.oozie.action.hadoop.SparkMain not found Error Messagejava.lang.ClassNotFoundException: Class org.apache.oozie.action.hadoop.SparkMain not found Bug Fixoozie.use.system.libpath=trueoozie.action.sharelib.for.spark=spark-${version} 2024. 7. 5. Could not find org.pentaho:pentaho-aggdesigner-algorithm:5.1.5-jhyde. Error Message$ ./gradlew build> Task :compileJava FAILEDFAILURE: Build failed with an exception.* What went wrong:Execution failed for task ':compileJava'.> Could not resolve all files for configuration ':compileClasspath'. > Could not find org.pentaho:pentaho-aggdesigner-algorithm:5.1.5-jhyde. Searched in the following locations: - https://repo.maven.apache.org/maven2/org/pentaho/pe.. 2024. 6. 25. Airflow Plugins Airflow에는 $AIRFLOW_HOME/plugins 폴더에 파일을 놓으면 외부 기능을 코어에 통합할 수 있는 플러그인 관리자가 내장되어 있습니다. 플러그인 폴더의 Python 모듈을 가져오고, 매크로와 웹 보기가 Airflow의 기본 컬렉션에 통합되어 사용할 수 있습니다.airflow plugins 명령어: 로드된 플러그인에 대한 정보를 덤프버전 2.0에서 변경됨: airflow.{operators,sensors,hooks}.을 통해 플러그인에 추가된 연산자, 센서, 후크 가져오기는 더 이상 지원되지 않으며 이러한 확장은 일반 Python 모듈로 가져와야 합니다. What for?조직마다 스택과 요구 사항이 다릅니다. Airflow 플러그인을 사용하면 기업이 생태계를 반영하도록 Airflow .. 2024. 5. 28. 이전 1 2 3 다음 728x90 반응형